在插件市场找到AI魔方子插件,点击后会跳转至商店应用安装,请联系本租户的飞书审批安装权限。
效果展示:
功能名称
具体作用
效果展示
注意事项
操作方式
通用Prompt
以参考文案字段内容为基础(点击引用字段按钮添加),根据提示语生成需求文案内容。
[7月1日.mp4]
Q:我想给大模型提供文案参考,参考文案在什么位置输入呢?
**A:**点击引用字段按钮,添加需要作为输入的字段即可。
点击通用prompt功能块
选择数据表
配置可以实现文生文能力的模型,并输入prompt。prompt中可以使用引用字段功能,引用字段选中的字段,会作为大模型的输入内容作为生成的参考
选择结果保存的列
Q:我选了表,但是我没有可以选的列
**A:**通用prompt目前仅支持文本类型字段输入和输出,数据打标场景仅支持单选和多选字段作为输出,大家有时选了表但是选不到列可能是因为没有支持的字段类型,此处正在排期优化
翻译
根据原文内容,进行翻译。如有精确翻译需求,需添加术语表,AI魔方会根据术语表内容做智能参考,帮助您更精确的翻译。
[翻译.mp4]
Q:术语表有什么作用?
**A:**如果只需要进行粗糙的翻译,直接选中要翻译的内容、需要保存的列即可。
但如果需要精确翻译,就需要术语表。例如:如果您需要翻译Byte dance为字节跳动,直接选中“翻译的内容、需要保存的列”,将不会准确。
如果您希望自己内术语得到准确的翻译与参考,您需要点击下载模版,在术语名词和正确翻译这两个字段中填写您的术语,再上传回去。这样对后续的翻译工作非常有帮助。(注意,这两个字段名词不能修改,否则无法识别)
图片识别
根据输入图片内容,在选择的列中返回需要返回的文本内容。
注意!图片识别功能只能支持在附件字段传入PNG、GIF、JPG格式图片;同时如果在附件字段中传入空附件,会自动跳过不报错。所以注意检查附件是否为空。
[图片识别.mp4]
Q:图片识别好像不太好用的样子
**A:**默认模型的图片识别场景表现不佳,是由于我们接入的多模态模型能力暂不足,请在符合自己数据合规要求的前提下,使用自定义模型
Q:可以做图片对比吗?
A:暂时不行。
Q:如果是单据类的照片,能AI识别提取关键信息嘛?
A:现在已经支持了识别图片中文字的任务类型,但对表格类型的数据结构可能识别不一定准,需要自行测试效果
AI归类
[AI归类.mp4]
Q:归类的结果在哪呀?
**A:**归类的结果会生成在一张新的数据表中。名称为“输入数据数据表名称”+归类。
如果什么prompt都不填入,将会自动按照选中字段的文字内容进行分类,根据文本的侧重点分类并提炼分类名称。
数据打标
预先设置好单选或者多选字段的选项。该功能将自动根据选中字段的文本内容按照选项进行打标。
[数据打标.mp4]
Q:数据打标可以输出到文本字段吗?
A:数据打标目前仅支持输出到单选或多选字段,并且会自动读取当前单选/多选字段下的选项内容给大模型作为打标参考。
图片生成
根据输入文字内容,返回需求的图片。
[图片生成.mp4]
Q:为什么我用默认模型生成的图片这么小?
**A:**注意:默认模型与自定义模型只能生成固定的尺寸。
512 x 512 – 默认模型
1024 x 1024 – 自定义模型
表格快填
根据字段内容,自动创建行与单选或多选内容。上限为20行。
[表格快填.mp4]
Q:为什么只能生成20行?
**A:**现在是限制 20 行。因为是随机数据填入,太多也没有必要。
Q:这个跟通用Prompt看起来差不多呢
**A:**哈哈哈,这个加了字段逻辑判断的 prompt,比如生成 10 条数据,当字段“任务状态”为“完成”的时候,它会自己将“任务进度”设置为“100%”
PDF识别
根据输入的PDF内容,自动总结图片中核心要点。
[Pdf识别.mp4]
Q:为什么我的图片无法识别?
**A:**默认模型当前的token 上线仅 4k,只能用于一些较短内容的 pdf,如需识别大量文本,需配置自定义模型来使用
Q:这个功能支持批量提取PDF文档中的某些字段内容,然后汇总合并到表格或在线表格中吗?
**A:**目前的逻辑是你可以要求设置多列,每一列的结果可以保存为一个字段+一个prompt,这个插件本身就是在表格中使用的~所以需要先把pdf上传到表格中。但是目前默认模型的token上限只有4k,所以pdf大于600kb基本上就要用自定义模型来接了~
🆕 AI VlLOOKUP
根据数表A的内容,在数表B中进行查找匹配对应,并在数表A中新建一列-AI VLOOKUP,将B的对应内容放在这一列中,点击即可查看。
[6月28日(1).mp4]
无
其他模型(sk-xxx,sess-xxx):
3.5-turbo
4-turbo-preview
4-vision-preview
绘图3
绘图2
Embedding
Azure
3.5
4
绘图-3
4-vision
Embedding
智谱
GLM-4-0520
GLM-4
GLM-4-AirX
GLM-4-Air
GLM-4-Flash
GLM-4V
CogView
Embedding-2
月之暗面(moonshot)
moonshot-v1-8k
moonshot-v1-32k
moonshot-v1-128k
百度千帆
平台配置模型
自行部署模型
步骤
示意图
新建一个表格,点击插件
弹出页面后,点击探索插件市场
搜索AI魔方,点击使用
非字节租户,需要本租户飞书同意审批,将AI魔方安装下来。
出现该界面,提示需要完成插件配置,进入下一步。
步骤
示意图
点击插件
点击右下角的
点击自定义插件页面中的
(确保自己是表格的所有者,不然会存在授权码获取失败的情况)
点击并
粘贴授权码至AI魔方配置页,保存
默认模型申请步骤:
自定义模型配置步骤(非必须,当默认模型能力不满足时,可自行配置):
步骤
示意图
点击AI魔方首页-
点击
选择自己key对应的平台
输入平台参数:
其他模型(sk-xxx,sess-xxx):key
Azure:key、end-point
选择希望在AI魔方中使用的模型
其他模型(sk-xxx,sess-xxx):仅选择模型即可保存
选择希望在AI魔方中使用的模型
Azure:
点击添加模型
选择希望配置的模型类型(Feature)
文生文:和
多模态:
文生图:
Embedding:具体类型可以在用户反馈群中提问
文生文+多模态:同时支持文字和图片输入的模型,比如 4o 和 4turbo
输入部署在Azure的模型名称(Model)
AI 魔方中的** Model **实际对应的是Azure 中的 Depolyment name
输入希望使用的接口版本(Version)YYYY-MM-DD 格式
此处为 Azure API 版本(API Version)
一般取默认值 . 如果有问题的话, 可以点击** Open In Playground**, 然后点击 View Code, 在弹框中可以看到
保存
国内兼容OpenAI SDK的自定义模型也可接入
可配置使用兼容OpenAI SDK的模型,如阶跃星辰、DeepSeek、百川智能
1选择平台处选择国内其他模型
2 填入baseurl和key
3 填入Feature和Model(Model 填写模型厂商对应的 model id 或 name,具体看接口参数)
步骤
示意图
进入https//www.zhipuai.cn/,并访问开放平台
开始使用
注册
实名认证
打开API key
获取你的API key
进入AI魔方、打开插件,名称写啥都行,粘贴key,模型选择红框的这2个,点击保存,就成功啦!
3.3.1 企业配置流程
步骤
示意图
激活高级配置
自定义模型点击
添加配置
立即激活企业配置。(需要飞书同意审批)
激活后进入AI魔方配置后台,点击添加配置
配置方式与模型配置部分一致
3.3.2 个人配置跨表可用
个人模型配置完成后,在本租户内,可跨表使用。
3.4.1 使用前置准备
!字节租户无法使用,其他租户可安装商店应用-AI 魔方后,激活高级配置使用。
自动化流程在任何配置条件都不完成的情况下也可使用,默认使用默认模型的能力。如果需要使用自定义模型能力,自动化流程配置情况与侧边栏插件的配置列表同步,参考上述授权码配置与自定义模型配置的说明。
3.4.2 使用方式
步骤
示意图
点击AI魔方侧边栏的立即激活
点击自动化
创建自动化流程
选择触发条件
(如果选择的是按钮触发,需要在数据表中创建按钮字段列)
除了 webhook 和定时两种触发条件外,都支持。
新建一个按钮字段
按钮是灰色,代表还未绑定自动化流程。
选择触发字段
选择自动化流程
目前支持图片生成、图片识别、数据打标、通用prompt、翻译、PDF识别这六项功能。
使用各个子功能时,选择模型时的加载可能需要等候的时间比较长(一直在转圈圈),请耐心等待15S到1min。
如果一直加载不出来,点击下方“保存并使用”,再重新编辑流程。
1 图片生成
2 图片识别
3 数据打标
4 prompt
5 翻译
6 PDF识别
点击保存并使用
触发流程
(如点击按钮)
配置项
示意图
说明
提示语
提示语会作为给大模型的直接提示,你可以在任何子插件的提示语中,描述你的需求,比如在翻译子插件中:
AI魔方以表格的每一行的数据作为源数据请求大模型处理,在 通用prompt 场景(其他场景暂不支持)中,你可以通过使用 ,来引用每一行中其他字段中的内容
源内容所在位置
以翻译为例,在填写完提示语之后,需要选择待翻译的内容位置
数据表:即当前表格下的每个数据表
选择列:即选择数据表下的字段名
仅处理选中的行
打开该开关时,需要勾选你希望处理的表格记录最左侧的复选框,在发起任务时,仅会对选中的记录做处理
保存结果的位置
默认保存的数据表,和源内容中的数据表是一致的
此处仅需选择希望将结果保存在哪个字段即可
历史prompt
可以在生成时自动保存本次 prompt,同时在下次使用同一个场景时,可以直接从历史记录中导入 prompt。