向量脉络最近更新了什么 #5

by 毕老师

2024/3/20 14:35:57

向量脉络最近更新了什么 #5

朋友们好,一转眼又三个月过去了,向量脉络近期的一些更新再来跟各位反馈一下,欢迎大家来试用新功能!

📱 VApp 工作流应用

经过快一年的发展,工作流的使用场景越来越多,但设计和使用的比例基本上还是二八原则,即 20% 的用户设计了 80% 的工作流。对于大部分用户而言自行设计并使用工作流的门槛还是有点高。我从咱们用户这里了解到的实际情况大部分是一个公司或者一个部门有一个比较了解技术的人,设计完成工作流以后再通过分享模板的方式让同事来直接使用工作流。 然而分享出去的模板在被用户添加后无法更新,同时积分消耗也无法统一管理。还有的朋友希望保护自己辛苦设计的工作流,不想分享出去,但希望通过让别人使用工作流来挣钱,为了解决这些问题,我们推出了 VApp 工作流应用。 VApp 是将工作流转换为简单的网页应用的工具,可以通过创建访问密码将工作流安全地分发给不同的用户,控制使用量,同时还可以在无需通知用户的情况下更新工作流。

2403 vapp,ocr、长文 - 图1

点击查看 VApp 帮助文档

访问密钥

访问密钥是 VApp 用来控制访问权限的核心机制,可以生成一次性、多次使用、长期密钥,并且可以设置过期时间。

2403 vapp,ocr、长文 - 图2

对于您创建的访问密钥可以查看其使用情况如下:

2403 vapp,ocr、长文 - 图3

工作流同步

VApp 不会实时同步您选择的工作流,这一设计的考虑是方便您在工作流更新后进行测试,确认无误后再同步更新 VApp。

2403 vapp,ocr、长文 - 图4

VApp 使用

分发给用户的 VApp 用户可以通过链接进行访问,无需注册平台账号,点开即用。该访问密钥的工作流运行记录在页面即可查看。

2403 vapp,ocr、长文 - 图5

🔎 关系数据库

在向量数据库之外,我们现在增加了关系型数据库,也就是大家熟悉的表格数据。向量数据库与关系数据库可以算是互相补充的关系,向量数据库能够快速检索相似的信息,但实际工作中还有很多情况是需要精确检索的,这种时候还是使用关系数据库更为合适。实际落地中我们也发现不少企业用户原本积累的数据都在表格里,需要用合适的工具来接入 AI 进行更多的应用和处理。 例如有一个一万五千行的房屋交易表格数据,如果单纯依靠向量检索我们很难准确找到某个区价格在某个范围内且朝向为南北向的房屋列表,但利用关系数据库可以非常方便地精确检索出来。 这里我共享了一个利用自然语言查询关系数据库的工作流模板,感兴趣的可以测试一下。

自然语言查询数据库

你可以直接询问例如:
  • 哪些区有拆迁安置房?
  • 天府新区平均单价、最高价和最低价分别是多少?
  • 成华区的平均建筑面积是多少?
  • 表格里一共都有哪些不同的区?

关系数据库工作流节点

关系数据库节点帮助文档

目前有三个工作流节点:
  • 获取表信息
  • 运行 SQL
  • 智能查询
实际上如果你自己通过前两个节点再加一个 AI 语言模型也可以实现第三个【智能查询】节点,但是我认为这套流程应该会非常常用因此直接封装了为一个节点,使用如下。

2403 vapp,ocr、长文 - 图6

添加关系数据库

新增关系数据库的方法与向量数据库类似,在导航栏进入数据集页面,选择关系数据库然后新建即可。数据库创建完成后即可添加表格数据。 在数据库详情页右上角单击上传按钮后,你可以通过三种方式上传数据:
  • 手动上传文件 - 支持上传的文件类型:.xlsx, .xls, .csv, .txt, .sql
  • 手动创建表格
  • SQL 语句创建

2403 vapp,ocr、长文 - 图7

大部分情况下使用手动上传文件即可,我们平台会自动帮你处理为数据库表格数据。创建完数据库和表格后就可以在工作流节点中使用了。

其它更新

🤖 Agent 可用模型增加 ChatGLM, Qwen, Moonshot, Claude

目前 Qwen, Moonshot, Claude 都还不是原生支持工具调用功能,我采用了特殊的系统提示词让模型判断需要调用工作流时用特殊的格式输出,然后再利用代码检测并调用工作流。

🤖 Agent 聊天现在按积分计算

现在将按照发送一条消息消耗一定积分的方式来计算 Agent 聊天的费用。

2403 vapp,ocr、长文 - 图8

🤖 增加【零一万物】大模型

接入了零一万物新开放的 API 平台,有兴趣的朋友可以尝试。特别是需要中文长文总结的场景,用 yi-34b-chat-200k 的性价比较高。

🖼️ 新增多模态图像理解节点

  1. 增加了智谱 AI 的 GLM-4V 图像理解节点【GLM-Vision】
  2. 增加了 Claude 的图像理解节点【Claude-Vision】
前两天在微博上看到一个用 Claude 进行股价技术面分析的例子,我试着复现了一下,有兴趣的朋友也可以试试。

2403 vapp,ocr、长文 - 图9

绝对不构成投资建议!

🖼️ 新增 OCR 节点

完全依赖多模态图像理解节点进行 OCR 有时候会不太准确,并且性价比不高,这里我额外增加了一个 OCR 节点,可以直接识别图片中的文字并输出。 利用这个节点加上 AI 的能力,简单做了一个示例是 OCR + AI 格式化处理小票 2403 vapp,ocr、长文 - 图10 2403 vapp,ocr、长文 - 图11 这个工作流逻辑非常简单。

🏷️ 标签管理

一个小功能,你可以在任意一个工作流编辑页面进入基本信息一栏点击标签管理按钮进行标签的详细管理。

2403 vapp,ocr、长文 - 图12

💴 积分变动记录

现在在 我的账号 页面可以查看您的积分变动记录了。

2403 vapp,ocr、长文 - 图13


感谢你的支持!有兴趣的朋友可以加到内测群里来一起玩,添加我的企业微信二维码: