1. 新的GPT4-Turbo模型****
l 功能更强大、更便宜、支持token更长。GPT-4 Turbo 支持 128k 的上下文窗口,大概相当于300多页的文档( 100,000 词)。
l 输出json模式方便程序对接。
l 知识库更新到了2023年4月。
l 比 GPT-4 便宜 2-3 倍.
工作方向:
1. 例如电商大批的评论分析,文章汇总,文档理解,客户聊天总结,用户行为总结,自然语言分析 等等。
2. 资料-》结构化提示语-》gpt4 api-》json结构结果-》前端界面展示, 基本可以省略很大部分后端处理工作。以后的功能开发简化为 :结构化提示语+可视化展示
3. 同时价格便宜,可以大量大批量请求api, 达到即时分析大量数据。
2. 多模态****
l 开放更多的API,包括视觉、图像创建(DALL·E 3) 和文本转语音(TTS),
l 价格从每张图像0.04美元起
^生成细节描述图片
^理解图片细节内容和意图
^理解视频内容
工作方向:
Dalle3是目前最好的自然语言生成和编辑图片,定制图片内容。基本上电商的图片生成方面的需求都可以对接尝试利用。 核心是利用好 理解图片内容能力,生成图片内容能力,这个的特点是细节定制化强大。
3. Agent智能体代理****
l 新出了Assistants API,可以帮助开发者构建在自己的应用程序中构建Agent。开发者构建在自己的应用程序中构建Agent,Assistants API 包含Code Interpreter(代码解释器)、Retrieval(知识库)、Function calling(函数调用)。Code interpreter 单次0.003美元,Retrieval 是0.20 美元/GB/助理/天
l 目前Assistants API支持三种类型的工具:代码解释器、检索和函数调用。未来,OpenAI计划发布更多构建的工具,并允许开发者在其平台上提供自己的工具。
l GPT-4 Turbo 也升级了外部知识库的更新方式,现在可以上传外部数据库或文件,来为 GPT-4 Turbo 提供外部知识库的支持。
工作方向:
1. 主要是把智能体的功能抽象化了,替代langchain,这个主要作用是打造智能体数字员工。例如一些重复的中低端智力劳动方面,就可以利用它来打造数字员工替代人力,例如销售,客服,一般程序员,一般美工,一般hr,等等都可以尝试。
2. 电商方面的利用,例如市场调查员,评论分析员,数据分析员都可以尝试开发。
4. 个性化gpt****
l ChatGPT的更新,官宣AI Tools,发布用户可自定义的GPTs。
l GPT4开放微调
工作方向:
例如公司的数字化程度高的时候积累很多个性化数据,就可以微调gpt,得到特定用途的gpt, 例如客服,社交媒体虚拟人,直播回复助手等等。
对比langchain:****
Langchain是过去一年AI主要的开发方法,gpt4新版本api可以取代原来的方法。
OpenAI 发布的类 agent 应用,开发者可以使用 Assistants API 执行特定指令、读取额外的知识库、调用模型和工具完成任务。配备了代码解释器、检索以及函数调用等工具。
l Assistant API 拥有持久且无限长的线程,允许开发人员将线程状态管理移交给 OpenAI 并解决上下文窗口约束。
l 代码解释器:在沙盒执行环境中编写和运行 Python 代码,可以生成图形和图表,并处理具有多种数据和格式的文件。允许 Assistants 迭代运行代码来解决具有挑战性的代码和数学问题等等。
l 检索:利用模型之外的知识来增强助手,例如专有领域数据、产品信息或用户提供的文档。这意味着用户不需要计算和存储文档的嵌入,或实现分块和搜索算法。
l 函数调用:使 Assistants 能够调用定义的函数并将函数响应合并到其消息中。
l 输出json模式方便程序对接。 output parsers 。
总结: 把langchain的全部功能都已经替代,而且效果更好,更容易开发。新gpt4 API是更好的方案。