AI智能体出圈之后,开源AI框架的项目如雨后春笋,体验过langchain、langgraph、dify等项目后。
langchain框架
langchain是一个大模型快速开发框架,通过封装底层调用,提供常用的方法提供功能。 langgraph_fly_base项目是基于该框架的一个多级代理的工作流项目。 整体感觉langchain相关还是对中国大模型不友好。2024年火了一把,后面被拍到海岸上了。
dify框架
dify是一个python构建的AI大模型工作流框架,包含多种节点,自定义编排实现功能。
多模态AI代理TEN-Agent
无意间看到Ten-Agent项目,有关他的功能点此链接,再次简单了解下他的应用场景。
- 语音助手
框架本身集成了STT、TTS、LLM等功能,可以快速实现语音助手的能力,集成的能力均以插件方式实现,能够快速的拓展。 集成了RTC(声网)能够实现超低延迟的交互体验
AI 噪音抑制:RTC 模块具备 AI 噪音抑制功能,确保音频交互的流畅和高质量。
语音识别(STT):将用户的语音转换为文本,便于 AI 代理处理。
语音合成(TTS):将 AI 代理的文本响应转换为语音,基于 RTC 模块播放给用户听。
语言模型(LLM):处理转换后的文本,理解用户的意图,生成响应。
另外还集成了dify,可以轻松实现调用dify的引用。
框架分析
后端语言:go、c++、python