书生大模型实战营 | L1G1000 书生大模型全链路开源体系

167 阅读1分钟

书生·浦语开源大模型

InternLM 2.5 开源

开源地址:github.com/InternLM/In…

  1. 推理能力领先
  2. 支持100万字上下文
  3. 自主规划和搜索完成复杂任务

大模型开源工具链体系

官网:internlm.intern-ai.org.cn/

image.png

标准化的开源工具链算法库,覆盖了从模型预训练到评测的全链条流程

书生.万卷-数据

收割精细处理的开源多模态语料库

开源数据处理工具箱

image.png

LabelLLM

InternEvo-预训练

预训练框架

image.png

XTuner-微调

多种微调和偏好对齐算法,支持千亿参数+百万上下文

image.png

应用

  • MindSearch:思索式开源搜索应用

image.png

  • Lagent:首个支持代码解释器的智能体框架

image.png

  • MinerU:高效文档解析工具
  • HuixiangDou:基于专业知识库的群聊助手(茴香豆)

image.png

  • OpenCompass:社区最全面的开源评测体系

image.png

  • LMDeploy:性能超过国际主流推理框架 vllm

image.png