背景
团队里副业接活的场景很多,企业文档散落各处、找人问半天的问题反复出现。之前一直靠人工扛着,最近抽了个周末把它做成了自动化流程,这篇是复盘。
方案设计
设计原则就两条:能本地跑的不上云、每一步产物可回溯。
8 步流水线把杂乱文档变成可检索的知识库是整条链路的核心,外面套了6层保护:
- 输入侧先做格式校验,脏数据提前拦下
- 处理过程中每个阶段落一份中间产物
- 输出前跑一遍质检规则,不达标打回重做
具体实现
- 全程本地运行,原始文档与知识数据不出电脑
- 8 步流水线自动化:解析→结构化→质检→复核→分片→向量库→验收
- 内置本地大模型,离线推理零成本,支持三通道模型切换
安全方面本机运行、涉密资料不出内网,这一点在内网场景几乎是硬性要求。
实际效果
跑下来最大的感受是「确定性」:同样的输入永远得到同样的输出,而人肉操作难免有波动。以前文档散乱找不到,现在只需要复核机器标出的存疑项,工作量降了大半。
踩坑记录
最花时间的不是主流程,而是边界情况:格式不规范的输入、中途失败后的断点续跑。建议同类项目一开始就把「重跑」设计进去,后补很痛苦。
最后
如果你也在处理企业知识库相关的问题,欢迎评论区聊聊你的做法。