问题遇到的现象和发生背景
需求:如何用AI处理6万行的Excel数据【未解决】
理想预期:
- AI 读取Excel表,转换为易处理格式【数据版本一】;
- AI 理解任务并利用少量数据处理输出结果,便于用户确认结果是否符合预期;
- AI 判断单次处理的tokens需求及处理上限,基于任务所需tokens及文件大小,拆分子任务、拆分文件【数据版本二】;
- AI 在线云端生成批处理脚本,通过多级循环自动调用LLM模型进行理解和生成结果【数据版本三】,另外可增加中间进度可视化、阶段性结果验收。
标准工作流:Python脚本多级循环,拆分多个文件、依次/并行传递输入,调用LLM模型理解和生成,接受输出并合并最终文件。 - AI 自动合并结果,转换输出Excel【数据版本四】,或通过云端空间提供下载链接(可以推销云空间)。
最关键的就是第4步,能否帮忙实现下?
本人不会编程,都是借助AI处理,但目前使用了几个AI仍有问题:
1、受限于文件太大,易超出tokens;
2、python脚本批处理易参考字典静态库,无法by行单词调用AI大模型进行理解和生成,导致结果同质化或串行。
操作环境、软件版本等信息
mac m2 电脑
我想要达到的结果
上传Excel文件,AI自行拆分多文件,调用AI大模型by行理解和生成,最终合并输出结果文件。