公司内部最近在推 trae,从 CC 上迁移了份 SKILL.md 进来。
创建 xx 页面的时候,成功发现并调用该技能了
后续的工作流中,需要确认的提示反馈体验比 CC 好很多,但是我的工作流中有一步是调用本地脚本,它给忽略了,继续猜测实现任务。
这不符合预期,当前 skill 并没有写条件判断,按流程工作一定会执行脚本的。
之前有聊到过,影响输出质量的有两点,输入质量跟模型质量。
为此,在简化 skills 后,我们做了3次对照实验,在创建时\
1. 控制使用相同的创建页面提示词
2. 相同模型,测了 GLM5 以及 kimi2.5
3. 新窗口,干净的上下文
确保 CC 跟 trae 是唯一变量
trae 中表现并不太好
原因可能如下,
- 在对照试验中,我使用的 trae 免费提供的模型,这可能也是一个变量。
- 在 trae 中第一次使用 skills 的时候,模型还顺便去了解了下项目结构等,可能会导致上下文增加从而忽略了 skills 中的工作流
- 目前还在琢磨,请教社区大佬们帮忙看看
在创建测试八页面的时候,模型反问完后直接就结束工作了……
让继续创建测试九页面的时候,没有询问直接就调脚本生成了
另外我也用过一阵子的 solo, plan,需求描述.md 写得很详细,确认操作
过了 1-2 个小时后来看,你就给我交付个这个?
生成的 plan.md 跟需求描述.md 出入很大
明明聊的好好的啊
我猜测
- 我使用的姿势不对
- 在执行过程中上下文过不断增加,然后导致一部分信息被忽略了
后续还会继续探索 trae 的使用,大部分时间会切换到 trae 上,但是那些 skills 、 workflow 的目前还是在 CC 上使用。