工程视角看 WorkBuddy「电脑操控」:AI 在独立虚拟桌面里自主执行 GUI 操作,但首次启用即被系统拦下——schtasks.exe 操作被拒绝,桌面开得出来、活干不成。排查路径值得记录:功能开关在设置→智能体→电脑操控(含电脑应用操控与浏览器操控两块);卡点不在开关而在「安全中心→命令安全」的命令白名单,删除 schtasks.exe 条目并重启后恢复。另一个典型限制是单例架构:即便在独立桌面里执行,进程仍会唤起主桌面实例,无法双开并行。功能面实测三样:浏览器(自动处理弹窗→输网址→回车)、画图(首绘框线未闭合,基于描述的纠偏重绘成功)、文件管理器(自动归整素材)。附 15 张截图与未解决问题(多开)。
我是小虎,浙大计算机本硕,破局行动家,《AI超级个体——一人公司完全指南》作者,专注于AI培训、超级个体打造、公司提效陪跑。
前阵子 WorkBuddy 上新了「电脑操控」,说是能让 AI 自己点鼠标、开软件。我看到就来了兴趣——我平时写实操文章,最烦的就是这一步。
大家好,我是小虎。
我专门有个写作工具,很好用,每天写文章就靠它,有时候它也会控制电脑来做截图,这时候鼠标键盘就归它了,我这边只能干等着,什么都干不了。
写一篇稿子,大把时间耗在干等上。这是我做自媒体特别大的一个痛点。
看到这个新功能,我第一时间就去尝试,但中间有个问题,卡住好几天,最后看枫哥的文章,去聊了聊才通。
下面按我实际走的次序,一步步记下来。
第一步:先找到开关在哪
操作不复杂,就是藏得深。
我打开 WorkBuddy,点右下角的头像。
菜单里找到「设置」,点进去。
左边一栏里点「智能体」。页面往下拉,就能看到「电脑操控」。里面有「电脑应用操控」和「浏览器操控」两块。
我第一次进来时,这块还是关着的,按钮是灰的。点一下把它打开,状态变成「已安装」,就行了。
第二步:桌面开得出来,就是动不了
开关打开后,我试着让它新开一个桌面。真开出来了,和我的主桌面的图标一样,就和我们给电脑接了视频线、切到扩展模式那样,另起了一个桌面。
我在主桌面这边,它在新桌面那边,两个桌面同屏看得清清楚楚。
可问题就在这:桌面是开出来了,WorkBuddy 一想在里面动手,就弹出一行错误,说“schtasks.exe”操作被拒绝。
我就卡在这一步。翻来覆去试了好几天,桌面每次都能开,活一次都干不成。
那几天我没辙,只好又回到老路上——还是让写作工具接管我的电脑,一边等一边写。
第三步:问了枫哥一句话,才知道差在哪
前几天看了枫哥写的一篇实测,跟他聊了聊。他说他也卡过这儿,但很快就解决了,还发了我一张截图。
第四步:删掉那个命令,通了
我照着他给的路径找过去。设置里打开「安全中心」。
其中就有「命令安全」。
在里面果然看到了schtasks.exe
我点了删除,重启了WorkBuddy,回来再发一句「继续」。
这会独立桌面终于可以控制了,我让它在新桌面里开记事本、敲了一行字,敲上了。
那一刻是真开心,卡了好几天的地方,一句话就通了。
不过这个功能打开是有风险的,大家如果不太明白这个功能的话,还是在体验之后加上哈。
不过新的问题又来了。WorkBuddy 是个单例程序,哪怕在独立桌面里执行,它也只会把主桌面那个 WorkBuddy 叫出来,没法在两边各开一个、同时跑不同的活。这点我试了,确实做不到。
第五步:退一步,测了另外三样
两边同时开这条路走不通,我就退一步,专门测了另外三个功能。
都是写文章时真用得上的,一个桌面里让它挨个干。
一是开浏览器查资料。
我让它去workbuddy官网看看。它把浏览器开起来,出现了一个弹窗。
它会自动点「忽略」,然后输了网址、回车。
二是开画图标重点。
写实操文要给截图标个框。它把画图开起来,几笔下去就报画好。
我切过去一看,画布上是几根没闭合的歪线,压根不是个框。我没让它重开,只说这个框没合上、四边要连起来。它照着重画了一遍。
三是开文件夹理素材。
写文章得把查到的资料、截图归到一处。它打开文件管理器自己会整理
这三样操作,workbuddy一个一个测试,全程不影响我在主桌面操作。
写在最后
从卡住到跑通,这功能我前后摸了好几天。
填平之后,查资料、画重点、理素材这些活,它能在一个新桌面里替我干,我不用再守着写作工具干等。
现在还剩 WorkBuddy 无法单独在主桌面和独立桌面多开这个问题没解决。
期待高手们哪天把它搞定,到时我再来写一篇。
以上为完整踩坑与实测记录。核心可复用结论:桌面开不出来查开关、执行被拒查「安全中心→命令安全」的命令白名单;单例限制决定它适合「一个桌面内串行接活」而非并行分流。