重磅更新!Claude 3.5 学会使用电脑了!

261 阅读3分钟

Anthropic 半夜突然发布了重磅消息——Claude 3.5 已经能够操控电脑!没错,AI现在不仅仅是回答问题或生成代码,它还能直接在电脑上执行任务!这无疑是一项让人兴奋的科技进展。

img

什么是电脑操控能力?

简单来说,Claude 3.5 已经具备了像人类一样使用电脑的能力。它不仅可以浏览屏幕内容,还能移动光标、点击按钮,甚至输入文本。想象一下,AI不仅能为你解答问题,还能执行具体的电脑操作任务,这意味着未来的智能助手将变得更强大、更加实用。

如果你对如何升级Claude感兴趣,可以参考此详细升级教程

Claude是如何掌握电脑使用技巧的?

Claude能够操作电脑背后有深厚的技术基础。Anthropic 早前的工具使用研究和多模态能力使Claude具备了这一新技能。在掌控电脑操作的过程中,AI需要解读屏幕图像并分析内容,再根据理解进行精准的操作,例如计算鼠标需要移动多少像素才能点击正确位置。

AI对屏幕内容的识别和推理能力是这一功能实现的核心。例如,Claude 可以根据用户的提示对软件界面进行分析和操作,即便Claude当前在一些简单的软件上表现较好,如计算器,研究团队在训练过程中避免让其访问互联网,以保证安全。

Claude还能将文本提示转化为一系列操作步骤,并在电脑上执行。值得一提的是,Claude在执行任务时,如果遇到障碍,它能够自行修正并重新尝试任务,展现出相当的灵活性和适应性。

当前Claude的电脑操控水平如何?

虽然Claude在电脑操控上已经取得了显著进展,但它距离人类的操作水平还有一定的差距。在一个名为“OSWorld”的开发者测试中,Claude取得了14.9%的得分,虽然这一结果远不如人类的70-75%得分,但相比其他AI模型的7.7%,已经显示出巨大的潜力。

如何确保AI安全地使用电脑?

每当AI技术取得进展时,安全性问题都会成为新的关注点。虽然Claude的电脑操控能力降低了AI在特定任务上的操作难度,但它并未从根本上提升模型的认知水平。因此,Anthropic 的团队格外关注安全风险,尤其是当前已知的威胁。

一个突出的问题是“提示注入攻击”,即通过输入恶意指令干扰AI模型,导致它执行用户未预期的操作。由于Claude能够解读电脑屏幕截图,它有可能接触到包含恶意内容的画面,因此使用公开测试版的用户应采取相应的安全防护措施。

为了避免Claude的滥用,Anthropic 已经开发了分类器和其他机制来检测和预防不当使用行为。鉴于即将到来的选举,团队尤其警惕那些可能破坏公众信任的潜在恶意操作。

Claude 未来的展望

随着Claude 3.5 新功能的不断完善,Anthropic 将根据用户反馈,进一步优化和增强这一技术。在未来的版本中,Claude的能力有望得到进一步扩展,给工作和生活带来更多的便利与惊喜。每一次技术更新都让我们更接近于AI技术的全新可能性!