Anthropic 发布新款 AI 模型,可控制你的个人电脑
24-10-23
Anthropic 去年向投资者展示了其雄心勃勃的计划,旨在构建能够自主进行研究、回复电子邮件和处理其他后台工作的虚拟助手 AI,将此称为“AI 自教学的下一代算法”,并相信如果一切按计划进行,这项技术未来有可能自动化经济的大部分领域。
经过一段时间的发展,这项 AI 技术开始逐渐成型。Anthropic 今天发布了其 Claude 3.5 Sonnet 模型的升级版本,该模型能够理解和与任何桌面应用程序交互。通过新的“Computer Use”API(目前处于公开测试阶段),该模型可以模仿键盘输入、按钮点击和鼠标手势,基本上模拟了一个人坐在电脑前的操作。
Anthropic 称:
我们训练了 Claude,使其能够看到屏幕上发生的事情,然后使用现有的软件工具执行任务。当开发者给 Claude 分配使用计算机软件的任务并给予必要的访问权限时,Claude 会查看用户可见的屏幕截图,然后计算需要垂直或水平移动多少像素才能将光标移动到正确的位置进行点击。
开发者可以通过 Anthropic 的 API、Amazon Bedrock 和 Google Cloud 的 Vertex AI 平台尝试使用 Computer Use。Anthropic 将其对 AI 代理概念的理解称为“行动执行层”,让新的 3.5 Sonnet 能够执行桌面级命令。得益于其浏览网页的能力,3.5 Sonnet 可以使用任何网站和任何应用程序。