AI电脑操控完整测评:全自动搞定崩铁日常、还能创建炉石卡组

11月25日消息,据媒体报道,近日新加坡国立大学团队,在20多个场景下对Claude的电脑操控能力进行了全面测试。

结果显示,AI不仅能自动完成手游日常任务,还能执行复杂的办公任务。

研究中选用了米哈游《崩坏:星穹铁道》,可以跟它说”帮我完成今天的模拟宇宙”,Claude就能自动完成各种任务,甚至包括启动自动战斗和等待战斗结束后退出,操作行云流水。

AI电脑操控完整测评:全自动搞定崩铁日常、还能创建炉石卡组

特别值得一提的是,这并不是传统游戏外挂那样的机械操作,Claude还能智能理解游戏规则和目标,根据界面上不同的任务进行调整。

AI电脑操控完整测评:全自动搞定崩铁日常、还能创建炉石卡组

AI电脑操控完整测评:全自动搞定崩铁日常、还能创建炉石卡组

除了《崩坏:星穹铁道》,AI还能自动玩《炉石传说》,包括创建和重命名牌组、使用英雄技能等。

团队基于Claude Computer Use的API设计了一个自动化GUI框架,该框架包括系统提示、状态观察、推理范式等六个部分。

AI通过这个框架能够执行网页搜索、工作流程模型、办公生产力软件等日常办公场景下的任务。

例如,在Amazon和Apple官方网站上成功完成下单购物的任务,选择颜色配置、填写地址等操作。

AI电脑操控完整测评:全自动搞定崩铁日常、还能创建炉石卡组

虽然AI在复杂网页操作和办公软件中有部分任务失败,但整体表现已相当出色,团队还公开了所有测试用例的具体信息,供有兴趣的研究者和开发者进一步探索。

免责声明:本文章由“知识和经验”发布如果文章侵权,请联系我们处理,本站仅提供信息存储空间服务如因作品内容、版权和其他问题请于本站联系