豆包工作升级 2 项电脑操作能力:录制技能与锁屏续跑

10 月 28 日,豆包工作升级电脑操作能力,屏幕点击精度与速度均有提升。用户可以在对话中直接提出操作电脑的需求,经授权后由豆包工作自动查看屏幕、模拟人工鼠标键盘操作相关应用。在原有跨应用操作与浏览器操作录制的基础上,这次新增了电脑操作录制,以及 Mac 锁屏后继续执行任务。

把操作演示沉淀为技能

录制入口在对话界面的更多技能中,名称为录制操作生成技能。用户按提示完成授权后,像平时一样操作电脑,并可用语音补充要求,比如整理文件时说清只整理哪个文件夹、文件按日期命名。录制期间豆包工作会记录鼠标点击、输入文字和窗口内容,用户可随时取消,官方提示应避免展示账号密码等敏感信息。

录制结束后,操作流程和讲解被整理成个人技能,下次执行同类任务时选中对应技能并说明本次处理对象与要求即可,省去重复交代步骤。

锁屏后继续跑并用手机下达

任务执行方面,用户在设置里的工作任务模式设置中开启允许豆包在锁屏时工作,授权后豆包工作可在 Mac 锁屏时继续执行需要操作电脑的任务。用户离开电脑时可用手机向这台锁屏的 Mac 下达任务并查看返回结果,回到电脑解锁后可随时接管。使用条件是 Mac 保持开机联网、客户端持续运行、设备保持唤醒。

Computer Use 正成为 AI 智能体进入真实工作场景的关键能力。腾讯 WorkBuddy 上线远程控制,用手机接管电脑桌面且不消耗 Token,桌面端的远程控制与任务交付正在同时被多家产品补齐。