智能体平台

演示一遍就存成技能,豆包工作让电脑操作可复用

要点

日前,豆包工作的电脑操作能力升级。用户在对话中提出操作电脑的需求后,经授权,豆包工作可自动查看电脑屏幕,模拟人工的鼠标和键盘操作相关应用。在这一基础上,豆包工作新增两项能力:把演示过程录制下来保存为可复用技能;需要操作电脑的任务可在 Mac 锁屏时继续执行,用户也可通过手机下达…

日前,豆包工作的电脑操作能力升级。用户在对话中提出操作电脑的需求后,经授权,豆包工作可自动查看电脑屏幕,模拟人工的鼠标和键盘操作相关应用。在这一基础上,豆包工作新增两项能力:把演示过程录制下来保存为可复用技能;需要操作电脑的任务可在 Mac 锁屏时继续执行,用户也可通过手机下达任务、查看结果。

录制入口在对话界面“更多技能”中,名称为“录制操作生成技能”。按提示完成授权后,用户可以像平时一样操作电脑,并通过语音补充要求。例如整理文件时说明“只整理这个文件夹,文件按日期命名”,把操作范围和命名规则一并交代。录制期间,豆包工作会记录鼠标点击、输入的文字和窗口内容,用户可随时取消;使用时应避免展示账号密码等敏感信息。

录制结束后,豆包工作将操作流程和讲解整理成个人技能。下次执行同类任务时选用对应技能,再说明此次要处理的对象和要求,即可省去重复解释操作步骤。多步操作、临时条件和处理习惯由此从一次演示沉淀为可调用的技能,减少同类任务的重复说明。

锁屏执行的开关在“设置→工作任务模式设置”中,名称为“允许豆包在锁屏时工作”。启动该功能并完成授权后,需要操作电脑的任务在 Mac 锁屏时仍可继续。用户离开电脑时,可通过手机向这台锁屏的 Mac 下达任务,并在手机上查看返回结果;回到电脑前解锁后可以随时接管。使用时,Mac 需保持开机、联网,豆包客户端持续运行,设备保持唤醒。

锁屏执行以 Mac 设备为前提。录制技能是否覆盖其他系统、面向哪些用户开放,截至发稿尚未有进一步说明。

免责声明本页信息整理自互联网公开渠道,仅供资讯参考,不构成任何投资或商业决策依据;相关产品参数、企业信息可能存在滞后或误差,请以厂商官方发布为准。如内容涉及版权、准确性或侵权问题,请联系 981209856@qq.com,我们将第一时间核实处理。

邵嘉禾

邵嘉禾,关注大模型、算力与产业应用。