AI百科网 AI教程
工具库

豆包新招:把你操作电脑的过程录成可复用技能

豆包电脑操作能力升级,演示一次即可存成技能复用,Mac 锁屏后任务还能继续跑、用手机遥控。本文给出开启路径和录制时的注意事项。

本文目录 · 6 节

教 AI 干活的成本正在降:以前要一遍遍交代步骤,现在演示一次就行。豆包把「教」这个动作做成了录制。

一、发生了什么

据雷峰网 10 月 28 日报道,豆包工作(字节跳动旗下 AI 助手的电脑操作能力)近期升级。经用户授权后,它可查看电脑屏幕,模拟鼠标和键盘操作应用;此次更新后,屏幕点击的精度和速度都有提升,并且新增了两项能力。一是录制操作生成技能:在原有浏览器操作录制的基础上,现在可以把任意电脑操作演示一遍,连同语音补充的要求一起,整理成包含操作流程和讲解的个人技能保存下来,下次同类任务直接调用。二是锁屏续跑:需要操作电脑的任务可在 Mac 锁屏后继续执行,人离开时还能用手机给这台 Mac 下任务、查结果,回来解锁随时接管。背景是 Computer Use 正在成为 AI 助手操作软件的主流路径,谁把「教会 AI」的成本降下来,谁就先留住用户。这是厂商发布口径的能力介绍,实际效果以你自己的体验为准。

二、跟你有什么关系

如果你天天做重复电脑操作——整理文件夹、按固定格式归档、批量改文件名——录成技能后只需说明这次处理谁,不用再从头教。如果你常出门但想让电脑上的任务跑完,锁屏续跑加手机遥控的组合适合挂着下载、批量处理的场景,电脑前不用留人,对需要连续执行又不便守着的任务是一种更灵活的交付方式。如果你担心权限,这类功能全程要屏幕和输入控制权限,等于把电脑钥匙交给对方,给谁不给谁要想清楚。

三、怎么用

读到这儿,可以顺路看 电脑操作 agent 干完活,谁来验货 读完能了解电脑操作型 agent 的任务完成度为何难自动核验:老办法只看局部画面,新思路让验证器自己动手探索取证,在线离线都能用,做 agent 数据与评测的人值得看。
  1. 录技能:在对话界面「更多技能」里找到「录制操作生成技能」,按提示授权。录制时像平时一样操作,可以用语音补要求,比如「只整理这个文件夹,文件按日期命名」,范围和规则一次说清。
  2. 录制期间它会记录鼠标点击、输入内容和窗口信息,随时可取消;别在这时展示账号密码等敏感信息,演示什么它就学什么。
  3. 用技能:下次遇到同类任务,选用对应技能,再补充这次的对象和要求即可,省掉重复解释。录完的技能可在技能库里回看,发现步骤不对可以重录覆盖。
  4. 开锁屏:进「设置、工作任务模式设置」,打开「允许豆包在锁屏时工作」。注意 Mac 要保持开机、联网,客户端持续运行,设备不能睡眠。

四、三个别信的说法

演示一次就一劳永逸。 技能记录的是当时的界面和步骤,页面改版、按钮挪位都可能让技能失效,复用前最好确认第一遍跑对没有。

锁屏还能干活,说明它绕过了系统限制。 这是官方设计的授权模式,前提是你主动开启并授权,Mac 保持唤醒状态。它不神秘,但权限确实不小,装在有工作资料的电脑上要慎重。

电脑操作类 AI 都差不多。 差别在沉淀方式:能录制复用的和每次现场理解的,长期用下来是两种效率。是否好用最终看你的任务是否重复度高。

五、一句话结论

让 AI 学会干活的关键,是把「教」的成本压到演示一次。

信息来源

功能与价格以官方公告为准。本文写于 2026 年 10 月 28 日。

下一站 · 场景实战 OpenAI 自述:怎么建 AI 原生工程组织 OpenAI 把软件生命周期拆成七段,每段写清 agent 干哪一轮、人留哪一步。这篇提炼三条今天能照搬的做法,也标出它没写的那部分。
下一篇,直接发你邮箱

每周一封,只发新教程和可复制模板。不发广告,随时退订。

复制规范引用格式,便于转载注明出处
这篇有用吗?