电脑控制与人工接管
授权目标应用,查看动作反馈,随时接管或停止电脑任务。
开始前
原生电脑控制与浏览器自动化是两种能力。前者操作系统中的应用和窗口;后者操作浏览器标签页。先确认你要操作哪种目标,以及当前平台和版本在设置中显示的支持状态。
打开“设置 → 电脑使用”。按页面提示查看系统权限、受信任应用、图像相关同意和操作记录。某项权限是未知、未授权或不支持时,先处理该项;不能把勾选配置当作系统已经授权。
发起任务
- 明确应用、窗口和目标,例如“在这个表格窗口内整理选中的行”。
- 检查目标选择或授权提示,确认是你希望操作的窗口。
- 只授予任务所需的范围;需要发送画面给模型时,阅读相关同意提示。
- 查看任务卡中的观察、动作与等待状态,确认结果发生在目标窗口。
被其他窗口遮挡、目标关闭、锁屏或系统权限变化可能使任务暂停或失败。重新确认当前目标与状态后再继续,不要只依据旧截图判断。
人工接管与停止
需要自己操作时,使用任务提供的接管入口。操作完成后,按当前任务状态决定是否交回控制。需要结束时使用停止/紧急停止入口,并确认任务到达终态。已完成的点击、输入或提交不会因为停止而自动撤回。
浏览器任务可以按目标标签页显示反馈;原生电脑任务按应用/窗口显示。不要在两个控制目标之间盲目复用位置或旧观察。
操作记录与故障处理
| 状态 | 下一步 |
|---|---|
| 系统权限未授权 | 按当前设置引导在系统中授权,再回应用重新检查 |
| 目标应用无法找到 | 打开正确应用与窗口,重新选择目标 |
| 观察失效 | 重新观察当前窗口,不继续使用旧坐标或旧元素 |
| 已接管 | 先完成人工步骤,再按任务入口恢复 |
| 任务停止但页面已改变 | 检查实际结果;停止不回滚先前操作 |