llm-to-agent/docs/automation/computer-butler.md
2026-07-16 09:24:26 +08:00

1.6 KiB
Raw Blame History

电脑管家与自动化

电脑管家能力让 Task 能处理浏览器、本机应用和日常临时事务。

本机基础能力

  • 期望实现阶段P4
  • 实际开发状态:未开始
  • 已确认点:候选能力包括剪贴板、通知、文件整理和进程信息,并通过 Tool 逐项加入。
  • 待确认点:优先能力、跨平台范围和系统 API 选择。

浏览器读取与交互

  • 期望实现阶段P4
  • 实际开发状态:未开始
  • 已确认点:需要覆盖网页搜索、读取、结构化提取和交互操作。
  • 待确认点:浏览器驱动、登录态复用、下载、标签页管理和真实提交确认。

应用与窗口控制

  • 期望实现阶段P4
  • 实际开发状态:未开始
  • 已确认点:逐步加入应用启动、窗口管理和文件定位等能力。
  • 待确认点:操作系统优先级、原生桥接方式和无障碍权限。

桌面自动化

  • 期望实现阶段P4
  • 实际开发状态:未开始
  • 已确认点:候选能力包括截图、屏幕理解、键盘和鼠标操作。
  • 待确认点:视觉驱动方式、坐标可靠性、停止机制和操作确认。

定时与后台任务

  • 期望实现阶段P4
  • 实际开发状态:未开始
  • 已确认点:未来支持提醒、定时执行与长期后台任务。
  • 待确认点调度器归属、Runtime 重启恢复、错过任务和结果通知。

自动化模板

  • 期望实现阶段P4
  • 实际开发状态:未开始
  • 已确认点:重复工作可沉淀为 Behavior 或工作流模板,但不提前固定格式。
  • 待确认点:模板创建、参数化、分享、修改和版本管理。