01 发生了什么
GitHub Copilot 在 CLI 和桌面端应用中引入了“计算机使用”功能，允许其直接读取屏幕视觉内容并进行鼠标点击、键盘输入及工作流操作。
02 关键细节
- Copilot 可执行包括读取界面内容、点击控件、编辑文本及页面滚动等多种桌面端交互操作。
- Copilot 在控制应用前会请求用户批准；用户可查看或重置此前设为始终允许的应用。
- 企业客户可通过组织管理设置选择关闭此计算机使用功能。
03 为什么重要
此功能实现了对无 API 支持或仅限图形界面的传统软件进行自动化操作，显著扩展了 AI 辅助工具的覆盖范围。
04 适合谁
软件开发人员、IT专业人员及业务流程自动化专家。
原始来源GitHub Copilot