AGENT INTERFACES · 界面选型与风险边界
Browser Automation vs Computer Use
VS
Browser Automation
浏览器内的确定性操控 · DOM / API 直达
适用场景
网页抓取、表单填写与回归测试
有稳定 DOM 与 API 的 Web 流程
Playwright / Selenium 脚本化流水线
风险边界
仅限浏览器沙箱,难触达桌面应用
动态 DOM 与反爬机制易使脚本失效
凭据与敏感表单须最小权限托管
Computer Use
视觉 + 键鼠的全桌面操控 · 任意应用
适用场景
跨应用串联:浏览器、Office、PDF
无 API 的桌面软件与遗留系统
拟人化演示与端到端流程代跑
风险边界
误点误删风险高,须沙箱隔离执行
屏幕注入与提示词劫持攻击面更大
速度慢成本高,动作须逐步审计
选型原则
Web 闭环优先 Browser Automation;仅跨应用 / 桌面场景升级 Computer Use,并置于沙箱、保留人工确认。