统一自动化入口。覆盖浏览器自动化（Playwright）和 Windows 桌面应用自动化（OpenReverse）。浏览器场景：打开网页、点击、填表、爬取、截图、自动化登录、渗透页面交互。桌面场景：操作 IDA/x64dbg 等 GUI 工具、Windows UI Automation、视觉驱动交互、桌面应用网络抓包。触发关键词：浏览器自动化、桌面自动化、打开网页、填表、爬取、截图、自动化登录、Playwright、agent-browser、headless、OpenReverse、UIA、CUA、桌面操作、Windows 自动化。

自动化操作 (Desktop & Browser Automation) ACTION REQUIRED（读完后立刻执行） 1. NOW ：确认当前任务是否命中本 skill 的适用范围 2. NOW ：读取 ../tool index.md ，校验工具可用性和实际路径 3. NEXT ：缺工具时调用 bootstrap，不要猜路径 4. ACT ：进入"工作流"第一步并执行，不要停在确认状态适用范围当任务属于以下场景时使用本 skill：浏览器场景（Playwright / agent browser）打开网页并操作页面元素（点击、填表、提交）爬取页面内容或截图自动化登录流程渗透测试中与 Web 页面交互（提交 payload、触发 XSS）验证码页面的自动化处理批量表单提交桌面应用场景（OpenReverse）操作 Windows 桌面应用（IDA Pro、x64dbg、Wireshark 等）需要视觉驱动交互（CUA 模式）需要结构化 UI 操作（UIA 模式）桌面应用的网络流量观察（内置 mitmproxy）自动化逆向工具的 GUI 操作黑盒测试桌面软件与其他工具的分工场景用什么操作网页（浏览器内） Playwright / agent browser 操作桌面应用（Windows GUI） OpenReverse 抓包分析、HTTP 请求捕获 anything analyzer 或 OpenReverse network lane JS 断点、Hook、CDP 调试 jshookmcp 定位签名算法、补环境复现 js reverse 简单判断：目标是网页 → Playwright 目标是 Windows 桌面应用 → OpenReverse 两者都需要 → 组合使用 Part 1: 浏览器自动化（Playwright / agent browser）核心工作流命令参考注意事项必须执行 agent browser close ，否则进程泄漏操作前先 snapshot，不要猜元素引用提交表单后用 wait load networkidle 等页面稳定 Part 2: 桌面应用自动化（OpenReverse）概述 [OpenReverse](https://github.com/zhexulong/openreverse) 是面向 AI Agent 的桌面交互与证据采集框架，支持： UIA 模式：Windows UI Automation，结构化桌面控件操作 CUA 模式：视觉驱动交互（Computer Use Agent），适合复杂 GUI 网络观察：内置 mitmproxy 代理 + 本地抓取交互模式选择模式适合场景底层 UIA 目标应用有标准 Windows 控件（按钮、文本框、列表） Windows UI Automation API CUA 目标应用 UI 复杂或非标准控件（IDA 的反汇编视图、自定义渲染界面）视觉识别 + 鼠标键盘网络观察模式模式适合场景 Proxy Lane 目标应用可以配置代理（推荐） Local Lane 目标应用无法走代理，需要本地抓取安装与配置常见组合需求配置只操作桌面应用 UIA 或 CUA，不接网络 lane 操作桌面应用 + 抓包 UIA/CUA + proxy lane 操作桌面应用 + 本地抓取 UIA/CUA + local lane 逆向场景示例按需自举（On Demand Bootstrap）自动化能力边界工具可自动安装安装方式说明 Playwright ✓ npm + npx playwright install 浏览器自动化引擎 agent browser CLI ✓ npm install g agent browser 浏览器操作 CLI Node.js ✓ winget 前置依赖 OpenReverse ✗ 手动 clone + npm install 实验阶段，依赖较重 mitmproxy ✗ 手动安装 OpenReverse 网络观察依赖自举触发浏览器操作缺 Playwright → 自动 bootstrap 桌面操作需要 OpenReverse → 引导用户手动安装（给出完整步骤） OpenReverse 手动安装引导如果 AI 检测到需要桌面应用自动化但 OpenReverse 未安装：路由上下文上游入口 : skills/SKILL.md （总控）、 routing.md 适用场景 : 任何需要自动化操作浏览器或桌面应用的任务下游出口 : 抓到的请求需要分析 → anything analyzer 或 js reverse 需要 JS 调试/Hook → jshookmcp 需要还原签名算法 → js reverse 桌面应用是逆向工具 → ida reverse/ 同级关联模块 : js reverse （浏览器操作后可能需要分析 JS）、 ida reverse （OpenReverse 可以自动化操作 IDA GUI）任务完成自检（声称完成前 MUST 通过） [ ] 我是否执行了工作流中的每一步（而不是只阅读）？ [ ] 我是否基于 tool index 使用了真实工具路径？ [ ] 我是否产出了可复现证据（命令/脚本/截图/报告）？ [ ] 我是否完成并回写了 RULES 要求的 Checklist 项？

browser-automation