Python-UIAutomation-for-Windows ↓ MCP (Model Context Protocol)

** ** yinkaisheng 国 UI , MCP

UIAutomation MCP Server AI ( Claude ChatGPT) MCP Windows UI , :

Win32 MFC WPF Windows Forms Modern UI (UWP) Qt Firefox Chrome Electron

overlay-arrows-and-more ui_highlight Combined ; DEPENDENCY_MISSING, 工

Claude Desktop / Claude Code / Cursor / Kiro MCP

Источники:

工 工 工

(6)

[править править код] [скрыто] [скрыто] [скрыто] [[Т3]] | | ui_find_control ui_find_control][править править код] [5][править править код] [6][править править код] ui_get_foreground ui_get_foreground ui_get_foreground ui_get_foreground] ui_get_foreground [[T]]] [[T]] [[T]]] [[T]]] [8][править править код]

) (5)

[править править код] [скрыто] [скрыто] [скрыто] [[Т9]] | ) ()/)/)) | [10][править править код] [11][править править код] [[Т12]] | ) ()) | [[Т13]] | / |

(6)

[править править код] [скрыто] [скрыто] [скрыто] ui_get_properties[править править код] ui_get_text[править править код] [[Т16]] [[Т]] [[Т]]] ui_screenshot [[T]] [[T]] [[T]]] [[T]] [[T]]] [[T]] [[T]]] [[T]]] [[T]]] ui_exists ui_exists] ui_exists ui_exists]

UIAutomation MCP Server

基于 Python-UIAutomation-for-Windows 的 MCP (Model Context Protocol) 服务器

特别感谢 yinkaisheng 开发的优秀 UI 自动化库，本项目是其 MCP 封装实现。

---

简介

UIAutomation MCP Server 让 AI 助手（如 Claude、ChatGPT）能够通过 MCP 协议直接操作 Windows UI 控件，实现：

• 自动化桌面应用程序操作
• 控件信息查询与截图
• 键盘鼠标模拟
• 窗口管理

支持的应用类型：Win32、MFC、WPF、Windows Forms、Modern UI (UWP)、Qt、Firefox、Chrome、Electron 等。

安装

pip install -e .          # 或 uv sync
pip install comtypes overlay-arrows-and-more

overlay-arrows-and-more 只有 ui_highlight 高亮工具需要；未安装时该工具会返回 DEPENDENCY_MISSING，其余工具不受影响。

配置

在 Claude Desktop / Claude Code / Cursor / Kiro 等 MCP 客户端的配置文件中添加：

{
  "mcpServers": {
    "uiautomation": {
      "command": "uiautomation-mcp",
      "type": "stdio"
    }
  }
}

也可以不安装、直接用源码运行：

{
  "mcpServers": {
    "uiautomation": {
      "command": "uv",
      "args": [
        "--directory",
        "D:\\path\\to\\Python-UIAutomation-for-Windows",
        "run",
        "main.py"
      ],
      "type": "stdio"
    }
  }
}

可用工具

控件查找 (6)

交互操作 (5)

信息查询 (6)

Pattern 操作 (6)

辅助工具 (5)

高亮与拾取 (3)

环境变量