
a9t9/rpa
Developer tools이 페이지는 AI로 자동 번역되었습니다. 기술적인 세부 사항은 원문을 확인하세요. 원문 보기
AI 어시스턴트를 위한 MCP 서버를 이용한 브라우저 및 데스크톱 자동화. 매크로를 기록하거나 JavaScript를 작성하여 웹사이트를 자동화하고, 데이터를 추출하며, OCR과 이미지 인식을 이용한 데스크톱 앱을 제어할 수 있습니다.
개요
Ui.Vision은 브라우저 자동화, OCR, 이미지 인식과 MCP 서버를 결합하여 AI 에이전트가 브라우저에서 재사용 가능한 매크로를 생성, 편집 및 실행할 수 있게 합니다. 확장 프로그램 설치 · MCP와 AI 어시스턴트 연결 · API 참고 · 사용자 포럼 - 폼 작성, 웹 데이터 추출, 보고서 다운로드 및 기존 브라우저 세션 내 워크플로우 반복. - 상호작용 기록 및 재생, Selenium IDE 명령어 사용, 다양한 입력 데이터에 대한 검사 수행. - OCR로 화면 텍스트를 찾고, HTML 선택기가 불가능할 경우 이미지로 제어 제어 위치를 찾습니다. - 시각적 인식과 마우스 및 키보드 입력을 이용해 애플리케이션 및 원격 데스크톱 인터페이스를 자동화합니다. 데스크톱 자동화는 추가적인 Ui.Vision 데스크톱 컴포넌트(XModules)를 필요로 합니다. - 내장 AI 어시스턴트 또는 외부 MCP 클라이언트에게 매크로를 작성 및 실행하도록 요청한 후, 생성된 스크립트, 로그, 스크린샷을 검사합니다. 매크로 레코더와 명령 테이블을 사용하고, UIV로 자바스크립트를 작성하세요.
개요(AI 번역)
매크로, JavaScript, AI 어시스턴트로 웹사이트와 데스크톱 애플리케이션을 자동화하세요. Ui.Vision은 브라우저 자동화, OCR, 이미지 인식과 MCP 서버를 결합하여 AI 에이전트가 브라우저에서 재사용 가능한 매크로를 생성, 편집 및 실행할 수 있습니다.
확장 프로그램 설치 · MCP와 AI 어시스턴트 연결 · API 참고 · 사용자 포럼
무엇을 자동화할 수 있을까요?
- 브라우저 작업: 양식 작성, 웹 데이터 추출, 보고서 다운로드 및 기존 브라우저 세션에서 워크플로우 반복.
- **웹사이트 테스트: ** 상호작용을 녹화하고 재생하며, Selenium IDE 명령어 사용, 다양한 입력 데이터에 대한 검사 실행.
- 시각적 작업: OCR로 화면 내 텍스트를 찾고, HTML 선택기가 없을 때 이미지로 컨트롤을 찾습니다.
- 데스크톱 워크플로우: 시각적 인식과 마우스 및 키보드 입력을 사용하여 애플리케이션과 원격 데스크톱 인터페이스를 자동화합니다. 데스크톱 자동화는 추가적인 Ui.Vision 데스크톱 컴포넌트(XModules)를 필요로 합니다.
- AI 지원 자동화: 내장 AI 어시스턴트나 외부 MCP 클라이언트에게 매크로를 작성하고 실행하도록 요청한 후, 결과 스크립트, 로그, 스크린샷을 검사합니다.
매크로 레코더와 명령 테이블을 사용하고, 'uiv로 자바스크립트를 작성하세요.
이 페이지는 AI로 자동 번역되었습니다. 기술적인 세부 사항은 원문을 확인하세요.
README
원문 README의 일부입니다. 원문 보기.
Ui.Vision - Browser and Desktop Automation
Automate websites and desktop applications with macros, JavaScript, or an AI assistant. Ui.Vision combines browser automation, OCR and image recognition, with an MCP server that lets AI agents create, edit and run reusable macros in your browser.
Install the extension · Connect an AI assistant with MCP · API reference · User forum
What can you automate?
- Browser tasks: fill forms, extract web data, download reports and repeat workflows in your existing browser session.
- Website testing: record and replay interactions, use Selenium IDE commands, and run checks with different input data.
- Visual tasks: find on-screen text with OCR and locate controls by image when HTML selectors are unavailable.
- Desktop workflows: automate applications and remote desktop interfaces using visual recognition and mouse and keyboard input. Desktop automation requires the additional Ui.Vision desktop components (XModules).
- AI-assisted automation: ask the built-in AI assistant or an external MCP client to write and run macros, then inspect the resulting script, logs and screenshots.
Use the macro recorder and command table, write JavaScript with the uiv.* API, or let an AI assistant author the macro. The resulting automation can be saved and run again.
Get started
Install the browser extension; you do not need to build this repository:
Open Ui.Vision and record a browser task, or start with a macro from the extension’s demos. For desktop input and additional native capabilities, see the XModules installation guide.
The browser extension is open source and free for personal and commercial use. See the Ui.Vision website for desktop components and available editions.
Connect an AI assistant with MCP
Ui.Vision provides a Model Context Protocol (MCP) server through the uivision-mcp-bridge package. It connects MCP clients such as Claude Code, Claude Desktop and Cursor to the Ui.Vision browser extension.
An agent can inspect a page, create or edit a macro, run it, and use logs and screenshots to check the result. The automation executes through Ui.Vision in your browser.
Start with the MCP setup guide. The installer command is:
npx uivision-mcp-bridge --setup
설치
npx uivision-mcp-bridge --setup