MT

mcp-tool-bench/mcptoolbenchpp

Browser automation

이 페이지는 AI로 자동 번역되었습니다. 기술적인 세부 사항은 원문을 확인하세요. 원문 보기

46 stars 10 forks 품질 65 트렌드 12MIT

mcp-tool-bench/mcptoolbenchpp는 MCP 서버 후보자는 https://github.com/mcp-tool-bench/mcptoolbenchpp.]에서 수입했습니다

개요

mcp-tool-bench/mcptoolbenchpp는 MCP 서버 후보자는 https://github.com/mcp-tool-bench/mcptoolbenchpp.]에서 수입했습니다

개요(AI 번역)

GitHub|HuggingFace|모델스코프

** 소개**

MCPToolBench++는 대규모 멀티도메인 AI Agent Tool Use Benchmark입니다. 7월 2025일 현재, 이 벤치마크는 4k+ 이상 포함 MCP 및 GitHub 커뮤니티에서 수집된 45개 이상의 카테고리에서 MCP 서버. dataset는 서로 다른 카테고리에서 단일 단계 및 다중 단계 도구 통화로 구성됩니다.

주의사항: 이 repo 벤치 마크는 여전히 WIP 및 더 많은 도메인 데이터 세트가 출시 될 것입니다.

뉴스

[2025-10-08] MCP 벤치 마크에서 OneKey MCP 라우터 지원 추가 : OneKey MCP 프록시 라우터를 사용하여 등록을 단순화하고 다양한 상업 MCP에 하나의 액세스 키를 사용합니다. GitHub의 상세 목록 보기 (예: Google Maps, Google Search, Perplexity, Firecrawl 등) 웹 사이트에서 OneKey 생성.

성능 리더보드

| 브라우저 | | 파일 시스템 | 검색 | | | | | | | | | | | | | | | | | | 패스 | 패스 | 패스 | 패스 | 패스 | 패스 | 패스 | 패스 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션

이 페이지는 AI로 자동 번역되었습니다. 기술적인 세부 사항은 원문을 확인하세요.

README

원문 README의 일부입니다. 원문 보기.

MCPToolBench++: AI Agent MCP Model Context Protocol MCP Tool Use Benchmark

GitHub|HuggingFace|ModelScope

Introduction

MCPToolBench++ is a large-scale, multi-domain AI Agent Tool Use Benchmark. As of July 2025, this benchmark includes over 4k+ MCP Servers from more than 45 categories collected from the MCP and GitHub communities. The dataset comprises both single-step and multi-step tool calls across different categories.

Notice: This repo benchmark is still WIP and more domain dataset will be released.

News

[2025-10-08] Add OneKey MCP Router Support in MCP Benchmark: Use OneKey MCP Proxy Router to simplify registration and use one access key to various commercial MCPs. See detailed list in GitHub (e.g. Google Maps,Google Search, Perplexity, Firecrawl, etc) and generate OneKey from website.

Performance Leaderboard

Browser File System Search
AST Pass@1 AST Pass@1 AST Pass@1
GPT4o 0.6524 0.2182 0.8863 0.8232 0.5200 0.4720
Qwen2.5 Max 0.7262 0.2749 0.9419 0.8871 0.6280 0.4600
Claude Sonnet 3.7 0.6503 0.1840 0.8415 0.8183 0.7280 0.6200
Kimi K2 Instruct 0.8182 0.2524 0.9062 0.8772 0.7320 0.3680
Qwen3 Coder 0.8866 0.2925 0.9080 0.8680 0.7180 0.5227
Claude Opus 4 - - - - - -
Claude Sonnet 4 - - - - - -
Map Pay Finance
AST Pass@1 AST Pass@1 AST Pass@1
GPT4o 0.6120 0.3616 0.7077 0.5742 0.7200 0.2889
Qwen2.5 Max 0.7372 0.2272 0.6684 0.5277 0.7511 0.2556
Claude Sonnet 0.5820 0.2748 0.7058 0.5574 0.7400 0.2311
Kimi K2 Instruct 0.6088 0.2008 0.8071 0.6761 0.7156 0.2378
Qwen3 Coder 0.7830 0.3054 0.7240 0.5440 0.7320 0.2860
Claude Opus 4 - - - - - -
Claude Sonnet 4 - - - - - -

GitHub에서 전체 README 보기

설치

npx -y @modelcontextprotocol/server-puppeteer
MCP 초보자라면? mcpskill.org 가이드부터 시작하세요 →

설정

{ "mcpServers": { "deepnlp-onekey-google-maps": { "url": "https://agent.deepnlp.org/mcp?server_name=google-maps&onekey={BETA_TEST_KEY_OCT_2025}" }, } }