SS

skrapeai/skrape-mcp

Developer tools

이 페이지는 AI로 자동 번역되었습니다. 기술적인 세부 사항은 원문을 확인하세요. 원문 보기

12 stars 7 forks 품질 66 트렌드 8MIT

사이트맵 skrape.ai를 위한 서버, 당신은 어떤 URL을 입력하고 LLM를 위한 청결한 markdown를 반환합니다

개요

웹 페이지를 깨끗하게 변환, skrape.ai를 사용하여 LLM-ready Markdown. MCP 서버는 Claude Desktop 및 기타 MCP 호환 응용 프로그램과 웹 스크랩을 완벽하게 통합합니다. - : 광고, 내비게이션 및 관련 콘텐츠 제거 - : 동적 콘텐츠 렌더링 처리 - : AI 소비에 완벽한 Structured Markdown - : 소스에 관계없이 균일 한 구조 - get markdown - LLM-ready Markdown에 웹 페이지를 변환 - 입력 URL 및 옵션 매개 변수를 가져 가라 - LLM 소비에 최적화 된 깨끗하고 구조화된 Markdown - 동적 콘텐츠에 대한 JavaScript 렌더링 지원 - 고급 통합을위한 선택적인 JSON 응답 형식 Smithery를 통해 Claude Desktop용 Skrape MCP Server를 자동으로 설치하십시오. 1. Claude Desktop에 서버 구성 추가: 이 구성을 추가하십시오 (당신의 값으로 경로와 API 열쇠를 대체하십시오): Claude 또는 다른 LLM 모델과 서버를 사용하는 방법은 다음과 같습니다. 1. 첫째로, 서버는 당신의 LLM 신청 2.에서 제대로 형성됩니다.

개요(AI 번역)

웹 페이지를 깨끗하게 변환, skrape.ai를 사용하여 LLM-ready Markdown. MCP 서버는 Claude Desktop 및 기타 MCP 호환 응용 프로그램과 웹 스크랩을 완벽하게 통합합니다.

키 기능

  • ** Clean Output**: 광고, 내비게이션 및 관련 콘텐츠 제거 -JavaScript Support: 동적 콘텐츠 렌더링 처리
  • ** LLM 최적화**: AI 소비를 위해 완벽한 Structured Markdown -Consistent Format: 소스에 관계없이 균일한 구조

특징

도구

  • get_markdown - LLM-ready Markdown으로 웹 페이지를 변환
  • 입력 URL 및 옵션 매개 변수를 가지고
  • LLM 소비에 최적화된, 구조화된 Markdown 반환
  • 동적 콘텐츠에 대한 JavaScript 렌더링 지원
  • 고급 통합을 위한 선택적인 JSON 응답 체재

설치

Smithery를 통해 설치

Smithery를 통해 Claude Desktop용 Skrape MCP Server를 자동으로 설치하십시오.

수동 설치

  1. skrape.ai에서 API 키 받기

  2. 의존성 설치:

  3. 서버 구축:

  4. Claude Desktop에 서버 구성 추가:

MacOS에서:

Windows에서:

이 구성을 추가하십시오 (당신의 값으로 경로와 API 열쇠를 대체하십시오):

LLMs 사용

이 페이지는 AI로 자동 번역되었습니다. 기술적인 세부 사항은 원문을 확인하세요.

README

원문 README의 일부입니다. 원문 보기.

Skrape MCP Server

Convert webpages into clean, LLM-ready Markdown using skrape.ai. An MCP server that seamlessly integrates web scraping with Claude Desktop and other MCP-compatible applications.

Key Features

  • Clean Output: Removes ads, navigation, and irrelevant content
  • JavaScript Support: Handles dynamic content rendering
  • LLM-Optimized: Structured Markdown perfect for AI consumption
  • Consistent Format: Uniform structure regardless of source

Features

Tools

  • get_markdown - Convert any webpage to LLM-ready Markdown
    • Takes any input URL and optional parameters
    • Returns clean, structured Markdown optimized for LLM consumption
    • Supports JavaScript rendering for dynamic content
    • Optional JSON response format for advanced integrations

Installation

Installing via Smithery

To install Skrape MCP Server for Claude Desktop automatically via Smithery:

npx -y @smithery/cli install @skrapeai/skrape-mcp --client claude

Manual Installation

  1. Get your API key from skrape.ai

  2. Install dependencies:

npm install
  1. Build the server:
npm run build
  1. Add the server config to Claude Desktop:

On MacOS:

nano ~/Library/Application\ Support/Claude/claude_desktop_config.json

On Windows:

notepad %APPDATA%/Claude/claude_desktop_config.json

Add this configuration (replace paths and API key with your values):

{
  "mcpServers": {
    "skrape": {
      "command": "node",
      "args": ["path/to/skrape-mcp/build/index.js"],
      "env": {
        "SKRAPE_API_KEY": "your-key-here"
      }
    }
  }
}

Using with LLMs

Here’s how to use the server with Claude or other LLM models:

  1. First, ensure the server is properly configured in your LLM application
  2. Then, you can ask the ALLMI to fetch and process any webpage:
Convert this webpage to markdown: https://example.com

Claude will use the MCP tool like this:

skrape
get_markdown

{
  "url": "https://example.com",
  "options": {
    "renderJs": true
  }
}

The resulting Markdown will be clean, structured, and ready for LLM processing.

Advanced Options

The get_markdown tool accepts these parameters:

  • url (required): Any webpage URL to convert
  • returnJson (optional): Set to true to get the full JSON response instead of just markdown
  • options (optional): Additional scraping options
    • renderJs: Whether to render JavaScript before scraping (default: true)

Example with all options:


skrape
get_markdown

{
  "url": "https://example.com",
GitHub에서 전체 README 보기

설치

npx -y @smithery/cli install @skrapeai/skrape-mcp --client claude
MCP 초보자라면? mcpskill.org 가이드부터 시작하세요 →

설정

{ "mcpServers": { "skrape": { "command": "node", "args": ["path/to/skrape-mcp/build/index.js"], "env": { "SKRAPE_API_KEY": "your-key-here" } } } }