olostep/olostep-mcp-server

开发工具

本页由 AI 翻译，技术细节请以原文为准。查看原文

25 stars 10 forks 质量 88 趋势 31MIT

Repository Install

Olostep 的 MCP 服务器——顶级人工智能公司使用的网页爬虫、爬取和搜索基础设施。

概览

一个模型上下文协议（MCP）服务器实现，与 Olostep 集成，实现网页抓取、内容提取和搜索功能。要设置 Olostep MCP 服务器，你需要一个 API 密钥。你可以在 Olostep 官网注册获得 API 密钥。 - 抓取网站内容（含HTML、Markdown、JSON或纯文本）（可选解析器）- 基于解析器的网页搜索及结构化结果 - AI回答含引用和可选的JSON格式输出 - 批量抓取最多1万个URL——自主爬取起始URL——网站URL发现与映射（含包含/排除筛选）——针对地理定位内容的国家特定请求路由——为JavaScript密集网站配置可配置等待时间——全面的错误处理与报告——简单的API密钥配置连接 Olostep MCP 服务器有多种方式。选择最适合你工作流程的那种。最简单的方法——无需本地安装。

概述（AI 翻译）

Docker 中心 NPM版本许可：ISC

一个模型上下文协议（MCP）服务器实现，与 Olostep 集成，实现网页抓取、内容提取和搜索功能。要设置 Olostep MCP 服务器，你需要一个 API 密钥。你可以通过在 Olostep 官网注册来获取 API 密钥。

特色

抓取网站内容的HTML、Markdown、JSON或纯文本（可选解析器）
基于解析器的网页搜索，带有结构化结果
带引用和可选 JSON 格式输出的 AI 回答
批量抓取最多1万个URL。
从起始URL进行自主网站爬取
网站URL发现与映射（含包含/排除筛选）
针对地理定向内容的国家特定请求路由
为JavaScript密集网站提供可配置的等待时间
全面的错误处理与报告
简单的API密钥配置

安装

连接 Olostep MCP 服务器有多种方式。选择最适合你工作流程的那种。

☁️ 远程端点（推荐）

最简单的方法——无需本地安装。直接连接到我们托管的MCP服务器：

本页由 AI 翻译，技术细节请以原文为准。

README

以下为原文 README 节选，完整内容请查看原文。

Olostep MCP Server

Docker Hub npm version License: ISC

Live web search, scraping and crawling API for AI. Get structured, LLM-ready data from any site. Scale to 1M requests in a single batch at low cost.

Olostep is web data infrastructure for AI. It provides live web search, scraping and crawling API to extract and structure data. This is the official Olostep Model Context Protocol (MCP) server, which gives any MCP-compatible AI agent those capabilities.

Use the hosted server at https://mcp.olostep.com/mcp (sign in with OAuth, or use an API key), or run it locally with an API key from the Olostep website.

Features

Scrape website content in HTML, Markdown, JSON or Plain Text (with optional parsers)
Parser-based web search with structured results
AI Answers with citations and optional JSON-shaped outputs
Batch scraping of up to 10k URLs
Autonomous site crawling from a start URL
Website URL discovery and mapping (with include/exclude filters)
Country-specific request routing for geo-targeted content
Configurable wait times for JavaScript-heavy websites
Comprehensive error handling and reporting
Simple API key configuration

Installation

There are multiple ways to connect to the Olostep MCP Server. Choose the one that best fits your workflow.

One-click install

Connect to the hosted server and sign in with your Olostep account (OAuth). No API key or local setup needed.

Or from the terminal:

# Claude Code
claude mcp add --transport http olostep https://mcp.olostep.com/mcp

# Gemini CLI (prompts for your API key)
gemini extensions install https://github.com/olostep/olostep-mcp-server

在 GitHub 查看完整 README

安装

npx -y olostep-mcp

新手？先看 mcpskill.org 教程 →

配置

{
  "mcpServers": {
    "olostep": {
      "url": "https://mcp.olostep.com/mcp",
      "headers": {
        "Authorization": "Bearer YOUR_API_KEY_HERE"
      }
    }
  }
}