JQ

joeseesun/qiaomu-llm-mcp

开发工具

本页由 AI 翻译,技术细节请以原文为准。 查看原文

47 stars 3 forks 质量 74 趋势 17MIT

把多模型 Provider、本地密钥和 HeavySkill 讨论统一成 MCP 网关 |本地 MCP 网关,用于多提供商的 LLM 路由、秘密和 HeavySkill 讨论。

概览

把多个 LLM Provider、API Key、模型路由和多模型讨论统一成一个本地 MCP 网关。一个本地 MCP 网关,将多个 LLM 提供者、API 密钥、路由规则和多模型讨论整合成一个工具界面。 - 你同时使用 Z.ai Coding Plan、DeepSeek、OpenAI 兼容 API、Anthropic 兼容 API、Claude Code CLI 等多套模型。- 你不想把 API Key 写进提示词、脚本或 Codex 配置里。- 你希望在 Codex / Claude / 其他 MCP 客户端里用同一组工具完成:单模型调用、多模型对比、流水线、HeavySkill 式多轮讨论。- 你需要让最强的主控模型主持讨论,而不是把全部判断交给某一个 Provider。 本项目是本地优先工具:Provider 注册表保存在 ~/.config/qiaomu-llm/registry.json,密钥默认放在 macOS Keychain,MCP server 只暴露“密钥是否存在”,不会返回明文 Key。 这套设计的核心不是“多叫几个模型凑热闹”,而是让不同模型承担不同角色:快速模型做初稿,强推理模型做审查,写作模型做表达,Codex 作为当前工作区里的主持人整合上下文和行动方案。 - macOS 或 Linux - Python 3.10+ - 一个支持 MCP 的客户端,例如 Codex、Claude Desktop、Claude Code、Cursor 等 - 至少一个 LLM Provider 的 API Key MCP 服务器通常通过 stdio 被客户端启动。直接运行时它会等待 MCP 客户端消息,这是正常现象。 编辑 ~/.config/qiaomu-llm/registry.json,保留你要用的 Provider,删除不用的 Provider。 示例中的 Z.ai Coding Plan 使用专用 Coding endpoint:

概述(AI 翻译)

把多个 LLM Provider、API Key、模型路由和多模型讨论统一成一个本地 MCP 网关。 一个本地MCP网关,将许多LLM提供商、API密钥、路由规则和多模型讨论集成一个工具表面。

中文 |英语

适合这些场景:

  • 你同时使用 Z.ai Coding Plan、DeepSeek、OpenAI 兼容 API、Anthropic 兼容 API、Claude Code CLI 等多套模型。
  • 你不想把 API Key 写进提示词、脚本或 Codex 配置里。
  • 你希望在 Codex / Claude / 其他 MCP 客户端里用同一组工具完成:单模型调用、多模型对比、流水线、HeavySkill 式多轮讨论。
  • 你需要让最强的主控模型主持讨论,而不是把全部判断交给某一个 Provider。

本项目是本地优先工具:Provider 注册表保存在 ~/.config/qiaomu-llm/registry.json,密钥默认放在 macOS Keychain,MCP server 只暴露“密钥是否存在”,不会返回明文 Key。

你能得到什么

安装后,MCP 客户端会看到这些工具:

工具 作用
qllm_list_providers 列出本地配置的 Provider,并安全显示密钥状态
qllm_show_provider 查看单个 Provider 的非敏感配置
qllm_list_models 查看本地配置或远程 /models 返回的模型
qllm_route_task 不花 token,根据任务类型选择 Provider / Model
qllm_chat 调用单个 Provider
qllm_compare 用同一个问题对比多个 Provider
qllm_pipeline 串联多个模型步骤完成任务
qllm_heavy_discuss 多视角、多模型讨论,可由模型或 Codex 主持
qllm_heavy_render 把 Codex 主持后的讨论渲染成 Markdown / HTML 报告
[qllm_claude_code_* 通过 MCP 安全调用本机 Claude Code CLI

推荐工作流

本页由 AI 翻译,技术细节请以原文为准。

README

以下为原文 README 节选,完整内容请查看原文。

qiaomu-llm-mcp

把多个 LLM Provider、API Key、模型路由和多模型讨论统一成一个本地 MCP 网关。 A local MCP gateway that turns many LLM providers, API keys, routing rules, and multi-model discussions into one tool surface.

中文 | English

适合这些场景:

  • 你同时使用 Z.ai Coding Plan、DeepSeek、OpenAI-compatible API、Anthropic-compatible API、Claude Code CLI 等多套模型。
  • 你不想把 API Key 写进提示词、脚本或 Codex 配置里。
  • 你希望在 Codex / Claude / 其他 MCP 客户端里用同一组工具完成:单模型调用、多模型对比、流水线、HeavySkill 式多轮讨论。
  • 你需要让最强的主控模型主持讨论,而不是把全部判断交给某一个 Provider。

本项目是本地优先工具:Provider 注册表保存在 ~/.config/qiaomu-llm/registry.json,密钥默认放在 macOS Keychain,MCP server 只暴露“密钥是否存在”,不会返回明文 Key。

你能得到什么

安装后,MCP 客户端会看到这些工具:

工具 作用
qllm_list_providers 列出本地配置的 Provider,并安全显示密钥状态
qllm_show_provider 查看单个 Provider 的非敏感配置
qllm_list_models 查看本地配置或远程 /models 返回的模型
qllm_route_task 不花 token,根据任务类型选择 Provider / Model
qllm_chat 调用单个 Provider
qllm_compare 用同一个问题对比多个 Provider
qllm_pipeline 串联多个模型步骤完成任务
qllm_heavy_discuss 多视角、多模型讨论,可由模型或 Codex 主持
qllm_heavy_render 把 Codex 主持后的讨论渲染成 Markdown / HTML 报告
qllm_claude_code_* 通过 MCP 安全调用本机 Claude Code CLI

推荐工作流

用户问题
  |
  +-- qllm_route_task 选择模型
  |
  +-- qllm_chat / qllm_compare / qllm_pipeline
  |
  +-- 复杂议题: qllm_heavy_discuss
        |
        +-- 多模型独立给观点
        +-- Codex 或指定模型主持
        +-- qllm_heavy_render 输出 Markdown / HTML

这套设计的核心不是“多叫几个模型凑热闹”,而是让不同模型承担不同角色:快速模型做初稿,强推理模型做审查,写作模型做表达,Codex 作为当前工作区里的主持人整合上下文和行动方案。

快速开始

1. 准备环境

要求:

  • macOS 或 Linux
  • Python 3.10+
  • 一个支持 MCP 的客户端,例如 Codex、Claude Desktop、Claude Code、Cursor 等
  • 至少一个 LLM Provider 的 API Key

克隆项目:

git clone https://github.com/joeseesun/qiaomu-llm-mcp.git
cd qiaomu-llm-mcp

如果你还没有 GitHub 版本,也可以先在本地目录安装:

cd /path/to/qiaomu-llm-mcp

2. 安装 Python 依赖

python3 -m venv .venv
.venv/bin/python -m pip install -U pip
.venv/bin/python -m pip install -e .

确认可执行文件存在:

test -x .venv/bin/qiaomu-llm-mcp && echo "qiaomu-llm-mcp installed"
.venv/bin/python -c "import qiaomu_llm_mcp; print(qiaomu_llm_mcp.__version__)"

MCP server 通常通过 stdio 被客户端启动。直接运行时它会等待 MCP 客户端消息,这是正常现象。

3. 创建 Provider 注册表

复制示例配置:

mkdir -p ~/.config/qiaomu-llm
cp examples/registry.example.json ~/.config/qiaomu-llm/registry.json

编辑 ~/.config/qiaomu-llm/registry.json,保留你要用的 Provider,删除不用的 Provider。

示例中的 Z.ai Coding Plan 使用专用 Coding endpoint:

{
  "base_url": "https://api.z.ai/api/coding/paas/v4",
  "default_model": "glm-5.2"
}

注意:Z.ai Coding Plan 要使用 https://api.z.ai/api/coding/paas/v4,不要误用通用 endpoint https://api.z.ai/api/paas/v4。

4. 把 API Key 放进 Keychain

推荐使用 Keychain,不要把明文 Key 写入配置文件。

Z.ai:

security add-generic-password -U \
  -s qiaomu-llm \
  -a zai-glm \
  -w "$ZAI_API_KEY"

DeepSeek:

security add-generic-password -U \
  -s qiaomu-llm \
  -a deepseek \
  -w "$DEEPSEEK_API_KEY"

Anthropic-compatible Provider:

在 GitHub 查看完整 README

安装

This server does not publish a one-line install command.

Open the repository installation guide 新手?先看 mcpskill.org 教程 →

配置

{ "mcpServers": { "qiaomu-llm": { "command": "/absolute/path/to/qiaomu-llm-mcp/.venv/bin/qiaomu-llm-mcp" } } }