CB

computesdk/benchmarks

开发工具

本页由 AI 翻译,技术细节请以原文为准。 查看原文

131 stars 质量 57 趋势 36MIT

比较沙箱、存储、浏览器和AI网关提供商的性能。

概览

ComputeSDK 基准发布可复现、服务商中立的性能测量数据,适用于AI代理和开发者平台运行的基础设施:沙盒、对象存储、无头浏览器和AI网关。每项测试均实现自动化,所有结果均提交为JSON,方法论公开。 实时排行榜和完整方法论:https://www.computesdk.com/benchmarks 关于大型语言模型和代理:请参见llms.txt,获取该仓库的机器可读索引,以及 results/schema.json,了解每个基准测试结果文件的 JSON Schema。 - WRITING_BENCHMARKS.md — 基准测试编写的逐步指南。- Examples/ — 可运行的 *.bench.ts 个涵盖所有 benchsdk 能力的示例。- packages/create-bench/README.md — 用一个命令构建新的基准测试项目。- packages/benchsdk-runner/README.md — 运行器 API 和 bench run 参考。- .agents/skills/benchsdk-cli/SKILL.md — 完整的 bench CLI 引用(auth、org、runs、结果、工件、导出)。

概述(AI 翻译)

云基础设施基准的默认平台。

ComputeSDK 基准发布可复现、服务商中立的性能测量数据,适用于AI代理和开发者平台运行的基础设施:沙盒、对象存储、无头浏览器和AI网关。每项测试均实现自动化,所有结果均提交为JSON,方法论公开。

实时排行榜和完整方法论:https://www.computesdk.com/benchmarks

关于大型语言模型和代理:参见 llms.txt,获取该仓库的机器可读索引,results/schema.json 查看每个基准测试结果文件的 JSON 模式。

编写和运行基准测试

  • WRITING_BENCHMARKS.md — 基准创作的逐步指南。
  • examples/ — 可运行的*.bench.ts示例,涵盖所有benchsdk能力。
  • packages/create-bench/README.md — 在一个命令中搭建新的基准项目。
  • packages/benchsdk-runner/README.md — 运行器API和bench run参考。
  • .agents/skills/benchsdk-cli/SKILL.md — 完整的 bench CLI 引用(auths, org, runs, results, artfacts, export)。

合作伙伴

我们的合作伙伴支持我们的独立基准。

★ 银色

   

本页由 AI 翻译,技术细节请以原文为准。

README

以下为原文 README 节选,完整内容请查看原文。

ComputeSDK Benchmarks

The default platform for cloud infrastructure benchmarks.

ComputeSDK Benchmarks publishes reproducible, provider-neutral performance measurements for the infrastructure that AI agents and developer platforms run on: sandboxes, object storage, headless browsers, and AI gateways. Every test is automated, every result is committed as JSON, and the methodology is public.

Live leaderboards and full methodology: https://www.computesdk.com/benchmarks

For LLMs and agents: see llms.txt for a machine-readable index of this repo, and results/schema.json for the JSON Schema of every benchmark result file.

Writing and running benchmarks

Partners

Our partners support our independent benchmarks.

★ SILVER

   

  • BRONZE

       

在 GitHub 查看完整 README

推荐工具

换一个关键词,或者移除筛选条件。

安装

npx skillfish add computesdk/benchmarks
新手?先看 mcpskill.org 教程 →