EC

edonadei/caliper

Developer tools

このページは AI により自動翻訳されています。技術的な詳細は原文をご確認ください。 原文を見る

228 stars 品質 69 トレンド 39MIT

自分のスキル、MCP、ルールなしで、実際のエージェントを実行します。 実際に助けるもの、そしてトークンに費やすものを見る。 Claudeコード、Codex、Pi、ヘルメスをサポートしています.

概要

キャリパーは、エージェントスキルの軽量評価ハーネスです。 "good" の短いスペックを書いて、それを実行し、追跡することができます。 既に使用しているエージェントと連携します。 キャリパーは、エージェントがスキルを探し、エージェントが選択できるようにするスキルをインストールします。 "working" の意味を記述する YAML ファイルが spec を書きます。 いずれかの手書きか、/grill-skill が生成します。 --ablate は、そのスキルを削除して同じタスクを実行し、キャリパーは、タスクによって 2 つの実行タスクの差分を比較します。 エージェントのスキルはテストが難しいです。 お使いのマシン上で動作するスキル, このプロンプトで, 今日, モデルの更新やワンラインのプロンプト編集後に明日に失敗する可能性があります. キャリパーは信頼性を測定可能にします:成功がどのようなものかを定義し、繰り返しスキルを実行し、時間をかけて追跡できる成功率を得ることができます。 - エージェントは、まだこの新しいモデルと同じ動作していますか? - 私のプロンプト編集はスキルを向上させましたか? - スキルが消火し、トリガーしなくても静かに保たれますか?

概要(AI 翻訳)

カリパス

エージェントのスキルが実際に機能しているかどうかを知る。

試してみると、あなたのスキルが働いた。 次回9回は使えますか? 次のモデルの更新後? 別のスキルが同じプロンプトで競合する場合?

クイックスタート •  どのように動作する    ドキュメント  •  事例紹介

同じタスク、スキルなしで。 ベアエージェントはすでに80%を通過します。 スキルは30%の少数のトークンと28%の少ない壁時間で100%かかります。

なぜカリパス

リアルインストール エージェントが見えるところは、プロンプトに貼り付けられません。

アクティビティスコアボード エージェントがあなたのスキルをピックアップしましたか? それが働いたかどうかとは別に得られます。

近隣 競合スキルを宣言し、各プロンプトに勝つべきスキルを主張します。

アビレーション – スキルなしで再実行する。 同じスコア? コンテキストは獲得できません。

最長の電話番号 シングルランの成功率は最初に。 pass@k フラッキスキル

4つの代理店 クロードコード、コーデックス、ピ、ヘルメス。 1つの仕様は、エンジンを走行時間で選びます。

クイックスタート

問い合わせ あなたのターミナルで

このページは AI により自動翻訳されています。技術的な詳細は原文をご確認ください。

README

以下は原文 README の抜粋です。原文を見る。

Caliper

Know if your agent skill actually works.

Your skill worked when you tried it. Will it work the next nine times? After the next model update? When another skill competes for the same prompt?

Quick start  •  How it works  •  Docs  •  Examples

Same tasks, with and without the skill. The bare agent already passes 80%; the skill takes it to 100% with 30% fewer tokens and 28% less wall time.

Why Caliper

Quick start

🤖 In your agent

GitHub で README 全文を見る

推奨ツール

別のキーワードを試すか、フィルタを外してください。

インストール

npx skillfish add edonadei/caliper
MCP 初心者?mcpskill.org のガイドから始めましょう →