edonadei/caliper
Developer toolsЭта страница переведена автоматически. Технические детали смотрите в оригинале. Открыть оригинал
Управляйте своим настоящим агентом с вашими навыками, MCP и правилами. Посмотрите, какие из них действительно помогают, и сколько они стоят в жетонах. Поддерживает Claude Code, Codex, Pi и Hermes.
Обзор
Caliper - это легкий инструмент оценки навыков агента. Напишите краткое описание того, как выглядит «хорошо», запустите его и получите возможность отслеживать. Работа с агентом, которым вы уже пользуетесь: Caliper устанавливает навык, где агент ищет навыки и позволяет агенту выбирать. Вы пишете спецификацию, файл YAML, описывающий, что означает «работа». Либо напишите его вручную, либо создайте его /grill-skill. -ablate выполняет одни и те же задачи с удаленным навыком, а caliper сравнивает две задачи за задачей: Навыки агента трудно проверить. Умение, которое работает на вашем компьютере, сегодня может потерпеть неудачу завтра после обновления модели или однострочного редактирования. Caliper делает надежность измеримой: определяет, как выглядит успех, многократно запускает навык и получает показатель успеха, который вы можете отслеживать с течением времени. - Мой агент все еще работает с этой новой моделью? - Мой быстрый монтаж улучшил мастерство? - Мой навык стреляет, когда должен, и молчит, когда не должен срабатывать?
Обзор (машинный перевод)
Затворник
Знайте, действительно ли ваш агент работает.
Ваше мастерство сработало, когда вы его попробовали. Сработает ли это девять раз? После очередного обновления модели? Когда другой навык соревнуется за то же самое?
Быстрый старт • Как это работает Docs • Примеры
Те же задачи, с навыками и без них. Голый агент уже проходит 80%; навык принимает его на 100% с 30% меньшим количеством токенов и на 28% меньшим временем стен.
##Почему калипер
** Реальные установки** Ваш навык установлен там, где агент смотрит, никогда не вставлен в подсказку.
Активный табло Агент выбрал ваше мастерство? Отличается от того, работает ли он.
** Соседи** Объявляйте конкурирующие навыки и утверждайте, какой из них должен выиграть каждое предложение.
Абляция Перезапуск без навыков. Тот же счет? Он не зарабатывает свой контекст.
Честные номера Прежде всего, одиночный успех. pass@k льстит слабоумным навыкам.
Четыре агента* Клод Код, Кодекс, Пи, Гермес. Одна спецификация, выберите двигатель во время работы.
Быстрый старт
В вашем агенте ️ В терминале
Эта страница переведена автоматически. Технические детали смотрите в оригинале.
README
Показан фрагмент оригинального README. Открыть оригинал.
Caliper
Know if your agent skill actually works.
Your skill worked when you tried it. Will it work the next nine times? After the next model update? When another skill competes for the same prompt?
Quick start • How it works • Docs • Examples
Same tasks, with and without the skill. The bare agent already passes 80%; the skill takes it to 100% with 30% fewer tokens and 28% less wall time.
Why Caliper
Quick start
🤖 In your agent
Рекомендуемые инструменты
Попробуйте другой запрос или уберите фильтр.
Установка
npx skillfish add edonadei/caliper