jwuthri-cloud/tracely-ai
Developer toolsこのページは AI により自動翻訳されています。技術的な詳細は原文をご確認ください。 原文を見る
AIエージェント向けのトレースネイティブCI/CD:本番のトレース、クラスタ障害をグレーディングし、再生可能な回帰テストに凍結し、退行するPRをブロックします。自己ホスト可能。
概要
Tracelyは、エージェントのトレースが着陸した際に評価し、失敗を問題ごとにクラスタリングし、悪いランを密閉した再プレイ可能なケースに凍結し、再発送するプルリクエストをブロックし、その瞬間に何かが起きた瞬間に教えてくれます。 本番トレース→故障検出→回帰テスト→CIゲート→アラート — API、ワーカー、UI、Postgres、ClickHouse、Redis、MinIO: 1つのワークスペース:何が動いていて、何が壊れたか、すでにテストとしてピンマークされているもの。 なぜなら、オブザーバビリティはダッシュボードで終わるからです。エージェントが壊れたのがわかりますが、その後はどうなるのでしょうか? すべての評価ツールは、座って質問を考え、理想的な答えを書き、製品が変わるにつれて最新に保つことを求めます。そのデータセットは、何が壊れそうかの推測に過ぎません。 本番はすでに本物を渡してくれました:失敗した正確な実行の痕跡、正確な入力、正確なツール呼び出し、正確なモデル応答。 Tracelyはその痕跡をヘルメティック回帰ケースに凍結し、すべてのPRで再再生します。
概要（AI 翻訳）
本番の失敗は回帰テストになります。
**AIエージェント向けのトレースネイティブCI/CD。**Tracelyは着陸時にすべてのエージェントトレースをグレーディングし、クラスタリングします。 問題に失敗したり、悪いものをフリーズさせたり、ヘルメティックな再プレイ可能なケースに突入したり、プルリクエストをブロックしたりします そうすればまた送り合い、何かが起きた瞬間に教えてくれます。
本番トレース→故障検出→回帰テスト→CIゲート→アラート
ウェブサイトドキュメント製品ガイド****エージェントスキル ·ガイドツアー2分間デモデザインドシエ
ワンクリックで全スタックをセルフホスト — API、ワーカー、UI、Postgres、ClickHouse、Redis、MinIO:
1つのワークスペース:何が動いていて、何が壊れたか、すでにテストとしてピンマークされているもの。
なぜまたエージェント・オブザーバビリティツールなのか?
なぜなら、オブザーバビリティはダッシュボードで終わるからです。エージェントが壊れたのがわかりますが、その後はどうなるのでしょうか?
すべての評価ツールは、手作業でデータセットを作成するを求めます:座って、質問を考え、理想を書く 答えは、製品が変わるたびに常に最新に保ちましょう。そのデータセットは、何が壊れるかの推測に過ぎません。
制作側はすでに本物を渡してくれました:失敗した正確なランの痕跡を、正確なものと
このページは AI により自動翻訳されています。技術的な詳細は原文をご確認ください。
README
以下は原文 README の抜粋です。原文を見る。
Why another agent-observability tool?
Because observability stops at the dashboard. You can see that your agent broke — then what?
Every eval tool asks you to hand-author a dataset: sit down, invent questions, write ideal answers, keep them current as the product changes. That dataset is a guess about what might break.
Production already handed you the real thing: a trace of the exact run that failed, with the exact input, the exact tool calls, the exact model responses.
推奨ツール
別のキーワードを試すか、フィルタを外してください。
インストール
npx skillfish add jwuthri-cloud/tracely-ai