Retrace

Retraceはすべてのモデル呼び出し、ツール呼び出し、検索、エラーを、入力、出力、コスト、タイミングを伴うspanとして取り込む。OpenAI、Anthropic、Geminiへのプロバイダ呼び出しは自動で計測されるので、1つずつ手作業で配線する必要はない。結果として得られるのは、エージェントが実際に行ったことの完全で構造化された記録だ。部分的なログではない。推測でもない。

これがRetraceを単なるAIエージェント監視ツールから分ける機能だ。記録された実行を、変更した入力を持つ1つのspanで分岐させ、下流のすべてのステップをカスケードリプレイしてエージェント全体を新しい経路で再実行させる。ログには答えられない問いに答える。この1点を変えたら、その先のどこが壊れるのか。

プロンプト、ツール、モデルを変えた後、修正の証明が失敗した実行を再実行し、判定を返す。得られるのは、改善、退行、変化なしの3つのうち1つと、最初に分岐したspanだ。「これで直ったと思う」を検証可能な結果に変える。

評価とゲートの機能が、記録された実行を行動基準に対して採点し、パイプライン向けに合否のゲート判定を返す。チームはCIで通常のテストと並べて行動チェックを走らせられる。ずれたエージェントはユーザーに届く前に捕まる。マルチエージェント審査の検出器はProプランから利用できる。

エージェントが次のモデル呼び出しやツール呼び出しを行う前に、予算の強制がその呼び出しが許可されるかを問う。コスト予算、ループ検出、レイテンシ上限に基づいて許可、ブロック、保留を返す。暴走ループや高額な支出の急増を、起きる前に止める方法だ。請求書が来てからではない。

span検索が、記録されたspanとエージェントの記憶に対して意味検索を実行し、ある挙動、プロンプト、障害の過去の発生を、正確な文字列ではなく意味で見つける。似たバグが3週間前に出ていれば、正確な言い回しを覚えていなくても掘り起こせる。

RetraceはMCPベースの記憶ストアを備え、過去のエージェント実行から抽出した持続的な事実、好み、修正、パターンを保持する。エージェントはそれらを意味で想起できる。これにより、毎回同じ修正を学び直す代わりに、セッションをまたいで挙動を一貫させやすくなる。

テープの公開が、清掃済みの実行を対話的で共有可能なテープに変える。バグ報告、デモ、事後検証に役立ち、個人情報の伏せ字化はすべてのプランに含まれる。無料枠では月10本の公開テープが使える。