tracelint

概要

• tracelintは、エージェントの最終回答や要約ではなく、実際の実行トレースを解析して不具合を検出する決定論的なリンターです。
• ツール呼び出し後の処理や実行順序を確認し、チャットの見た目が正常でも内部で発生している構造的な問題を明らかにします。

主な特徴

• 無視されたツールエラー、スキーマ違反や幻覚的な引数、ループ、二重請求などの重複副作用を、該当するトレース行とともに指摘します。
• 構造的に証明できる不具合だけをCIの失敗対象とし、ヒューリスティックな兆候は根拠付きの参考情報として提示します。
• OpenTelemetry/OpenInference、LangSmith、Langfuse、OpenAIのトレースに対応し、CI終了コードや未検査項目の開示にも対応しています。

こんな人におすすめ

• LLMエージェントを開発し、最終回答が自然なために評価スイートやLLM判定で見逃される実行時バグを減らしたいチームに適しています。
• エージェントのツール連携、決済、データ更新などで、エラー無視や重複実行といった重大な副作用を本番前に検出したい開発者に向いています。