TraceChat Labは、複数LLMチャットのフローを作る開発者向けの軽量観測ツールです。会話ログ、共有メモ、使用モデルを記録して、ハンドリングの差やメモリの影響を再生・検査できます。小さなチームが独自のロギングを作らずに問題を見つけられます。
複数のLLMと共有メモを組み合わせると、予期せぬ挙動が出やすく、デバッグが面倒です。ログが散在しプロンプトやメモの状態を再現するのに時間がかかり、問題の再現や修正が遅れます。
TraceChat Labはローカル中心のWeb UIと小さなSDKを提供し、各ターンの会話、使用モデル、メモリのスナップショットをキャプチャします。スレッドを別モデルで再生したり、応答の差分を比較したり、メモをピン留めできます。ラップトップや安価なVPSで動き、JSONエクスポートと既存パイプラインへの最小API統合を想定しています。
夜中の2時、ミナは顧客Q&Aアシスタントで変な回答を見つけます。サービス全体を書き換える代わりにTraceChat Labを入れて、小さなSDKを組み込み、問題の会話を再生します。UIではモデルBが応答し、『billing_issue』タグが抜けていることが判明。修正したメモをピンし、モデルAとモデルBで再生するとモデルBも丁寧な回答を返しました。差分ビューからプロンプト修正をコピーしてコミットし、翌朝には「プロンプト修正＋メモ固定で問題を解決しました」と短い報告を送ります。対応は1時間未満で済み、モデルのロールバックを回避できました。
パースペクティブ: Reducing friction in solo or micro-team work
作成日時: 2025/11/21 19:28:55