インタラクション量ではなく、実際の成果を測定
運用と説明責任のために設計されたディメンションで、インテーク、意思決定、実行、下流のビジネスインパクトを追跡。
エンゲージメントと解決
- インプレッション -> オープン -> チャット -> メッセージ
- セッションのコンテインメント vs フォローアップ意図
- リード用プロンプトの成果と離脱
- 初回回答までの時間
リトリーバルと品質シグナル
- フォールバック理由コード（低関連度、タイムアウト、プロバイダエラー）
- 未回答の質問とフォローアップ意図
- 被引用ドキュメント上位と陳腐化アラート
- ハルシネーション検知のための精度サンプリング
運用インサイト
成果分析は、ワークフローの挙動を解決率やサイクルタイムへの影響につなげます。
すべての指標は追跡可能です。各集計は生イベント（リトリーバル/生成のスパン）に紐づき、監査・回帰・調査を支援します。
これはトラフィックではなく信頼をデバッグするための分析です。