Agent Analytics

AIエージェントが価値を生んでいると確信する。

Agent Analyticsは、プロンプト、会話、トレースを実際のプロダクト行動に結びつけます。失敗している箇所を見つけ、重要な部分を改善し、エージェントが活用・定着・ROIを高めていることを証明できます。

Why we built Agent Analytics
オブザーバビリティのギャップ

エンジニアリングはエージェントが動いているかを見られます。プロダクトは役に立っているかを見られません。両方が必要です。

評価(Eval)はエンジニアリングが「正しい応答」を定義するのに役立ちますが、実際の環境でユーザーが何をしているかまでは示しません。プロダクトチームが知る必要があるのは、誰がエージェントを使い、どこでユーザーがあきらめ、成果が改善しているかどうかです。Agent Analyticsは、評価や技術的なシグナルを実際のプロダクト行動と結びつけ、問題の早期発見とROIの証明を支援します。

エージェント体験の全体像と、その周辺のすべてを。

ユーザーは複数のエージェントとインターフェースを行き来します。Pendoは、ユーザーが何を尋ね、エージェントがどう応答し、その後プロダクト内で何が起きたかを結びつけます。成果を測定し、根拠をもって体験を改善できます。

Claudeのウィンドウ:今月ユーザーがサポートエージェントに何を尋ねているかという質問に対し、Pendo MCPのget_agent_use_cases呼び出しが8,410件の会話をタグ付けなしでユースケース別に分類して返します。返金状況の確認が2,140件で12%増、サブスクリプションの解約が980件で新規、請求書のエクスポートが610件で新規、返品が430件で8%減。続けて、解約と請求書エクスポートは現在サポートされていない旨が示されます。

Claude
Pendoは初めてですか?Agent AnalyticsがAIスタックにどう収まるかをご覧ください。
主な機能

エージェントを開発するすべての人に、分析を。

アカウント単位のトレンドから、失敗したツール呼び出し1件まで。ダッシュボードをつぎはぎすることなく、エージェント活動のあらゆる層を測定できます。

会話を分析する

エージェントへの需要を形づくるユースケース、インテント、パターンを見つけます。

ユーザーのいら立ちを検知する

同じプロンプトの繰り返し、全角大文字、暴言など、不満が高まっているサインを捉えます。

問題を自動で診断し修正する

Agent RepairスキルとPendo MCPサーバーを通じて、検知した問題を修正方針としてまとめます。コーディングエージェントに渡すことも、チケット化することもできます。

活用状況を追跡する

誰が再訪し、誰が離脱し、訪問者単位・アカウント単位でどこに活用のギャップが生まれているかを把握できます。

ユーザーの次の行動を見る

エージェントとのやり取りを、パス、ファネル、継続率、プロダクトの成果に結びつけます。

未対応のリクエストを見つける

エージェントがまだ応えられない要望を重要度順に並べ、ロードマップの材料にできます。

すべての応答をトレースする

応答の背後にあるモデル、ツール、サブエージェント、レイテンシ、トークン、コストを確認できます。

ワークフローを比較する

エージェント経由と従来の経路のどちらが、より速く、より高い確率で成果に到達するかを測定します。

問題が起きた瞬間を確認する

会話からSession Replayを開き、失敗の前後にあるプロダクトの文脈を確認できます。

Experimentsで改善を検証する

エージェントのバージョン、モデル、プロンプト、ツールを、合成的な評価ではなく実際のユーザー成果で比較します。

普段使うツールで更新を受け取る

Agent Analyticsのダイジェストを定期的にSlackやMicrosoft Teamsへ送信し、主要指標や新たな問題をチームのチャンネルに届けます。

Agent Analyticsの実際をご覧になりますか?

ユースケースをお持ちください。Pendoが活用のギャップ、失敗した会話、成果の裏付けをどう見つけるかをお見せします。

Pendo for Agents

プロダクトコンテキストと、証拠をひとつに。

Agent Toolkitは、自社開発でも外部導入でも、エージェントにPendoのリアルタイムなコンテキストを届けます。応答をパーソナライズし、ユーザーがつまずいたときに介入できます。Agent Analyticsは、その介入が機能しているかを示します。

  • 力を与え、行動する。

    エージェントに行動とアカウントの文脈を渡し、ユーザーが必要とした瞬間に支援を発動させます。

  • 観測し、改善する。

    計測対象のすべてのエージェントについて、活用状況、ユースケース、失敗、ビジネスへの影響を測定します。

エージェントの成果に責任を持つすべてのチームに、ひとつのビューを。

プロダクト・AIチーム向け

実際のエージェントの挙動からロードマップを決める。

  • 根拠にもとづいて優先順位を決める。 実際のユースケース、問題、活用パターン、その後の成果を、ロードマップの意思決定に変えます。
CX・ITチーム向け

サポートや社内向けエージェントの費用対効果を示す。

  • 投資を正当化する。 サポートや社内向けのエージェントが、より多く解決し、エスカレーションを減らし、投資に見合っているかを確認できます。

お使いのエージェントでAgent Analyticsを。

ユースケースをお持ちください。Pendoが活用のギャップ、失敗した会話、成果の裏付けをどう見つけるかをお見せします。

セキュリティ、プライバシー、信頼

データの管理を手放さずに、 エージェントを測定する。

プロンプトのみの取得か会話全体の取得かを選択し、ロールごとにアクセスを管理し、エージェントごとに14種類の機微データをマスキングできます。Pendoは、プラットフォーム全体と同じセキュリティおよびプライバシーの取り組みでAgent Analyticsのデータを保護します。

セキュリティの詳細を見る

SOC 2 Type II

ISO 27001

GDPR

HIPAA

次に来るもの

いまのエージェント体験ではなく、
これから向かう先を見据えて。

エージェントはチャットウィンドウの外へ広がっています。Agent Analyticsもそれに合わせて進化します。

  • Autonomous Agent Analytics

    会話インターフェースを持たないエージェント、エージェント間の連携やバックグラウンドのワークフローも、いまの活用状況や問題と同じように測定できます。

  • MCP Analytics

    MCPサーバーの向こう側で何が起きているかを把握できます。どのツールが、どのエージェントから、どれだけ呼び出され、どこで失敗または遅延しているか。MCPでデータや操作を提供する側のチームのために設計されています。利用する側だけのものではありません。

エージェントがユーザーのために実際に何をしているかを。

活用状況、問題、ユースケース、ビジネスへの影響を、ひとつのご案内で。