Vos agents d'IA conversationnelle sont opérationnels. Mais quelqu'un vous demande : « Aident-ils vraiment nos utilisateurs ? » Nous avons conçu Pendo Agent Analytics pour apporter de la clarté sur la valeur que les agents délivrent grâce à des données fiables en temps réel — pour nos clients et pour nous-mêmes.
Avec Agent Analytics, vous pouvez voir :
- Ce que les utilisateurs demandent à votre agent (classé par cas d'usage les plus fréquents)
- Ce que font les utilisateurs avant et après leurs interactions avec l'agent
- Quelles conversations génèrent des résultats commerciaux ou créent des frictions
Chaque fois que nous créons un nouveau produit ou une nouvelle fonctionnalité Pendo, nous sommes impatients de le tester nous-mêmes. Et alors que nous lançons davantage d'agents IA dans Pendo — comme Listen Explore et Agent Mode — Agent Analytics devient rapidement un favori parmi nos responsables Produit.
Toutes vos questions sur l'impact des agents, avec des réponses
Alejandro Dao, chef de produit principal chez Pendo, utilise Agent Analytics pour obtenir des informations immédiates sur la façon dont les équipes utilisent la nouvelle fonctionnalité de création de guides par IA — un ajout récent faisant partie de notre version Automne. Cette fonctionnalité permet aux utilisateurs de transformer une invite en langage naturel en un guide in-app soigné et personnalisé en quelques secondes. (En savoir plus sur la fonctionnalité Guide IA ici.)
Tout au long du processus de développement, Dao a régulièrement utilisé Agent Analytics pour recueillir des informations pendant que les équipes internes et les Design Partners l'utilisaient. Voici ce qu'il a appris :
Étant donné qu'Agent Analytics peut extraire des éléments conversationnels d'un agent et les présenter dans un rapport, Dao a exploité ces rapports pour voir qui utilisait la fonctionnalité, qui l'utilisait le plus fréquemment, et surtout—quels étaient les cas d'usage.
En surveillant régulièrement les demandes les plus courantes adressées par les utilisateurs à l'agent de guide, Dao a découvert un cas d'usage souhaité qui n'avait pas été initialement prévu : la possibilité d'ajouter une vidéo dans le guide. Bien que l'agent ne dispose pas encore de cette capacité, cet insight fondé sur les données a permis à l'équipe de le prioriser en toute confiance dans les décisions futures de la feuille de route. Dans l'intervalle, l'équipe a mieux communiqué sur ce qui est et n'est pas (encore) possible avec la fonctionnalité, afin que les utilisateurs ne se découragent pas et n'abandonnent pas leurs efforts.
Identifier les frustrations non signalées des utilisateurs grâce aux insights de l'agent
Dao a fait une autre découverte clé sur la création de guides par IA en associant Agent Analytics à Session Replay.
En utilisant ce dernier pour obtenir un contexte visuel sur les clics inefficaces survenant dans le processus de création de guides piloté par l'IA, Dao a observé des tentatives répétées des utilisateurs pour modifier le texte en ligne. Dao avait suspecté que cela pourrait être un problème, mais ce n'était pas une priorité dans la feuille de route produit, et aucun Design Partner ne l'avait signalé comme tel. Voir ce cas d'usage se répéter encore et encore en direct a donné à Dao la confiance et l'autorité nécessaires pour en faire une priorité d'ingénierie plus immédiate.
Sans les données d'Agent Analytics, l'équipe produit de Pendo devrait se fier à des retours utilisateurs occasionnels et volontaires, ainsi qu'à des suppositions. Au lieu de cela, des équipes comme celle de Dao disposent d'insights détaillés en quelques secondes. Sans construction de rapports supplémentaires, et sans planification d'innombrables appels clients pour comprendre la voix de leurs utilisateurs. Comme le dit Dao : « Agent Analytics ne remplace pas les fondamentaux produit solides. Mais il agit comme un accélérateur ou un amplificateur de vos propres compétences. »
Les agents parlent, êtes-vous à l'écoute ?
L'étape cruciale des initiatives IA aujourd'hui est de mesurer leur efficacité. Il existe une mine de données sur l'intention des utilisateurs, leurs frustrations et les risques, qui se trouvent simplement au sein de vos agents. Êtes-vous prêt à optimiser pour de meilleurs résultats utilisateurs ?
Faites une visite guidée d'Agent Analytics et découvrez ce qui est possible.
