Tus agentes de IA conversacional están en funcionamiento. Pero entonces alguien pregunta: "¿Realmente están ayudando a nuestros usuarios?" Creamos Pendo Agent Analytics para brindar claridad sobre el valor que entregan los agentes mediante datos confiables en tiempo real, tanto para nuestros clientes como para nosotros mismos.
Con Agent Analytics, puedes ver:
- Qué preguntan los usuarios a tu agente (categorizadas por los casos de uso más comunes)
- Qué hacen los usuarios antes y después de las interacciones con el agente
- Qué conversaciones impulsan resultados de negocio o generan fricción
Cada vez que creamos un nuevo producto o función de Pendo, estamos ansiosos por probarlo nosotros mismos. Y a medida que lanzamos más agentes de IA en Pendo —como Listen Explore y Agent Mode— Agent Analytics se está convirtiendo rápidamente en el favorito de nuestros líderes de Producto.
Todas tus preguntas sobre el impacto del agente, respondidas
Alejandro Dao, gerente de producto principal en Pendo, está usando Agent Analytics para obtener información inmediata sobre cómo los equipos utilizan la nueva función de creación de guías con IA, una nueva incorporación y parte de nuestro Lanzamiento de Otoño. Esta función permite a los usuarios convertir un mensaje en lenguaje natural en una guía dentro de la aplicación, pulida y con la marca de la empresa, en segundos. (Obtén más información sobre la función de Guías con IA aquí.)
Durante el proceso de desarrollo, Dao utilizó Agent Analytics de manera constante para recopilar información mientras los equipos internos y los Design Partners lo usaban. Esto es lo que aprendió:
Dado que Agent Analytics puede extraer elementos conversacionales de un agente y presentarlos en un informe, Dao aprovechó estos informes para ver quién usaba la función, quién la usaba con mayor frecuencia y, lo más importante, cuáles eran los casos de uso.
Al monitorear de forma constante las solicitudes más comunes que los usuarios hacían al agente guía, Dao descubrió un caso de uso deseado que no estaba previsto inicialmente: la posibilidad de agregar un video a la guía. Si bien el agente aún no tiene esta capacidad, la información respaldada por datos permitió al equipo priorizarla en futuras decisiones del roadmap con confianza. Mientras tanto, el equipo ha comunicado de manera más clara qué es y qué no es posible (aún) con la función, para que los usuarios no se frustren y abandonen sus esfuerzos.
Identificar frustraciones no reportadas de los usuarios con los insights del agente
Dao realizó otro descubrimiento clave sobre la creación de guías con IA al combinar Agent Analytics con Session Replay.
Al usar esta última herramienta para obtener contexto visual sobre los clics sin respuesta que ocurrían en el proceso de creación de guías con IA, Dao observó intentos repetidos de los usuarios por editar el texto en línea. Dao había sospechado que esto podría ser un problema, pero no era una prioridad en el roadmap del producto, ni ningún Design Partner lo había señalado como tal. Ver este caso de uso una y otra vez de primera mano le dio a Dao la confianza y la autoridad que necesitaba para convertirlo en una prioridad de ingeniería más inmediata.
Sin los datos de Agent Analytics, el equipo de producto de Pendo dependería de comentarios ocasionales y voluntarios de los usuarios, además de suposiciones. En cambio, equipos como el de Dao tienen información detallada en segundos. Sin necesidad de crear informes adicionales ni programar innumerables llamadas con clientes para entender la voz de sus usuarios. Como dice Dao: "Agent Analytics no reemplaza los fundamentos sólidos de producto. Pero sí actúa como un acelerador o amplificador de tus propias habilidades."
Los agentes están hablando, ¿los estás escuchando?
El paso crítico en las iniciativas de IA ahora es medir la eficacia. Hay una gran cantidad de datos sobre la intención del usuario, frustraciones y riesgos que se encuentran dentro de tus agentes. ¿Estás listo para optimizar y lograr mejores resultados para los usuarios?
Haz un recorrido por Agent Analytics y descubre lo que es posible.
