Seus agentes de IA conversacional estão em funcionamento. Mas então alguém pergunta: "Eles estão realmente ajudando nossos usuários?" Criamos o Pendo Agent Analytics para oferecer clareza sobre o valor que os agentes entregam usando dados confiáveis em tempo real—para nossos clientes e para nós mesmos.
Com o Agent Analytics, você pode ver:
- O que os usuários perguntam ao seu agente (categorizado pelos casos de uso mais comuns)
- O que os usuários fazem antes e depois das interações com o agente
- Quais conversas geram resultados de negócio ou criam atrito
Sempre que criamos um novo produto ou funcionalidade da Pendo, ficamos ansiosos para testá-lo nós mesmos. E à medida que lançamos mais agentes de IA na Pendo—como o Listen Explore e o Agent Mode—o Agent Analytics está rapidamente se tornando o favorito entre nossos líderes de Produto.
Todas as suas perguntas sobre o impacto dos agentes, respondidas
Alejandro Dao, gerente de produto sênior da Pendo, está usando o Agent Analytics para obter insights imediatos sobre como as equipes estão utilizando o novo recurso de criação de guias com IA—uma novidade que faz parte do nosso Lançamento de Outono. Esse recurso permite que os usuários transformem um prompt em linguagem simples em um guia in-app sofisticado e com a identidade visual da marca em segundos. (Saiba mais sobre o recurso de Guias com IA aqui.)
Durante o processo de desenvolvimento, Dao utilizou consistentemente o Agent Analytics para coletar insights enquanto as equipes internas e os Design Partners o utilizavam. Veja o que ele aprendeu:
Como o Agent Analytics pode extrair elementos conversacionais de um agente e apresentá-los em um relatório, Dao aproveitou esses relatórios para ver quem estava usando o recurso, quem o usava com mais frequência e, mais importante—quais eram os casos de uso.
Ao monitorar consistentemente as solicitações mais comuns feitas pelos usuários ao agente guia, Dao descobriu um caso de uso desejado que não havia sido planejado inicialmente—a capacidade de adicionar um vídeo ao guia. Embora o agente ainda não tenha essa funcionalidade, o insight baseado em dados permitiu que a equipe o priorizasse com confiança nas decisões futuras do roadmap. Enquanto isso, a equipe passou a comunicar melhor o que é e o que ainda não é possível com o recurso, para que os usuários não fiquem frustrados e abandonem seus esforços.
Identificando frustrações não relatadas dos usuários com os insights do agente
Dao fez outra descoberta importante sobre a criação de guias com IA ao combinar o Agent Analytics com o Session Replay.
Usando este último para obter contexto visual sobre cliques sem resposta que ocorriam no processo de criação de guias conduzido por IA, Dao observou tentativas repetidas dos usuários de editar o texto inline. Dao suspeitava que isso poderia ser um problema, mas não era uma prioridade no roadmap do produto, nem nenhum Design Partner havia apontado isso como uma questão. Ver esse caso de uso repetidamente em primeira mão deu a Dao a confiança e a autoridade necessárias para torná-lo uma prioridade de engenharia mais imediata.
Sem os dados do Agent Analytics, a equipe de produto da Pendo dependeria de feedbacks ocasionais e voluntários dos usuários e de suposições. Em vez disso, equipes como a de Dao têm insights detalhados em segundos. Sem a necessidade de criar relatórios extras nem de agendar inúmeras ligações com clientes para entender a voz dos usuários. Como Dao coloca, "O Agent Analytics não substitui os bons fundamentos de produto. Mas funciona como um acelerador ou amplificador das suas próprias habilidades."
Os agentes estão falando, você está ouvindo?
O passo crítico nas iniciativas de IA agora é medir a eficácia. Há uma riqueza de dados sobre intenção do usuário, frustrações e riscos esperando dentro dos seus agentes. Você está pronto para otimizar para melhores resultados dos usuários?
Faça um tour pelo Agent Analytics e veja o que é possível.
