Não se pode treinar o que não se vê: porque estamos a integrar a monitorização de qualidade no langboxTranslation

Os nossos colegas da Two Impulse acabaram de publicar um artigo que todos os líderes de serviço ao cliente deviam ler: Monitoring every customer conversation: how 100% quality coverage works in practice (em inglês).

A ideia central é simples — e um pouco desconfortável. A maioria das equipas de serviço avalia a qualidade com base numa pequena amostra de conversas: algumas chamadas por agente por mês, escolhidas mais ou menos ao acaso. Tudo o resto fica invisível. Padrões de reclamação que só aparecem em volume, conversas com bots que nunca chegam à garantia de qualidade, aquele problema recorrente que provoca chamadas de retorno mas nunca é sinalizado.

O artigo explica o que é preciso para rever todas as interações: um único pipeline para todos os canais, critérios escritos com precisão suficiente para que dois avaliadores experientes pontuem a mesma conversa da mesma forma, a mesma bitola para humanos e bots — e vistas que tanto a gestão como os analistas abrem todos os dias.

Porque é que isto nos interessa

Quem acompanha o langbox conhece o nosso ponto de partida: role-plays com IA que permitem às equipas de apoio ao cliente praticar conversas difíceis antes de as terem com clientes reais. Treino, portanto.

Mas o treino tem um ponto cego. Concebem-se cenários de prática com base no que se *acha* que são as dificuldades da equipa. Entretanto, as conversas reais — milhares delas — já contêm a resposta. Que objeções surgem de facto. Onde a desescalação falha. Que novos colaboradores estão prontos e quais precisam de mais uma ronda de prática.

A monitorização de qualidade fecha este ciclo. Quando se vê o que realmente acontece em todas as conversas, deixa de se adivinhar o que treinar. E quando treino e monitorização partilham os mesmos critérios — a mesma definição do que é uma boa conversa — a prática deixa de ser uma atividade separada e passa a fazer parte da forma como a operação melhora.

O que vem aí

É por isso que estamos a construir um módulo de monitorização de qualidade para o langbox. Está em desenvolvimento e chega em breve.

A direção segue os princípios do artigo da Two Impulse, aplicados às equipas com quem já trabalhamos:

• Cobertura total, não amostras. Cada conversa pontuada segundo os seus critérios — os mesmos critérios contra os quais a sua equipa já treina no langbox TRAIN.
• Humanos e bots na mesma bitola. Se opera agentes de IA ao lado da sua equipa, ambos são medidos da mesma forma.
• Do resultado à prática. Quando a monitorização revela uma fragilidade — um tema, um canal, uma lacuna de competência — o passo seguinte é um role-play direcionado, não uma apresentação de slides.

Vamos partilhar mais à medida que o módulo ganha forma. Se quiser ser dos primeiros a vê-lo, marque uma demonstração e mencione o seu interesse na monitorização de qualidade.

Entretanto, vale a pena ler o artigo completo no blog da Two Impulse — especialmente o exemplo prático de uma operação de apoio híbrida, com humanos e IA, em seis canais.