NPS: quando a métrica deixa de medir e passa a ser encenada

O Net Promoter Score, ou NPS, tornou-se uma espécie de língua franca da experiência do cliente. Foi popularizado no início dos anos 2000 por Fred Reichheld, associado à Bain & Company, com uma promessa muito apelativa para qualquer organização: medir a lealdade do cliente através de uma pergunta simples.

A pergunta é conhecida: “Qual é a probabilidade de recomendar esta empresa, produto ou serviço a um amigo, familiar ou colega?” A resposta é dada numa escala de 0 a 10. Quem responde 9 ou 10 é considerado promotor; quem responde 7 ou 8 fica no grupo dos passivos; quem responde entre 0 e 6 é classificado como detractor. O NPS resulta da diferença entre a percentagem de promotores e a percentagem de detractores.

A ideia é elegante. Em poucos segundos, uma experiência complexa transforma-se num número. Um número que cabe num dashboard, que se acompanha mês a mês, que se apresenta facilmente numa reunião de direcção, num dashboard PowerBI (já vi vários) e que parece permitir comparar equipas, produtos, canais ou geografias. Percebe-se bem porque é que tantas organizações se apaixonaram por ele.

E convém dizer desde já: eu não tenho nada contra o NPS. Pelo contrário. Ao longos dos anos, tenho usado NPS em vários projectos e continuo a achar que é uma métrica útil. Pode criar uma linguagem comum entre equipas, obrigar a olhar para a experiência do cliente com regularidade e funcionar como um bom sinal de alerta. O problema não é o NPS. O problema é o que muitas organizações fazem com ele.

Quando uma métrica passa a ser importante para reporting executivo, avaliação de equipas, prémios ou apresentaçõe à administração, deixa de ser apenas uma métrica. Passa a ser um alvo. E, quando passa a ser um alvo, começa inevitavelmente a ser “trabalhada”. Nem sempre de forma grosseira. Raramente através de fraude explícita. O que acontece é quase sempre mais subtil: escolhe-se melhor o momento do inquérito, ajusta-se o texto, redesenha-se a escala, seleccionam-se melhor os clientes que respondem, ou muda-se ligeiramente a pergunta. No fim, o número melhora. Mas isso não significa que a experiência tenha melhorado.

Há uma história conhecida sobre a Amazon que ilustra bem este risco. Numa reunião, os indicadores internos mostrariam tempos de atendimento telefónico muito bons. Mas a experiência real dos clientes parecia contar outra história. Jeff Bezos terá então pegado no telefone e ligado para a linha de apoio durante a própria reunião. A chamada demorou muito mais tempo a ser atendida do que o KPI sugeria. O slide dizia uma coisa; a realidade dizia outra. E, em gestão, quando a realidade e o slide discordam, convém desconfiar do slide. Com o NPS acontece muitas vezes o mesmo.

O primeiro desvio começa logo numa confusão conceptual: NPS não é qualquer escala de 0 a 10. NPS é uma pergunta sobre recomendação. Perguntar “como avalia a sua experiência?” não é o mesmo que perguntar “qual é a probabilidade de nos recomendar?”. A primeira pergunta aproxima-se de uma métrica de satisfação. A segunda tenta medir intenção de recomendação. São conceitos próximos, mas não são iguais.

Esta distinção parece académica, mas não é. Se uma organização usa uma escala de 0 a 10, com aparência de NPS, mas pergunta apenas pela avaliação de uma entrega, de uma chamada ou de uma experiência específica, talvez esteja a medir algo útil, mas não está propriamente a medir NPS. Está a criar uma métrica híbrida, que pode ser conveniente para reporting, mas que perde rigor conceptual. E quando os conceitos se tornam elásticos demais, os KPIs passam a ser aquilo que quisermos que sejam.

Isto não significa que o NPS não possa ser adaptado ao contexto. Pode. Há diferença entre um NPS relacional, que mede a relação global com uma marca, e um NPS transaccional, aplicado depois de uma experiência concreta, como um voo, uma entrega ou um contacto com o apoio ao cliente. Mas mesmo no NPS transaccional, o núcleo da pergunta mantém-se: “com base nesta experiência, qual é a probabilidade de recomendar a marca?”. O contexto muda; aquilo que estamos a medir não devia mudar.

Depois há o problema do formulário em si. É aqui que muitas organizações começam a introduzir viés sem grande dramatismo aparente. Uma escala com valores baixos a vermelho, valores intermédios a amarelo e valores altos a verde parece apenas uma escolha de design. Mas não é só design. O vermelho comunica perigo, erro, penalização. O verde comunica aprovação, sucesso, resposta desejável. Ao colorir a escala, a organização deixa de estar apenas a recolher uma resposta; passa também a sugerir como essa resposta deve ser interpretada.

Isto pode inibir respostas baixas, mesmo quando são genuínas. Pode fazer o cliente sentir que está a “punir” a empresa, em vez de estar simplesmente a ser honesto. E pode introduzir um viés de desejabilidade social: a tendência para responder de forma mais confortável, mais aceitável ou menos conflituosa. A metodologia original do NPS assenta numa pergunta simples e numa escala neutra. As cores podem fazer sentido num dashboard de análise, para quem está a interpretar resultados. Fazem muito menos sentido no momento da recolha, onde o objectivo devia ser obter uma resposta tão limpa quanto possível.

E este fenómeno tornou-se tão comum que a própria tecnologia já o reproduz quase automaticamente. Há dias pedi ao GitHub Copilot para me ajudar a criar um formulário de NPS e a primeira proposta veio logo com a escala em modo semáforo: vermelho, amarelo e verde. Não porque isso seja uma exigência metodológica do NPS, mas porque passou a ser um padrão visual disseminado. As ferramentas de inquéritos, como Qualtrics, Medallia, Delighted, LimeSurvey e tantas outras, tornam extremamente fácil criar este tipo de escala. Mesmo quando não o impõem por defeito, normalizam a ideia de que um NPS “bem feito” deve parecer visualmente um semáforo. E, quando a IA começa a replicar isso como se fosse boa prática, percebemos que o viés já não está apenas na organização. Está no ecossistema.

Os exemplos que recolhi mostram bem estes problemas.

No caso da Cetelem, a pergunta está próxima do NPS canónico: pede-se ao cliente que indique a probabilidade de recomendar a marca a amigos ou familiares. Mas o email chega envolto num enquadramento positivo — “esperamos que a situação tenha ficado resolvida” — e a escala surge fortemente codificada por cores. Não é uma manipulação grosseira, mas também não é neutralidade. É uma forma subtil de conduzir a resposta.

Figura 1 – Exemplo da Cetelem

Exemplo da escala NPS que induz um vies.

A Iberia apresenta um exemplo mais sóbrio. A pergunta é metodologicamente mais limpa: parte de uma experiência recente de voo e pergunta pela probabilidade de recomendação. Isto encaixa bem na lógica do NPS transaccional. Ainda assim, o texto introdutório é longo, polido e cuidadosamente construído, criando um contexto emocional antes da pergunta. Não é ilegítimo. Mas quem desenha questionários sabe que o contexto nunca é invisível.

Figura 2 – Exemplo da Iberia

Exemplo de formulário de NPS

A Galp regressa a uma pergunta de recomendação, portanto mais alinhada com NPS. Mas volta a surgir o problema da escala colorida. Os valores baixos estão associados a vermelho; os valores altos, a verde. A pergunta pode estar formalmente correcta, mas o ambiente visual em que é colocada já orienta a resposta. A métrica está certa no enunciado; a recolha já não é totalmente neutra.

Figura 3 – Exemplo da Galp

Exemplo de formulário da NPS da Galp.

É aqui que volto ao ponto principal: o problema de “martelar” KPIs não é apenas ético. É sobretudo um problema de gestão. Um KPI enviesado dá conforto onde devia dar sinal de alerta. Faz parecer que a experiência está melhor do que realmente está. Esconde fricções. Recompensa equipas que aprenderam a optimizar o número, não necessariamente a melhorar o serviço. E, no limite, destrói a confiança nos próprios mecanismos de feedback.

As organizações gostam de dizer que são data-driven. Mas há uma diferença entre ser orientado por dados e ser orientado por números convenientes. Um dado desconfortável pode ser útil. Um número domesticado é apenas decorativo. Serve para tranquilizar uma reunião, não para melhorar uma operação.

Também por isso convém resistir à ideia de que o NPS é uma métrica sagrada. Não é. Pode ser útil, mas não substitui satisfação, esforço do cliente, reclamações, tempos reais de resposta, abandono, recorrência ou feedback qualitativo. A obsessão por um único número cria uma ilusão de controlo. E poucas coisas são tão perigosas numa organização como uma ilusão bem formatada em PowerPoint.

No fim, a pergunta que interessa não é se devemos ou não usar NPS. A pergunta é outra: queremos métricas para compreender a realidade ou queremos métricas para contar uma história confortável?

Porque são coisas diferentes. E, muitas vezes, incompatíveis.

O NPS continua a ter valor quando é tratado com rigor: pergunta certa, contexto honesto, escala neutra, leitura cuidadosa e confronto com outros sinais operacionais. Fora disso, deixa de medir a experiência do cliente. Passa a medir apenas a capacidade da organização para encenar bons resultados.

Deixa um comentário

This site uses Akismet to reduce spam. Learn how your comment data is processed.