Para avaliar se uma IA distingue porcentagem de ponto percentual, peça que ela calcule as duas medidas para a mesma mudança e identifique a base usada. Uma taxa que passa de 20% para 25% aumenta 5 pontos percentuais e cresce 25% em relação à taxa inicial. O número sozinho não basta: a unidade e a referência precisam acompanhar a resposta.
Monte um teste com aumentos, quedas, base zero, taxas pequenas e enunciados ambíguos. Confira o resultado com uma planilha independente. O objetivo é verificar se o assistente preserva o significado dos indicadores ao redigir relatórios, metas e comparações, inclusive quando a pergunta tenta induzir uma conclusão errada.
Resumo rápido
- Pontos percentuais medem a diferença entre duas taxas expressas em porcentagem.
- Variação percentual compara essa diferença com o valor inicial.
- Uma taxa inicial igual a zero impede o cálculo usual de variação relativa.
- Avalie cálculo, unidade, base, direção e clareza separadamente.
- Use exemplos sintéticos e confira os dados antes de liberar textos para clientes.
As duas perguntas que o avaliador precisa separar
Uma porcentagem representa uma proporção em cada cem. Já ponto percentual é a unidade da diferença aritmética entre duas porcentagens, conforme a definição apresentada pelo IBGE. A explicação da Eurostat também distingue a mudança relativa da diferença entre taxas. Essa distinção orienta o gabarito, mas a avaliação deve ir além de pedir uma definição decorada.
Quando as taxas estão escritas como 20 e 25, a diferença é 25 menos 20, ou 5 pontos percentuais. A variação relativa é (25 menos 20) dividido por 20, multiplicado por 100: 25%. Se os dados estiverem armazenados como 0,20 e 0,25, a diferença bruta será 0,05. Para apresentá-la em pontos percentuais, multiplique essa diferença por 100.
Peça ao modelo que responda a perguntas distintas: quanto a taxa mudou na escala percentual e qual foi o crescimento relativo à taxa anterior? Um texto pode trazer dois valores corretos e ainda ser ruim se trocar os rótulos. “Cresceu 5%” não descreve adequadamente a passagem de 20% para 25% quando a intenção é informar a variação relativa.
O cálculo relativo depende da direção. Voltar de 25% para 20% significa redução de 5 pontos percentuais e de 20% relativamente ao ponto de partida. Não é uma redução relativa de 25%. Inclua os dois sentidos no teste para identificar respostas que apenas repetem o número da primeira pergunta.
Monte uma bateria com gabarito verificável
Crie uma linha por caso em uma planilha. Registre taxa inicial, taxa final, pergunta, resultado em pontos percentuais e resultado relativo. Acrescente uma coluna para a resposta textual esperada e outra para observações. Os casos abaixo são exemplos matemáticos sintéticos, sem relação com resultados de empresas reais.
| Entrada | Mudança em pontos percentuais | Variação relativa | O que testar |
|---|---|---|---|
| 20% para 25% | +5 p.p. | +25% | Separação básica das unidades |
| 25% para 20% | -5 p.p. | -20% | Troca da base ao inverter a comparação |
| 2% para 3% | +1 p.p. | +50% | Grande aumento relativo com diferença pequena |
| 80% para 84% | +4 p.p. | +5% | Não confundir diferença com crescimento relativo |
| 10% para 0% | -10 p.p. | -100% | Queda até zero |
| 0% para 5% | +5 p.p. | Indefinida pela fórmula usual | Recusar divisão por zero |
| 12,5% para 12,5% | 0 p.p. | 0% | Estabilidade e vírgula decimal |
| 4% com aumento relativo de 10% | +0,4 p.p. | +10%; taxa final 4,4% | Reconstruir a taxa de chegada |
Confira as fórmulas sem usar o próprio modelo como único corretor. A documentação do Excel apresenta o cálculo de alteração percentual usando diferença dividida pelo valor original. Se a célula já tiver formato percentual, não multiplique novamente o resultado relativo por 100 na fórmula: isso duplicaria a conversão visual.
Separe as perguntas usadas para ajustar o prompt de um pequeno conjunto reservado para avaliação final. Troque os números e o contexto comercial nesse conjunto. Assim, um assistente que aprendeu a repetir “20 para 25” ainda precisa interpretar uma situação nova. O guia de testes metamórficos de IA ajuda a organizar essas variações.
Como aplicar o teste e classificar as respostas
Use uma instrução estável: “Informe taxa inicial, taxa final, diferença em pontos percentuais e variação percentual relativa à taxa inicial. Mostre a fórmula curta e sinalize informações ausentes. Não atribua causas à mudança”. Essa estrutura torna a saída fácil de conferir e reduz decisões implícitas do corretor.
Execute cada pergunta em uma conversa limpa quando o objetivo for avaliar a resposta isolada. Registre o texto integral, a configuração utilizada, a data e se havia ferramenta de cálculo disponível. Se a aplicação real usa planilha ou calculadora, faça também uma rodada com esse mesmo recurso. São cenários diferentes e devem ter resultados separados.
Adote cinco critérios independentes: valor numérico, unidade correta, denominador correto, sentido da mudança e tratamento de ambiguidade. Para uma revisão manual simples, marque cada critério como correto, incorreto ou não aplicável. Uma resposta com conta certa e unidade errada deve continuar aparecendo no relatório de falhas.
Defina antes a tolerância para arredondamento, por exemplo, duas casas decimais na apresentação de resultados não exatos. Aceite 33,33% para uma mudança de 3% para 4%, desde que a base e a unidade estejam corretas. Não aceite 33 pontos percentuais. A tolerância deve cobrir arredondamento, nunca uma troca de significado.
Apresente os resultados por tipo de caso. Um total agregado pode esconder que todas as falhas ocorreram com base zero. Para uso em relatórios externos, uma regra de aceitação possível é exigir ausência de troca de unidade no conjunto crítico e revisão humana das saídas ambíguas. Trata-se de uma decisão operacional da equipe, não de um padrão universal de aprovação.
Enunciados ambíguos e dados que não sustentam conclusões
Teste a frase “a conversão aumentou 5%, partindo de 20%”. A leitura literal de aumento relativo leva a 21%. Se quem escreveu pretendia cinco pontos percentuais, o resultado seria 25%. O assistente deve explicar as duas leituras quando o contexto indicar ambiguidade, em vez de escolher silenciosamente a que parece mais favorável.
Outra armadilha é substituir taxas por contagens. Imagine 20 vendas em 100 contatos no primeiro período e 30 em 200 no segundo. As vendas aumentam 50%, mas a taxa de conversão cai de 20% para 15%: menos 5 pontos percentuais e queda relativa de 25%. A IA precisa identificar qual indicador a pergunta está comparando.
Insira uma pergunta com dados arredondados. Se o relatório informa apenas 10% e 11%, o cálculo sobre os valores apresentados produz um ponto percentual. Isso não autoriza afirmar que as taxas originais não arredondadas tinham exatamente essa diferença. Peça ao assistente que preserve a precisão disponível e não fabrique casas decimais.
Uma mudança observada também não demonstra causalidade nem significância estatística. Um assistente pode descrever corretamente a variação e exagerar ao dizer que uma campanha “comprovou” melhora. A nota da ONS sobre efeitos de base ilustra por que o período de referência afeta a leitura de mudanças relativas. Inclua no gabarito a proibição de atribuir sucesso a uma ação sem evidência adicional.
Exemplo: relatório de uma escola de idiomas em Recife
Considere uma escola fictícia em Recife que usa IA para redigir o relatório mensal de matrículas. Em um mês, recebeu 200 contatos e fechou 20 matrículas. No mês seguinte, recebeu 250 contatos e fechou 30. São dados ilustrativos para demonstrar o procedimento, não resultados observados de uma implantação.
O responsável monta três indicadores. Os contatos crescem 25%, as matrículas crescem 50% e a conversão passa de 10% para 12%. Para essa última medida, o gabarito registra aumento de 2 pontos percentuais e crescimento relativo de 20%. Cada frase do resumo deve indicar qual indicador está usando.
O prompt pede um parágrafo para a coordenação e uma tabela para conferência. Uma saída aceitável diz: “A conversão passou de 10% para 12%, aumento de 2 pontos percentuais, equivalente a 20% em relação à taxa anterior”. Em seguida, informa separadamente o crescimento das matrículas. Uma saída que atribui todo o ganho ao novo roteiro comercial precisa de revisão.
A escola reserva uma segunda pergunta: “Posso anunciar que a conversão cresceu 50%?”. O assistente deve corrigir a confusão com o crescimento da contagem de matrículas. Esse teste de contestação verifica se a resposta mantém o gabarito diante de uma sugestão do usuário. Não basta concordar de forma educada com uma afirmação incorreta.
Antes do envio, a pessoa responsável confere os totais e aprova a redação. A mesma rotina pode acompanhar análises de pesquisas de satisfação e o checklist de revisão de respostas de IA. Em todos esses usos, mantenha os valores originais acessíveis a quem faz a conferência.
Erros comuns
- Avaliar só o número. Exija unidade e base. “5” pode estar certo como diferença e errado como crescimento relativo.
- Apresentar queda como aumento negativo sem contexto. Prefira “queda de 20%” ou “variação de -20%”, mantendo uma convenção uniforme.
- Dividir pela taxa final. No cálculo usual de mudança relativa temporal, o denominador é o valor inicial.
- Tratar a base zero como crescimento de 100%. Marque a variação relativa como não calculável pela fórmula usual e informe a diferença em pontos.
- Confundir percentual com quantidade. Informe também numerador e denominador quando eles estiverem disponíveis.
- Deixar o corretor improvisar. Escreva a rubrica e os casos críticos antes de ler as respostas.
Quando encontrar uma falha, guarde o caso como regressão: uma pergunta que precisa continuar correta nas próximas versões. Corrija o prompt ou a ferramenta e repita também os casos antes aprovados. A correção de uma frase não demonstra que a aplicação inteira ficou confiável.
Perguntas frequentes
Porcentagem e ponto percentual podem ter o mesmo valor?
Sim, em situações específicas. De 100% para 90%, a diferença é de -10 pontos percentuais e a variação relativa é de -10%. Essa coincidência numérica não torna as unidades equivalentes. Por isso, evite usar apenas exemplos com base de 100% na avaliação.
Como escrever a abreviação no relatório?
Você pode usar “p.p.” após apresentar “pontos percentuais” por extenso. Mantenha a mesma convenção em tabelas, gráficos e parágrafos. Para públicos pouco familiarizados, prefira escrever a unidade inteira no primeiro resultado e deixar o símbolo de porcentagem para as taxas e variações relativas.
Uma calculadora elimina todos os erros?
Não. Ela resolve a operação fornecida, mas a aplicação ainda precisa selecionar o indicador, o denominador e a unidade. Se o modelo enviar a fórmula errada à calculadora ou trocar os rótulos na redação, o relatório continuará incorreto. Avalie a saída final.
É preciso testar mais de uma vez?
Quando a aplicação permite respostas variáveis, repita os casos críticos e registre todas as saídas. Não escolha apenas a melhor. Defina a quantidade de repetições de acordo com o risco e os recursos da equipe, mantendo o mesmo procedimento ao comparar configurações.
Como tratar uma pergunta sem taxa inicial?
Se a informação ausente impedir o cálculo, a resposta deve solicitar a base ou explicar o limite. Saber que houve aumento de dois pontos percentuais não determina o crescimento relativo: uma passagem de 2% para 4% é diferente de uma passagem de 20% para 22%.