Comparar IA não precisa virar uma disputa de torcida. Quando o teste usa pedidos diferentes, prazos diferentes e expectativas vagas, qualquer resultado parece convincente. Um teste simples e repetível resolve isso.
Prepare uma tarefa real
Escolha algo que faça parte da sua rotina. Um bom exemplo é transformar uma nota desorganizada em plano de ação, criar um resumo de uma fonte oficial ou revisar uma descrição de produto sem prometer resultado.
Use a mesma entrada
Copie o mesmo contexto, a mesma tarefa e o mesmo formato esperado para cada ferramenta. Inclua o que não pode acontecer, como inventar dados, omitir incertezas ou usar tom publicitário sem necessidade.
Avalie quatro critérios
- Fidelidade ao pedido: a resposta respeitou o que foi solicitado?
- Clareza: dá para identificar os próximos passos sem reinterpretar tudo?
- Verificabilidade: quando há fatos, a resposta aponta o que precisa ser conferido?
- Trabalho de revisão: quanto ajuste humano foi necessário antes de usar?
Registre o que aprendeu
Monte uma tabela simples com a tarefa, a data, o prompt usado e uma nota curta para cada critério. Depois de alguns testes, você terá uma decisão baseada na sua rotina, não em uma recomendação genérica.
O resultado não é permanente
Ferramentas mudam, modelos evoluem e uma atualização pode alterar a qualidade de uma resposta. Repita o teste quando a tarefa for importante ou quando mudar o plano, o modelo ou a integração usada.
Comece pelo guia ChatGPT, Gemini e Claude: como escolher pela tarefa e salve um pedido real para comparar quando precisar.
O cronômetro de 20 minutos
Minutos 0 a 4: escolha uma tarefa pequena, remova dados sensíveis e escreva o resultado esperado em uma frase. Salve a entrada em um documento para não alterá-la entre as ferramentas.
Minutos 5 a 10: execute o pedido em conversas novas. Registre ferramenta, modelo quando visível, data e eventuais recursos ativados, como pesquisa na web ou leitura de arquivo.
Minutos 11 a 16: confira as respostas contra a fonte. Marque omissões, afirmações inventadas, links inválidos e instruções ignoradas. Não dê nota apenas pela fluidez.
Minutos 17 a 20: preencha a matriz, escreva quando usaria cada opção e liste o teste que ficou faltando. Se o empate persistir, não force uma conclusão.
Uma escala simples para evitar notas vazias
- 0, falhou: não entregou o formato ou criou informação crítica.
- 1, exige refazer: parte útil, mas o trabalho de correção supera o ganho.
- 2, utilizável com revisão: atende ao núcleo da tarefa e deixa ajustes identificáveis.
- 3, forte neste teste: respeita critérios, fontes e limites com pouca correção.
Ao lado da nota, escreva uma evidência curta. “Nota 3 porque gostei” não permite repetir o teste. “Nota 3: todas as cinco citações apontaram para trechos corretos” permite.
Exemplo de registro, sem fingir um ranking
Tarefa: transformar uma página oficial em resumo para iniciantes.
Data: [preencher].
Entrada: [link ou arquivo público].
Ferramenta e modelo: [preencher].
Evidência: [o que foi conferido].
Limitação: [o que não pôde ser validado].
Esse registro é mais valioso do que uma captura isolada. Ele explica o contexto da tela e permite descobrir por que um resultado mudou semanas depois.
Erros que anulam a comparação
- usar fontes diferentes;
- ativar pesquisa em uma ferramenta e desativar nas demais;
- comparar plano gratuito com recurso pago sem registrar;
- corrigir manualmente uma resposta antes de dar a nota;
- publicar a conclusão como verdade permanente.
O roteiro é curto de propósito. Para decisões com impacto financeiro, dados sensíveis ou integração técnica, trate-o como triagem e planeje uma avaliação maior.
Atualização editorial de 07/08/2026: ampliamos exemplos, método de revisão e evidências visuais; fatos externos continuam vinculados às fontes oficiais.