Urgent.News

What's breaking now, across thousands of outlets.

Tech

Como medir GEO de forma reproduzível: banco fixo, N por pergunta e denominador explícito

Um print de tela do ChatGPT citando uma marca é uma amostra de tamanho um. Enviada minutos depois, a mesma pergunta costuma devolver outra lista de nomes, e sem saber quantas vezes a consulta rodou não há como separar sinal de ruído. Este texto descreve o protocolo que a Brasil GEO usa para medir visibilidade em motores de IA de um jeito que outra pessoa consiga repetir e auditar. A premissa de…

Original Portuguese Read in English

Para medir a visibilidade de uma marca na inteligência artificial de forma confiável, a Brasil GEO segue um protocolo específico. A primeira etapa é definir um conjunto de perguntas, consistindo de 30 a 40 perguntas que um cliente real faria. Essas perguntas são congeladas antes da primeira coleta de dados, garantindo que a mesma pergunta não retorne diferentes resultados em execuções subsequentes.

O protocolo atual utiliza motores de IA como ChatGPT, Claude, Gemini e Perplexity, com uma temperatura definida como 0. Além disso, toda taxa de menção é acompanhada por um denominador, que é o número total de execuções realizadas. Isso permite que a comparação entre os motores seja feita de forma precisa e auditorável, sem a possibilidade de variações naturais que possam mascarar o efeito que se deseja detectar.

Written by urgent.news from Dev.to's reporting — not their text. Machine-written — may contain errors; check the original before relying on it.

Read the original at dev.to →

More in Tech

More from Monday 28 September →