1. As perguntas
Há dois tipos de perguntas:
- Perguntas de descoberta, sem o nome do negócio, como faz quem ainda não o conhece: «Qual é o melhor dentista em Braga?», «Recomenda-me uma oficina de confiança no Porto.» São estas que dão a pontuação.
- Perguntas de marca, com o nome do negócio: «O que sabes sobre a Clínica Sol em Braga?» Mostram se a IA conhece o negócio e o que diz sobre ele.
| Plano | Descoberta | Marca | Assistentes |
|---|---|---|---|
| Scan grátis | 8 | 2 | ChatGPT e Perplexity |
| Essencial | 16 | 4 | + Gemini |
| Profissional | 24 | 6 | + Claude |
Nos planos pagos, cada pergunta é feita duas vezes a cada assistente, porque a mesma pergunta pode ter respostas diferentes.
O cliente de um plano pago pode juntar perguntas suas (3 no Essencial, 5 no Profissional). Fazemo-las da mesma forma e mostramos as respostas no relatório, mas não contam para a pontuação, para ela continuar comparável entre meses e entre negócios.
As perguntas estão escritas como falam os clientes do país do negócio. Para os tipos de negócio mais comuns em Portugal usamos perguntas fixas, revistas à mão. Para os outros tipos e países, um modelo de IA escreve as perguntas na língua do país uma vez, e todos os negócios do mesmo tipo na mesma cidade recebem exatamente as mesmas, para poderem ser comparados.
2. Os assistentes
Perguntamos pela API oficial de cada assistente, com a pesquisa na web ligada e localizada no país do negócio, como acontece quando um cliente pergunta no telemóvel. Não usamos histórico, conta nem preferências de ninguém: é a resposta que um cliente novo teria.
A mesma pergunta ao mesmo assistente é feita no máximo uma vez por semana. Dois negócios do mesmo tipo e da mesma cidade partilham as respostas às perguntas de descoberta dessa semana, o que também os torna comparáveis.
3. Ler as respostas
Um modelo de IA lê cada resposta e lista, por ordem, os negócios concretos que ela recomenda. Ignora plataformas e diretórios (Google Maps, TripAdvisor, Páginas Amarelas) e negócios que a resposta diz ficarem noutra cidade.
Consideramos que uma resposta menciona o seu negócio quando indica o mesmo site, ou quando o nome tem as mesmas palavras que o distinguem. «Auto Silva, Lda.» e «Oficina Auto Silva» contam como o mesmo negócio; «Station Car Wash» e «Clean Station Car» não.
4. A pontuação de 0 a 100
Cada resposta de descoberta dá pontos conforme a posição em que o negócio aparece:
| Posição na resposta | Pontos |
|---|---|
| 1.º lugar | 3 |
| 2.º ou 3.º lugar | 2 |
| 4.º lugar ou abaixo | 1 |
| Não aparece | 0 |
A pontuação é a soma dos pontos a dividir pelo máximo possível (3 pontos em todas as respostas), numa escala de 0 a 100. Um negócio que aparece sempre em primeiro lugar tem 100; um que nunca aparece tem 0.
Os concorrentes são pontuados da mesma forma e nas mesmas respostas, por isso as pontuações comparam-se diretamente. Também calculamos uma pontuação por assistente, só com as respostas desse assistente.
5. A margem de erro
As respostas da IA variam de pedido para pedido. Por isso mostramos a margem de erro da pontuação, com 95% de confiança, calculada pela variação dos pontos entre as respostas. Com mais perguntas e repetições, como nos planos pagos, a margem fica mais pequena.
6. O que a IA sabe sobre o negócio
Cada resposta a uma pergunta de marca é classificada como «sim» (descreve o negócio com factos concretos), «parcialmente» (informação vaga ou incerta) ou «não» (não o conhece ou fala de outro). O resultado é «sim» quando pelo menos metade das respostas o são, e «não» quando todas dizem que não.
7. A verificação do site
Quando indica o site, visitamos a página inicial como um assistente de IA e verificamos:
- se o site abre e usa ligação segura (HTTPS);
- se deixa entrar os robôs dos assistentes de IA, no robots.txt e na prática;
- se o conteúdo se lê sem JavaScript, que os assistentes normalmente não executam;
- se tem a ficha do negócio em schema.org (LocalBusiness), com morada, telefone e horário;
- se tem o ficheiro llms.txt com o resumo do site;
- se menciona a cidade e tem o telefone e a morada em texto;
- se a página tem título e descrição.
Limites
- É uma amostra: mostra a tendência, não garante o que cada cliente vai ver.
- Os assistentes mudam de modelo e de fontes com frequência; por isso repetimos a medição todos os meses nos planos pagos.