A lacuna linguística do Claude não se fecha em inglês

As páginas

96 páginas locais do Índice AIGROW de novembro de 2026, escolhidas ao acaso com uma semente fixa: 16 em cada um de Italiano, alemão, francês, espanhol e português, e 16 em 15 cidades dos EUA cujos nomes se escrevem da mesma forma em italiano e em alemão. Cada grupo tem os mesmos 16 tipos de negócio, uma página de cada.

As perguntas

Cada página faz as quatro perguntas da sua página de novembro: uma sobre o melhor do setor na cidade e três sobre uma necessidade concreta. As perguntas em inglês usam o nome inglês de cada cidade. Cada assistente recebeu cada pergunta 3 vezes em cada vertente, 10 944 respostas no total.

As vertentes

Nas 80 páginas dos cinco idiomas, cada pergunta foi feita de três formas: no idioma da cidade com a instrução em inglês, como o Índice a faz; no idioma da cidade com a instrução também nesse idioma; e em inglês. Nas 16 páginas dos EUA foi feita em inglês, em italiano com a instrução em inglês, em italiano com a instrução em italiano e em alemão com a instrução em inglês.

A instrução

Cada pergunta é acompanhada das quatro frases que a análise da AIGROW e o Índice enviam como instrução de sistema: “You are answering an ordinary consumer who is choosing a supplier. Name the specific businesses you would actually recommend, in order. Use real business names only. If you do not know any for this question, return an empty list. Do not hedge, do not explain your limitations, do not suggest how to search.” As mesmas quatro frases em cada um dos cinco idiomas estão listadas abaixo.

Os modelos

gpt-6-sol, gemini-3.1-flash e claude-sonnet-5, consultados através das respetivas APIs entre 14:58 e 15:21 UTC de 9 de novembro de 2026, exatamente como o Índice de novembro os consultou: o ChatGPT e o Gemini com temperatura 0,3 e esforço de raciocínio baixo, o Claude com a temperatura predefinida e sem raciocínio alargado, cada um a responder com uma lista de até oito negócios.

De memória

Nenhuma resposta usou pesquisa na web, e a nenhum assistente foi dito onde estava a pessoa que perguntava. Cada resposta foi uma conversa nova.

Uma resposta vazia

Uma resposta está vazia quando a sua lista não nomeia nenhum negócio. Os nomes foram agrupados por negócio com o método que o Índice usa, de modo que duas grafias do mesmo negócio contam uma só vez, e cada grupo foi procurado no ranking de novembro da página.

Estatísticas

Cada taxa de respostas vazias tem um intervalo de Wilson a 95%. Uma variação entre dois grupos é calculada sobre as mesmas páginas, e o respetivo intervalo a 95% resulta de 2 000 reamostragens de páginas inteiras. A sobreposição de nomes é a proporção de negócios que os dois grupos nomearam numa página, em média nas páginas em que pelo menos um dos grupos nomeou alguém.

A instrução em Italiano

Stai rispondendo a un normale consumatore che deve scegliere a chi rivolgersi. Indica in ordine le attività precise che consiglieresti davvero. Usa solo nomi di attività reali. Se per questa domanda non ne conosci nessuna, restituisci un elenco vuoto. Non metterti al riparo con cautele, non spiegare i tuoi limiti e non suggerire come cercare.

A instrução em Alemão

Du beantwortest die Frage eines ganz normalen Verbrauchers, der einen Anbieter auswählt. Nenne der Reihe nach die konkreten Unternehmen, die du wirklich empfehlen würdest. Verwende nur echte Firmennamen. Wenn du für diese Frage keine kennst, gib eine leere Liste zurück. Antworte ohne Vorbehalte, erkläre nicht deine Grenzen und schlage nicht vor, wie man suchen kann.

A instrução em Francês

Tu réponds à un consommateur ordinaire qui choisit un prestataire. Cite dans l’ordre les entreprises précises que tu recommanderais vraiment. N’utilise que des noms d’entreprises réels. Si tu n’en connais aucune pour cette question, renvoie une liste vide. Ne prends pas de précautions oratoires, n’explique pas tes limites et ne suggère pas comment chercher.

A instrução em Espanhol

Estás respondiendo a un consumidor corriente que está eligiendo un proveedor. Nombra por orden los negocios concretos que recomendarías de verdad. Usa solo nombres de negocios reales. Si no conoces ninguno para esta pregunta, devuelve una lista vacía. No pongas reservas, no expliques tus limitaciones y no sugieras cómo buscar.

A instrução em Português

Vai responder a um consumidor comum que precisa de escolher um fornecedor. Indique por ordem as empresas concretas que realmente recomendaria. Use apenas nomes reais de empresas. Se não conhecer nenhuma para esta pergunta, devolva uma lista vazia. Não faça ressalvas, não explique as suas limitações e não sugira como pesquisar.

Um só dia

Todas as respostas foram recolhidas em 9 de novembro de 2026. Os modelos mudam, e as mesmas perguntas feitas noutra semana podem dar resultados diferentes.

Respostas de memória

Os assistentes não tinham pesquisa na web nem localização. Um assistente que pesquisa na web, como fazem muitas vezes as aplicações para consumidores, pode nomear negócios que não nomearia de memória.

O formulário de resposta continua em inglês

A descrição da lista que os assistentes preenchem está em inglês em todos os grupos, pelo que um grupo com a instrução noutro idioma não está totalmente nesse idioma.

Dezasseis páginas por idioma

16 páginas por idioma e por grupo, pelo que os valores de cada idioma têm intervalos largos. As tabelas apresentam cada valor com o respetivo intervalo.

Formulação traduzida

As cinco traduções da instrução dizem o mesmo por palavras diferentes, pelo que uma variação com a instrução é uma variação de formulação e também de idioma. O Claude mudou num sentido em italiano e no sentido oposto em alemão e francês, o que sugere que a formulação conta.

Duas consultas diferem

A mesma pergunta feita duas vezes no mesmo idioma também nomeia negócios diferentes, e o estudo não mediu essa base de comparação, pelo que uma sobreposição de nomes inferior a 100% não se deve toda ao idioma.

Respostas em falta

6 das 10 944 perguntas não obtiveram lista do Gemini, mesmo após duas novas tentativas, e ficaram de fora de todas as taxas.

Cidades diferentes

As páginas de cada idioma são de cidades desse idioma, e as páginas dos EUA são de grandes cidades norte-americanas. Uma diferença entre países pode dever-se tanto à dimensão ou à fama das cidades como ao país.

Vazia não é errada

Uma resposta vazia pode ser a mais honesta, e uma lista pode nomear negócios que não existem ou que já fecharam. O estudo não verifica os nomes; a proporção encontrada no ranking de novembro é apenas uma verificação parcial.

Conflitos de interesses

O autor fundou a AIGROW, que publica o Index e vende serviços que visam melhorar a forma como os negócios aparecem nas respostas de IA. O estudo não teve financiamento externo.

• Accounting software in Spain
• Accounting software in Germany
• Accounting software in Austria
• Accounting software in Poland
• Hair salons in Rome
• Hair salons in Naples
• Hair salons in Florence
• Veterinarians in Florence

• Gyms in Turin
• Plumbers in Rome
• CRM software in Italy
• Accounting software in Italy
• Softwares de gestão de projetos

Descarregue os dados em CSV

O CSV contém as contagens e as taxas por trás de cada tabela, por idioma, grupo, assistente e pergunta. As respostas em si ficam com a AIGROW Labs.