L’écart de langue de Claude ne se résorbe pas en anglais

Les pages

96 pages locales de l’Index AIGROW de novembre 2026, tirées au hasard avec une graine fixe : 16 par langue (Italien, allemand, français, espagnol et portugais), et 16 dans 15 villes américaines dont le nom s’écrit de la même façon en italien et en allemand. Chaque groupe compte les mêmes 16 types d’activité, à raison d’une page chacun.

Les questions

Chaque page pose les quatre questions de sa page de novembre : une sur le meilleur du secteur dans la ville, et trois sur un besoin concret. Les questions en anglais désignent chaque ville par son nom anglais. Chaque assistant a reçu chaque question 3 fois dans chaque volet, soit 10 944 réponses au total.

Les volets

Sur les 80 pages en cinq langues, chaque question a été posée de trois façons : dans la langue de la ville avec la consigne en anglais, comme le fait l’Index ; dans la langue de la ville avec la consigne aussi dans cette langue ; et en anglais. Sur les 16 pages américaines, elle a été posée en anglais, en italien avec la consigne en anglais, en italien avec la consigne en italien, et en allemand avec la consigne en anglais.

La consigne

Chaque question est accompagnée des quatre phrases que le scan AIGROW et l’Index envoient comme consigne système : « You are answering an ordinary consumer who is choosing a supplier. Name the specific businesses you would actually recommend, in order. Use real business names only. If you do not know any for this question, return an empty list. Do not hedge, do not explain your limitations, do not suggest how to search. » Les mêmes quatre phrases dans chacune des cinq langues sont listées ci-dessous.

Les modèles

gpt-6-sol, gemini-3.1-flash et claude-sonnet-5, interrogés via leurs API entre 14:58 et 15:21 UTC le 9 novembre 2026, exactement comme l’Index de novembre les a interrogés : ChatGPT et Gemini à une température de 0,3 avec un effort de raisonnement faible, Claude à sa température par défaut sans réflexion étendue, chacun répondant par une liste d’au plus huit entreprises.

De mémoire

Aucune réponse n’a utilisé la recherche web, et aucun assistant n’a été informé de l’endroit où se trouvait la personne qui posait la question. Chaque réponse est issue d’une nouvelle conversation.

Une réponse vide

Une réponse est vide quand sa liste ne cite aucune entreprise. Les noms ont été regroupés par entreprise selon la méthode de l’Index : deux graphies d’une même entreprise comptent donc pour une seule, et chaque groupe a été recherché dans le classement de novembre de la page.

Statistiques

Chaque taux de réponses vides est assorti d’un intervalle de Wilson à 95 %. L’écart entre deux groupes est calculé sur l’ensemble des mêmes pages, et son intervalle à 95 % provient de 2 000 rééchantillonnages de pages entières. Le recoupement des noms correspond à la part des entreprises que deux groupes ont toutes deux citées sur une page, en moyenne sur les pages où l’un des deux groupes a cité au moins une entreprise.

Consigne en Italien

Stai rispondendo a un normale consumatore che deve scegliere a chi rivolgersi. Indica in ordine le attività precise che consiglieresti davvero. Usa solo nomi di attività reali. Se per questa domanda non ne conosci nessuna, restituisci un elenco vuoto. Non metterti al riparo con cautele, non spiegare i tuoi limiti e non suggerire come cercare.

Consigne en Allemand

Du beantwortest die Frage eines ganz normalen Verbrauchers, der einen Anbieter auswählt. Nenne der Reihe nach die konkreten Unternehmen, die du wirklich empfehlen würdest. Verwende nur echte Firmennamen. Wenn du für diese Frage keine kennst, gib eine leere Liste zurück. Antworte ohne Vorbehalte, erkläre nicht deine Grenzen und schlage nicht vor, wie man suchen kann.

Consigne en Français

Tu réponds à un consommateur ordinaire qui choisit un prestataire. Cite dans l’ordre les entreprises précises que tu recommanderais vraiment. N’utilise que des noms d’entreprises réels. Si tu n’en connais aucune pour cette question, renvoie une liste vide. Ne prends pas de précautions oratoires, n’explique pas tes limites et ne suggère pas comment chercher.

Consigne en Espagnol

Estás respondiendo a un consumidor corriente que está eligiendo un proveedor. Nombra por orden los negocios concretos que recomendarías de verdad. Usa solo nombres de negocios reales. Si no conoces ninguno para esta pregunta, devuelve una lista vacía. No pongas reservas, no expliques tus limitaciones y no sugieras cómo buscar.

Consigne en Portugais

Vai responder a um consumidor comum que precisa de escolher um fornecedor. Indique por ordem as empresas concretas que realmente recomendaria. Use apenas nomes reais de empresas. Se não conhecer nenhuma para esta pergunta, devolva uma lista vazia. Não faça ressalvas, não explique as suas limitações e não sugira como pesquisar.

Un seul jour

Toutes les réponses ont été collectées le 9 novembre 2026. Les modèles évoluent, et les mêmes questions posées une autre semaine pourraient donner des résultats différents.

Réponses de mémoire

Les assistants n’avaient ni recherche web ni localisation. Un assistant qui fait des recherches sur le web, comme le font souvent les applications grand public, peut citer des entreprises qu’il ne citerait pas de mémoire.

Le formulaire de réponse reste en anglais

La description de la liste que remplissent les assistants est en anglais dans tous les groupes : un groupe dont la consigne est dans une autre langue n’est donc pas entièrement dans cette langue.

Seize pages par langue

16 pages par langue et par groupe : les chiffres d’une langue ont donc de larges intervalles. Les tableaux indiquent chacun d’eux avec son intervalle.

Formulation traduite

Les cinq traductions de la consigne disent la même chose avec des mots différents : un changement lié à la consigne tient donc autant à la formulation qu’à la langue. Claude a évolué dans un sens en italien et dans l’autre en allemand et en français, ce qui laisse penser que la formulation compte.

Deux interrogations qui diffèrent

La même question posée deux fois dans la même langue fait aussi citer des entreprises différentes, et l’étude n’a pas mesuré ce point de référence : un recoupement des noms inférieur à 100 % ne s’explique donc pas entièrement par la langue.

Réponses manquantes

6 des 10 944 questions n’ont obtenu aucune liste de la part de Gemini, même après deux nouvelles tentatives, et elles sont exclues de tous les taux.

Des villes différentes

Les pages de chaque langue portent sur les villes de cette langue, et les pages américaines sur de grandes villes des États-Unis. Un écart entre pays peut tenir autant à la taille ou à la notoriété des villes qu’au pays lui-même.

Vide ne veut pas dire faux

Une réponse vide peut être la plus honnête, et une liste peut citer des entreprises qui n’existent pas ou qui ont fermé. L’étude ne vérifie pas les noms : la part retrouvée dans le classement de novembre n’est qu’un contrôle partiel.

Conflits d’intérêts

L’auteur a fondé AIGROW, qui publie l’Index et vend des services visant à améliorer la manière dont les entreprises apparaissent dans les réponses de l’IA. L’étude n’a reçu aucun financement externe.

• Accounting software in Spain
• Accounting software in Germany
• Accounting software in Austria
• Accounting software in Poland
• Hair salons in Rome
• Hair salons in Naples
• Hair salons in Florence
• Veterinarians in Florence

• Gyms in Turin
• Plumbers in Rome
• CRM software in Italy
• Accounting software in Italy
• Project management software

Télécharger les données au format CSV

Le CSV contient les effectifs et les taux derrière chaque tableau, par langue, groupe, assistant et question. Les réponses elles-mêmes restent la propriété d’AIGROW Labs.