De taalkloof van Claude wordt in het Engels niet kleiner

De pagina's

96 lokale pagina's uit de AIGROW Index van november 2026, willekeurig getrokken met een vaste seed: 16 in elk van Italiaans, Duits, Frans, Spaans en Portugees, en 16 in 15 Amerikaanse steden waarvan de naam in het Italiaans en Duits hetzelfde wordt geschreven. Elke groep heeft dezelfde 16 soorten bedrijven, één pagina per soort.

De vragen

Elke pagina stelt de vier vragen van de bijbehorende pagina uit november: één naar de beste van het vak in de stad en drie naar een concrete behoefte. In de Engelse vragen staat elke stad onder de Engelse naam. Elke assistent kreeg elke vraag 3 keer per variant, in totaal 10.944 antwoorden.

De varianten

Op de 80 pagina's in de vijf talen werd elke vraag op drie manieren gesteld: in de taal van de stad met de instructie in het Engels, zoals de Index het vraagt; in de taal van de stad met de instructie ook in die taal; en in het Engels. Op de 16 Amerikaanse pagina's werd de vraag gesteld in het Engels, in het Italiaans met de instructie in het Engels, in het Italiaans met de instructie in het Italiaans, en in het Duits met de instructie in het Engels.

De instructie

Bij elke vraag horen de vier zinnen die de AIGROW-scan en de Index als systeeminstructie meesturen: “You are answering an ordinary consumer who is choosing a supplier. Name the specific businesses you would actually recommend, in order. Use real business names only. If you do not know any for this question, return an empty list. Do not hedge, do not explain your limitations, do not suggest how to search.” Dezelfde vier zinnen in elk van de vijf talen staan hieronder.

De modellen

gpt-6-sol, gemini-3.1-flash en claude-sonnet-5, bevraagd via hun API's tussen 14:58 en 15:21 UTC op 9 november 2026, precies zoals de Index van november ze bevroeg: ChatGPT en Gemini met temperatuur 0,3 en lage redeneerinspanning, Claude met zijn standaardtemperatuur zonder uitgebreid redeneren, elk met een lijst van maximaal acht bedrijven als antwoord.

Uit het geheugen

Geen enkel antwoord gebruikte webzoekopdrachten en geen enkele assistent kreeg te horen waar de vragensteller was. Elk antwoord was een nieuw gesprek.

Een leeg antwoord

Een antwoord is leeg als de lijst geen enkel bedrijf noemt. Namen zijn gegroepeerd per bedrijf met de methode van de Index, zodat twee schrijfwijzen van één bedrijf als één tellen, en elke groep is opgezocht in de ranglijst van november van de pagina.

Statistiek

Elk percentage lege antwoorden heeft een Wilson-interval van 95%. Een verschil tussen twee varianten wordt over dezelfde pagina's gepoold, en het bijbehorende interval van 95% komt uit 2.000 herbemonsteringen van hele pagina's. Naamoverlap is het aandeel bedrijven dat beide varianten op een pagina noemden, gemiddeld over de pagina's waarop een van beide varianten iemand noemde.

De instructie in het Italiaans

Stai rispondendo a un normale consumatore che deve scegliere a chi rivolgersi. Indica in ordine le attività precise che consiglieresti davvero. Usa solo nomi di attività reali. Se per questa domanda non ne conosci nessuna, restituisci un elenco vuoto. Non metterti al riparo con cautele, non spiegare i tuoi limiti e non suggerire come cercare.

De instructie in het Duits

Du beantwortest die Frage eines ganz normalen Verbrauchers, der einen Anbieter auswählt. Nenne der Reihe nach die konkreten Unternehmen, die du wirklich empfehlen würdest. Verwende nur echte Firmennamen. Wenn du für diese Frage keine kennst, gib eine leere Liste zurück. Antworte ohne Vorbehalte, erkläre nicht deine Grenzen und schlage nicht vor, wie man suchen kann.

De instructie in het Frans

Tu réponds à un consommateur ordinaire qui choisit un prestataire. Cite dans l’ordre les entreprises précises que tu recommanderais vraiment. N’utilise que des noms d’entreprises réels. Si tu n’en connais aucune pour cette question, renvoie une liste vide. Ne prends pas de précautions oratoires, n’explique pas tes limites et ne suggère pas comment chercher.

De instructie in het Spaans

Estás respondiendo a un consumidor corriente que está eligiendo un proveedor. Nombra por orden los negocios concretos que recomendarías de verdad. Usa solo nombres de negocios reales. Si no conoces ninguno para esta pregunta, devuelve una lista vacía. No pongas reservas, no expliques tus limitaciones y no sugieras cómo buscar.

De instructie in het Portugees

Vai responder a um consumidor comum que precisa de escolher um fornecedor. Indique por ordem as empresas concretas que realmente recomendaria. Use apenas nomes reais de empresas. Se não conhecer nenhuma para esta pergunta, devolva uma lista vazia. Não faça ressalvas, não explique as suas limitações e não sugira como pesquisar.

Eén dag

Alle antwoorden zijn verzameld op 9 november 2026. De modellen veranderen, en dezelfde vragen kunnen een andere week andere uitkomsten geven.

Antwoorden uit het geheugen

De assistenten hadden geen webzoekfunctie en geen locatie. Een assistent die wel het web doorzoekt, zoals de consumentenapps vaak doen, kan bedrijven noemen die hij uit het hoofd niet zou noemen.

Het antwoordformulier blijft Engels

De beschrijving van de lijst die de assistenten invullen is in elke variant Engels, dus een variant met de instructie in een andere taal is niet volledig in die taal.

Zestien pagina's per taal

16 pagina's per taal en per groep, dus de cijfers voor één taal hebben brede intervallen. De tabellen tonen elk cijfer met zijn interval.

Vertaalde formulering

De vijf vertalingen van de instructie zeggen hetzelfde in andere woorden, dus een verschil door de instructie is zowel een verschil in formulering als in taal. Claude bewoog in het Italiaans de ene kant op en in het Duits en Frans de andere kant op, wat erop wijst dat de formulering meetelt.

Twee keer vragen geeft verschil

Dezelfde vraag die twee keer in dezelfde taal wordt gesteld, levert ook andere bedrijven op. Dat basisniveau is in het onderzoek niet gemeten, dus een naamoverlap onder 100% komt niet helemaal door de taal.

Ontbrekende antwoorden

Bij 6 van de 10.944 vragen gaf Gemini geen lijst, zelfs niet na twee nieuwe pogingen, en deze zijn uit elk percentage weggelaten.

Verschillende steden

De pagina's in elke taal betreffen steden uit dat taalgebied, en de Amerikaanse pagina's betreffen grote Amerikaanse steden. Een verschil tussen landen kan evengoed komen door de grootte of de bekendheid van de steden als door het land.

Leeg is niet fout

Een leeg antwoord kan het eerlijke antwoord zijn, en een lijst kan bedrijven noemen die niet bestaan of zijn opgeheven. Het onderzoek controleert de namen niet; het aandeel dat in de ranglijst van november staat, is slechts een gedeeltelijke controle.

Belangenconflicten

De auteur richtte AIGROW op, dat de Index publiceert en diensten verkoopt die erop gericht zijn te verbeteren hoe bedrijven in AI-antwoorden verschijnen. Het onderzoek had geen externe financiering.

• Accounting software in Spain
• Accounting software in Germany
• Accounting software in Austria
• Accounting software in Poland
• Hair salons in Rome
• Hair salons in Naples
• Hair salons in Florence
• Veterinarians in Florence

• Gyms in Turin
• Plumbers in Rome
• CRM software in Italy
• Accounting software in Italy
• Projectmanagementsoftware

Download de gegevens als CSV

De CSV bevat de aantallen en percentages achter elke tabel, per taal, variant, assistent en vraag. De antwoorden zelf blijven bij AIGROW Labs.