Synlighet i KI-søk: en praktisk guide til måling

Lag et sett med spørsmål du kan bruke på nytt

Begynn med spørsmål en kjøper kan stille før vedkommende kjenner merkevaren din. Grupper dem etter hensikt, for eksempel utforsking av en kategori, problemløsning, sammenligninger, gjennomføring og direkte spørsmål om merkevaren. Hold spørsmål som nevner merkevaren, i en egen gruppe, slik at de ikke blåser opp resultatet for spørsmål uten merkevarenavn.

Det finnes ingen universell fordeling av spørsmålstyper. En lokal tjenestebedrift, en programvareleverandør og en nettbutikk har ulike kjøpsprosesser. Dokumenter hvorfor hvert spørsmål er med, hvem det representerer, og hvilket marked eller språk det gjelder.

Lås spørsmålssettet for rapporteringsperioden. Hvis du legger til eller fjerner spørsmål, vis endringen i stedet for å sammenligne den nye poengsummen direkte med den gamle.

Ta vare på det nøyaktige spørsmålet, svaret, siterte nettadresser, søkemotor, dato, sted, påloggingsstatus og modell eller produktmodus for hver kjøring, når grensesnittet viser disse opplysningene. Kjør det samme settet flere ganger hvis budsjettet tillater det. Assistentenes svar kan endre seg mellom kjøringer, så ett svar er en observasjon, ikke en stabil rangering.

Bruk en enkel undersøkelsesrekkefølge:

1. Ble merkevaren nevnt?
2. Ble merkevarens eget domene sitert?
3. Underbygget den siterte siden svaret?
4. Var opplysningene om merkevaren riktige og oppdaterte?
5. Førte det til et målbart besøk eller en konvertering?

Hvert spørsmål peker på et ulikt problem. Få omtaler kan tyde på svak relevans i kategorien. Omtaler uten siteringer tilsier at kildene bør gjennomgås.

Ødelagte lenker eller siteringer som ikke underbygger svaret, krever kontroll av sider og påstander. Trafikk uten verdifulle resultater er et analyse- eller konverteringsproblem.

Bruk mål med tydelige definisjoner

En nyttig rapport trenger ikke fjorten overlappende poengsummer. Begynn med mål teamet ditt kan beregne og kontrollere:

• Andel gjennomførte kjøringer: gyldige kjøringer fullført delt på planlagte kjøringer.
• Omtaleandel for merkevaren: gyldige svar som nevner merkevaren, delt på gyldige svar i samme spørsmålsgruppe.
• Siteringsandel for domenet: gyldige svar som siterer merkevarens domene, delt på gyldige svar i samme gruppe.
• Andel underbygde siteringer: gjennomgåtte siteringer der målsiden underbygger den tilhørende påstanden, delt på antall gjennomgåtte siteringer.
• Andel korrekte fakta: kontrollerte påstander om merkevaren som er vurdert som riktige og oppdaterte, delt på alle kontrollerte påstander.
• Fordeling av siterte nettadresser: sidene og sidetypene som forekommer i siteringene.
• Forskjeller mellom søkemotorer: forskjellen mellom sammenlignbare observasjoner fra hver søkemotor. Beskriv forskjellene uten statistiske konklusjoner med mindre utvalget og metoden gir grunnlag for slik analyse.
• Besøk henvist fra KI: besøk som i analyseverktøyet tilskrives en assistent eller en KI-søkekilde. Noen besøk vil ha manglende eller ufullstendige henvisningsdata.
• Resultater fra henviste besøk: leads, registreringer, kjøp eller andre valgte hendelser fra besøk som kan tilskrives en kilde. Oppgi attribusjonsvinduet og attribusjonsmodellen.

Vis alltid hva tallene er delt på. En siteringsandel basert på seks brukbare svar bør ikke fremstå som like pålitelig som en andel basert på et større utvalg med gjentatte målinger. Skill også mellom en omtale av merkevaren og en lenke til merkevarens domene. Det ene beviser ikke det andre.

Unngå én samlet poengsum med mindre vektingen er dokumentert og nyttig for en konkret beslutning. Samlede poengsummer kan skjule akkurat det problemet teamet trenger å løse.

Kontroller siteringer og tekniske forutsetninger

Åpne hver sitering i et håndterbart utvalg, og registrer tre ting: om nettadressen fungerer, om siden underbygger påstanden, og om informasjonen er oppdatert. Merk usikre tilfeller for gjennomgang av en annen person. En fungerende lenke beviser ikke at svaret gjengir kilden riktig.

Hold en kort faktaoversikt over opplysninger assistenter ofte tar feil av, for eksempel gjeldende produktnavn, hvor prissiden ligger, hvilke regioner som støttes, kontaktopplysninger og datoer for retningslinjer. Vurder bare fakta som kan kontrolleres mot en navngitt kilde. Ikke fyll hullene med antakelser.

Tekniske kontroller bør følge de publiserte kravene til hver plattform. Google sier at sider må være indeksert og kunne vises med et utdrag for å dukke opp som støttelenker i selskapets KI-søk. Veiledningen krever ikke spesiell KI-merking.

OpenAIs veiledning for utgivere forklarer hvordan OAI-SearchBot styrer oppdagelse av innhold for ChatGPT-søk, atskilt fra GPTBots innstillinger for trening.

Kontroller robots-direktiver, om sider kan indekseres, kanoniske nettadresser, serversvar, synlig sideinnhold og interne lenker. Bruk strukturerte data bare når de samsvarer med innhold leserne kan se, og følger relevant søkedokumentasjon. Slike kontroller kan gjøre sidene lettere å finne og forstå.

De garanterer ikke at sidene blir tatt med eller sitert.

Velg verktøy etter metode, ikke poengsum

Hvilke søkemotorer verktøyene dekker, og hvordan produktene fungerer, endrer seg raskt. Vurder produktet slik det er nå, i stedet for å stole på en gammel sammenligningstabell. Be hver leverandør vise:

• hvilke søkemotorer, markeder, språk og produktmoduser som dekkes;
• hvordan spørsmål planlegges, og om gjentatte kjøringer støttes;
• de opprinnelige svarene og siteringene bak hver poengsum;
• hvordan mislykkede kjøringer, manglende siteringer og dupliserte kilder håndteres;
• om resultater kan eksporteres med tidsstempler og versjoner av spørsmålene;
• hva som endres når en søkemotor oppdaterer modellen eller grensesnittet sitt;
• gjeldende vilkår for lagring, personvern og fakturering.

Gjør en liten akseptansetest før du bestemmer deg. Gi hvert verktøy det samme settet med spørsmål, og kontroller manuelt et utvalg av svarene og lenkene som verktøyet lagrer. Hvis plattformen bare viser en poengsum uten dokumentasjonen bak, er den vanskelig å etterprøve og gir et svakt beslutningsgrunnlag.

Et regneark er nok til en første måling. Automatisering blir nyttig når den tar vare på den opprinnelige dokumentasjonen, gjentar metoden på en konsekvent måte og reduserer arbeidet med datainnsamling uten å skjule feil. Sett av tid til manuell gjennomgang av siteringer og fakta, selv om innsamlingen er automatisert.

Tolk forskjeller mellom søkemotorer med varsomhet

Ulike assistenter kan gi ulike svar fordi systemene deres for kildeinnhenting, indekser, grensesnitt, modeller, personalisering og tilgang til søk er forskjellige. Bruk slike forskjeller som en grunn til å undersøke dokumentasjonen, ikke som bevis for at én søkemotor alltid foretrekker en bestemt kildetype.

Sammenlign det som kan sammenlignes. Bruk samme ordlyd i spørsmålene, marked, språk, tidsperiode og påloggingsstatus der det er mulig. Rapporter hver søkemotor for seg før du viser et samlet tall.

Hvis et produkt ikke oppgir siteringer for et svar, registrer det i stedet for å gjette hvilken kilde som påvirket svaret.

Bransjereferanser kan gi ideer til spørsmål, men erstatter ikke dine egne utgangsmålinger. Før du bruker en slik referanse, bør du sjekke spørsmålssettet, innsamlingsdatoene, hvordan utvalget er valgt, geografien, oppsettet for søkemotorene og definisjonen av omtale eller sitering. Poengsummer fra ulike leverandører kan ikke sammenlignes direkte når metodene er forskjellige.

Når et resultat endrer seg, gå gjennom svarene og de siterte nettadressene bak tallet. En høyere omtaleandel kan fortsatt omfatte uriktige påstander. En lavere siteringsandel kan skyldes en endring i grensesnittet, en mislykket innsamling eller en reell endring i kildebruken.

Dokumentasjonen viser hvilke forklaringer som er sannsynlige.

Knytt synlighet til beslutninger uten å påstå årsakssammenheng

En omtale gir nyttig innsikt i hvordan merkevaren fremstår, men beviser ikke autoritet, trafikk eller inntekter. En sitering er et sterkere tegn på at en side ble vist som kilde, men beviser fortsatt ikke at noen klikket eller konverterte.

Bruk analyseverktøy til å registrere besøk med en gjenkjennelig KI-kilde i henvisningsdataene. Knytt til de samme hendelsene for leads, registreringer eller kjøp som du bruker for andre kanaler. Dokumenter attribusjonsmodellen og tidsvinduet.

Noen brukere kommer tilbake direkte eller via en annen kanal, og noen assistenter sender ikke med brukbare henvisningsdata. Rapporterte KI-henvisninger er derfor et observerbart delutvalg, ikke et fullstendig antall.

Når du endrer innhold eller teknisk oppsett, registrer datoen for endringen og behold det samme settet med spørsmål. Sammenlign observasjoner fra før og etter endringen, og undersøk deretter produktoppdateringer, sesongvariasjoner, kampanjer og andre mulige forklaringer. Omtal korrelasjon som korrelasjon.

Et kontrollert eksperiment kan gi grunnlag for en sterkere konklusjon, men en trend i et kontrollpanel kan ikke gjøre det alene.

Avslutt rapporten med tiltak som bygger på dokumentasjonen. Reparer sider som ikke fungerer, rett opp påstander som mangler grunnlag, oppdater utdatert informasjon, forbedre sider som allerede får relevante siteringer, og undersøk spørsmålsgrupper med gjentatte faktafeil. Ikke lov flere siteringer.

Mål neste utvalg og vis hva som har endret seg.