Először nézd meg, ugyanazt vizsgáltad-e

Azonos kérdésszöveg mellett sem feltétlenül azonos a teljes helyzet. Más lehet a beszélgetés előzménye, a keresés használata, a fiók személyre szabása, a helyadat vagy a termékben elérhető működési mód. Ha ezek közül több változik egyszerre, a válaszok különbségének okát nem lehet pusztán a weboldalra visszavezetni.

Az OpenAI keresési útmutatója szerint a ChatGPT a keresés során figyelembe vehet helyinformációt, és bekapcsolt memória esetén releváns emlékeket is használhat a keresőkérdés kialakításakor. Ez konkrét ok arra, hogy egy személyes fiókban kapott választ ne tekintsünk minden felhasználó közös eredményének. A mérési naplóban rögzítsük a hozzáférhető beállításokat, ne találjuk ki a rejtett működést.

Egy egyszerű ellenőrzésben is különbség van az új beszélgetésből feltett kérdés és a tíz korábbi üzenetre épülő folytatás között. Az utóbbi lehet életszerű ügyfélhelyzet, de más kutatási kérdés. Ha a teszt közben megkérjük a rendszert, hogy „gondolja át még egyszer”, már egy új, előzményes helyzetet hoztunk létre. Ezt külön futtatásként kell megőrizni.

A válasz minden részét ne kezeld egyformán

Változhat a megfogalmazás úgy, hogy a lényegi információ helyes marad. Változhat a felsorolt cégek sorrendje, miközben ugyanazok a releváns lehetőségek szerepelnek. Más esetben egyetlen mondat cseréje is komoly hiba: például téves árat, megszűnt szolgáltatást vagy nem létező kompatibilitást állít. Az eltéréseket üzleti jelentésük alapján kell osztályozni.

A rangsorhoz hasonló megjelenés csábít arra, hogy minden helycserét javulásnak vagy romlásnak nevezzünk. Sok válasz azonban nem rögzített ranglista. A felsorolás sorrendjéből ezért csak akkor érdemes mutatót készíteni, ha világos, mi a sorrend jelentése, és a szolgáltató módszertana ezt ténylegesen kezeli. Ellenkező esetben a puszta sorszám túl erős következtetést sugall.

A válasz minden részét ne kezeld egyformán
Megfigyelt eltérésElső értelmezésKövetkező vizsgálat
Más szöveg, azonos állításMegfogalmazási változatNem feltétlenül igényel javítást
Más ajánlott cégekAjánlási minta változottFeltételek és források összevetése
Hibás terméktulajdonságEllenőrizhető pontatlanságHivatalos termékadat és idézett oldal
Eltűnt hivatkozásForráskör változottUgyanaz a kérdés több időpontban
Sikertelen válaszHiányzó megfigyelésMűködési állapot és új mérés

Az ismétlésnek előre leírt terve legyen

Ha addig kérdezünk újra, amíg megjelenik a márkánk, nem mérést, hanem kedvező képernyőképet keresünk. A vizsgálat előtt állapodjunk meg a kérdéskörben, az időpontokban és az értékelés módjában. A sikertelen és a márka nélküli válasz is maradjon meg. Csak így látható, mi történt valójában a mintában.

Kis cégnél a terv lehet egyszerű: néhány fontos kérdés több külön napon, azonos dokumentált környezetben. Ez működési minta, nem tudományos reprezentativitás. Nagyobb döntésnél több nyelv, piac és ismétlés lehet indokolt, de az elemzői kapacitásnak követnie kell a mennyiséget. Több ezer olvasatlan válasz nem feltétlenül ad jobb döntést.

A HubSpot követett AEO-kérdéseinek dokumentációja is több nap vagy hét eredményének áttekintésére figyelmeztet a változó válaszok miatt. Ezt nem érdemes minden cégre kötelező időablakként átvenni. A saját tervben az számít, milyen változást akarunk felismerni, és milyen következménnyel járna egy téves riasztás.

Mit őrizz meg egy mérési sorban?

A képernyőkép hasznos, de önmagában nehezen kereshető. Érdemes mellé rövid, strukturált nyilvántartást vezetni. A cél, hogy egy másik munkatárs is megértse a megfigyelést, és ne kelljen a mérő személy emlékezetére hagyatkoznia. A nyilvántartásba ne kerüljön valódi ügyfél személyes adata vagy belső üzleti titok.

Hasznos külön mező a bizonytalanság oka. Például nem tudjuk, használt-e a rendszer élő keresést, vagy a szolgáltató nem adja ki a teljes válaszszöveget. Ezt nem kell nullának vagy rossz eredménynek minősíteni. A hiányzó információ azt jelzi, meddig terjedhet a következtetés, és hol van szükség más ellenőrzési módszerre.

  • A kérdés változatlan szövege és belső azonosítója.
  • A dátum, időzóna és használt felület vagy mérőeszköz.
  • A látható modell- vagy módmegjelölés, ha rendelkezésre áll.
  • A nyelv, a megadott hely és az ismert személyre szabási körülmény.
  • A teljes érdemi válasz, a hivatkozások és a mérés sikeressége.
  • A saját értékelés, külön jelölve a szó szerinti megfigyeléstől.

Mikor változtass a honlapon?

Először az ellenőrizhető tényhibákat javítsuk. Ha a válasz egy elavult saját árlistára hivatkozik, a forrás rendezése akkor is indokolt, ha az AI-ajánlások változékonyak. Ha a saját oldal pontos, de egy külső adatlap hibás, más felelős és más javítási csatorna kell. Ha nincs azonosítható forrás, a bizonytalanságot nem oldja meg néhány új kulcsszó elhelyezése.

A honlap átszerkesztése előtt rögzítsük az eredeti állapotot és a javítás célját. Például: a szolgáltatási terület félreérthető, ezért pontos térségi leírás kerül az oldalra. Utána ellenőrizzük, hogy a látogató számára valóban egyértelműbb lett-e. Az AI-válasz későbbi változása kiegészítő megfigyelés, nem azonnali bizonyíték arra, hogy kizárólag a módosítás okozta az eredményt.

Kerüljük az egyszerre végzett, sokféle változtatást, ha tanulni is szeretnénk belőle. Ha a szöveg, a cím, a belső linkek és a technikai hozzáférés ugyanazon a napon módosul, nehéz megérteni, melyiknek volt szerepe. Üzleti sürgősség esetén persze több hibát is javítani kell; ilyenkor az okozati magyarázatot kell visszafogni, nem a szükséges munkát halogatni.

Hogyan jelents bizonytalan eredményt érthetően?

A jó riport külön mondja el a tényt és az értelmezést. Tény lehet, hogy a követett tizenkét kérdés adott heti futtatásaiban kevesebb márkaemlítést találtunk. Értelmezés, hogy ezt termékváltozás, kérdésmintaváltás vagy rendszeroldali módosítás okozhatta. Amíg nincs bizonyíték, több lehetséges magyarázat maradhat nyitva.

A kis minták százalékai mellé írjuk oda a darabszámot. Két válasz változása látványos aránykülönbséget eredményezhet, ha eleve kevés mérés van. A vezető így jobban tudja mérlegelni, hogy azonnali beavatkozás, további ellenőrzés vagy egyszerű megfigyelés indokolt-e. A bizonytalanság őszinte bemutatása nem gyengíti, hanem használhatóvá teszi a riportot.

A csapat számára különösen hasznos egy előre meghatározott riasztási rend. A téves egészségügyi vagy biztonsági állítás más súlyú, mint egy eltérő szóhasználat. A feladatokat a lehetséges kár szerint rangsoroljuk. Így nem a legfeltűnőbb képernyőkép kapja automatikusan a legtöbb figyelmet, hanem az a probléma, amelynek tényleges ügyfélkövetkezménye lehet.

A megőrzött régi válaszokat ne írjuk felül az új futtatással: a változás később csak a korábbi állapottal együtt ellenőrizhető.

Gyakori kérdések

Hány ismétlés bizonyítja, hogy romlott a láthatóság?

Nincs minden helyzetben érvényes darabszám. Függ a kérdéskörtől, a változékonyságtól, a vizsgált mutatótól és a döntés súlyától. Egy kis belső minta elsősorban megfigyelést ad. Erős statisztikai következtetéshez külön megtervezett kutatás és megfelelő módszertan szükséges.

Használhatom a saját személyes ChatGPT-fiókomat ellenőrzésre?

Igen, konkrét felhasználói tapasztalatként, ha a körülményeket dokumentálod. Az eredményt azonban nem szabad minden felhasználóra általánosítani. A személyes előzmények és beállítások miatt érdemes külön kezelni a saját fiókos próbát és a következetesebb mérési keretet.

Azonnal kérjek újraindexelést minden eltérő válasz után?

Nem minden eltérés hozzáférési vagy frissítési probléma. Előbb ellenőrizd a válasz állítását, a hivatkozott oldalt és a saját tartalom helyességét. Ha a forrás pontos, egy újabb feltérképezési kérés önmagában nem garantál más ajánlást vagy gyorsabb változást.

Források és további olvasnivaló

A cikk tájékoztató jellegű szakmai útmutató. Az említett példák szemléltető helyzetek; a saját vállalkozásodnál a konkrét adatok és a működési feltételek alapján érdemes dönteni.

Van egy hasonló feladatod?

Beszéljük át, hogyan ültethető át a gyakorlatba.

Projektet indítok

Kapcsolódó szolgáltatás: GEO és AI-láthatóság ↗