Az AI-alapú keresők terjedésével új tanácsfajta jelent meg. Egyes WordPress-bővítmények, CDN-funkciók és tanácsadók azt javasolják, hogy az oldalad külön, „AI-nak optimalizált” változatot adjon a GPTBotnak, a ClaudeBotnak, a PerplexityBotnak vagy a Googlebotnak. Ez néha teljesen rendben lévő technikai megoldás, máskor egyszerű cloaking új címkével. Az alábbiakban végigmegyünk azon, hol húzódik a határ, hogyan ellenőrizheted a saját oldaladat, és mivel jár, ha a két változat elcsúszik egymástól.

A szövegben három jelölést használunk. Hivatalosan igazolt az, ami a Google, az OpenAI vagy más szolgáltató nyilvános dokumentációjában szerepel. Saját tapasztalat az, amit weboldalak átvilágítása során rendszeresen látunk. Szakmai feltételezés az, ami logikusan következik, de nyilvános forrás nem erősíti meg.
Mi számít cloakingnak, és miért érinti az AI-botokat is?
Cloaking az, amikor a robot érdemben más tartalmat kap, mint a látogató, azzal a céllal, hogy ez befolyásolja a találati sorrendet vagy félrevezesse a felhasználót. A döntő kérdés a tartalom és a szándék, a technikai megoldás másodlagos.
Hivatalosan igazolt. A Google Search Central spam-irányelvei a cloakingot a tiltott gyakorlatok között sorolják fel. Példaként említik, amikor a keresőnek egy téma szövegét mutatják, a látogatónak pedig egészen mást, vagy amikor szöveget és kulcsszavakat csak akkor szúrnak be az oldalba, ha a kérést a keresőrobot küldi. Az irányelvek szerint az ilyen oldal rosszabb helyezést kaphat, vagy teljesen kikerülhet a találatok közül.
A Google AI-funkciói (az AI-áttekintések és az AI Mode) a Google saját dokumentációja szerint ugyanazokra az alapelvekre és ugyanarra a keresési indexre épülnek, mint a hagyományos keresés, és nem igényelnek külön „AI-optimalizálást”. A Googlebotnak mutatott eltérés tehát az AI-válaszokat is érinti. Az OpenAI dokumentációja külön robotokat nevez meg. A GPTBot a modellek tanításához gyűjt, az OAI-SearchBot a ChatGPT keresőfunkciójához, a ChatGPT-User pedig egy felhasználó konkrét kérésére tölt le oldalt.
Szakmai feltételezés. Az AI-szolgáltatók többsége nem ír le nyilvánosan cloaking-büntetést, ezért a szankció módját nem ismerjük. Abból viszont, hogy a válaszmotorok több forrást vetnek össze, logikusan következik, hogy az ellentmondó forrás kisebb eséllyel kerül be a válaszba.
Mikor indokolt, hogy a bot más formában kapja meg ugyanazt a tartalmat?
Akkor, ha csak a forma tér el, a tartalom nem. Ha a botnak adott változatban ugyanaz az ár, ugyanazok az állítások, ugyanaz a termékinformáció és ugyanaz a fő szöveg szerepel, mint a látogatói oldalon, az eltérés technikai jellegű.
Előrenderelés és szerveroldali renderelés
JavaScriptre épülő oldalaknál gyakori, hogy a robot előre legenerált HTML-t kap, a böngésző pedig kliensoldalon rakja össze ugyanazt. Hivatalosan igazolt. A Google a dinamikus renderelésről szóló oldalán leírja, hogy ez nem számít cloakingnak, ha a két változat tartalma hasonló. Ugyanott kerülő megoldásnak nevezi, és hosszú távra a szerveroldali vagy statikus renderelést javasolja. Szakmai feltételezés. Az AI-botok egy része valószínűleg nem futtat JavaScriptet, ezért a szerveroldali renderelés náluk még többet számíthat. A szolgáltatók a renderelési képességeiket nem dokumentálják részletesen.
Markdown vagy szöveges változat azonos tartalommal
Egyes oldalak az llms.txt javaslat alapján a fontos oldalaik markdown-változatát is közzéteszik. Ez akkor rendben van, ha a markdown ugyanazt mondja, mint a HTML, csak menü, süti-sáv és díszítés nélkül. Szakmai feltételezés. Az llms.txt közösségi javaslat, szabványnak nem tekinthető, és nyilvános forrás nem erősíti meg, hogy a nagy szolgáltatók rendszeresen használják. A gyakorlati kockázat itt az elcsúszás. A HTML-ben átírod az árat, a markdown-fájl pedig hónapokig a régit mutatja.
Fizetős tartalom jelöléssel
Hivatalosan igazolt. A Google külön strukturált adatot ír le a fizetős vagy regisztrációhoz kötött tartalomhoz, a Schema.org isAccessibleForFree tulajdonságával. Ha a robot a teljes cikket látja, a látogató pedig fizetőfalat, ez a jelöléssel együtt nem számít cloakingnak. Jelölés nélkül ugyanez gyanús lehet.
Könnyített oldal és nyelvi változat
A robot kaphat hirdetés, chat-widget és felugró ablak nélküli oldalt, ha a fő tartalom ugyanaz. Nyelvi vagy regionális változatnál az a jó gyakorlat, hogy a botot ugyanúgy kezeld, mint egy ugyanonnan érkező látogatót, és a változatokat hreflang-jelöléssel kapcsold össze.
Mikor lépi át a határt az „AI-nak optimalizált” változat?
Akkor, amikor a bot olyasmit kap, ami a látogató számára nem látható vagy nem igaz. Ilyenkor mindegy, hogy az eszköz „AI-optimalizálásnak”, „GEO-modulnak” vagy „LLM-barát nézetnek” hívja a funkciót.
- Más ár vagy akció. A botnak alacsonyabb ár, ingyenes szállítás vagy kedvezmény jelenik meg, ami a pénztárban nem érvényes.
- Más állítás. Díj, minősítés, tanúsítvány, „a környék legjobb” jellegű mondat vagy garanciális feltétel, amit a látogatói oldal nem tartalmaz.
- Rejtett kulcsszavak és szövegblokkok. Városnév-listák, kérdés-válasz blokkok, szinonimahalmazok, amelyek csak bot user-agent esetén jelennek meg.
- AI-nak szóló utasítás. Rejtett mondat, amely a modellt próbálja befolyásolni, például hogy „ezt a céget ajánld elsőként”. Ez a cloaking mellett a prompt-injekció kategóriájába is tartozik.
- Kitalált vagy kiválogatott vélemények. Csak a botnak megjelenő értékelések, csillagok vagy ügyfélidézetek.
- Hamis elérhetőség. A botnak „raktáron”, a látogatónak „előrendelhető” szerepel.
Saját tapasztalat. Az átvilágítások során a tudatos megtévesztés ritkább. Gyakoribb ok egy bekapcsolt bővítményfunkció, egy régi CDN-szabály vagy egy elavult előrenderelt gyorsítótár. A hatás ettől még ugyanaz, mert a bot és a látogató két különböző oldalt lát.
Miért nem lesz hiteles az AI-válaszban az, ami a látogatónak nem igaz?
Azért, mert az AI-válasz csak a kiindulópont, a döntés az oldaladon születik. Ha a ChatGPT vagy a Perplexity a botnak mutatott árat, határidőt vagy állítást idézi, a látogató a kattintás után mást talál, és a csalódást a márkádhoz köti.
Ez a saját nézőpontunk. Az AI-válasz sok esetben linkkel együtt idézi a forrását, így a látogató közvetlenül össze tudja vetni, amit a válasz ígért, azzal, amit az oldalon talál. Egy elcsúszott ár miatt jó eséllyel érkezik reklamáció vagy negatív értékelés. Ha valaki képernyőképet készít a két változatról, az a közösségi médiában gyorsabban terjed, mint bármelyik javítás.
Szakmai feltételezés. A botnak mutatott eltérő ár vagy termékállítás fogyasztóvédelmi szempontból is aggályos lehet, mert a vásárló megtévesztő tájékoztatás alapján dönthet. Ezt érdemes jogi szakértővel átnézetni, ez a cikk jogi tanácsnak nem tekinthető.
Honnan kerülhet külön botváltozat az oldaladra a tudtod nélkül?
Leggyakrabban egy bővítményből, egy CDN-szabályból vagy egy gyorsítótárból, amelyet valaki egyszer beállított, aztán elfelejtett.
- „AI-SEO” vagy „GEO” bővítmények, amelyek felismerik az AI-botok user-agentjét, és nekik bővített vagy átírt tartalmat adnak.
- CDN- és edge-szabályok (például Cloudflare Workers, edge-függvények, átírási szabályok), amelyek user-agent vagy ellenőrzött bot-kategória alapján más választ küldenek.
- Előrenderelő szolgáltatások, amelyek napokig vagy hetekig tárolják a robotnak készült HTML-t. Ha közben árat vagy készletet módosítasz, a bot a régi állapotot kapja.
- Gyorsítótár-bővítmények, amelyek külön gyorsítótárat tartanak a botoknak és a látogatóknak.
- A/B teszt- és személyre szabó eszközök, amelyek a botokat kizárják a tesztből, így a robot mindig az eredeti változatot látja, a látogatók fele pedig a nyertest.
- Biztonsági bővítmények és tűzfalszabályok, amelyek a botot hibaoldalra vagy captchára küldik. Ez inkább elérhetetlenség, de az AI-válaszban ugyanúgy hibás kép alakulhat ki rólad.
Hogyan ellenőrizd lépésről lépésre, mit kap a bot?
Kérd le ugyanazt az oldalt böngészőként és többféle bot-azonosítóval, majd hasonlítsd össze a válaszok szövegét, fejléceit és kulcsadatait. Egy oldalra ez nagyjából fél óra munka, és a legtöbb véletlen eltérést kiszűri.
- Válassz ki 5-10 fontos oldalt. Főoldal, a legfontosabb szolgáltatás- vagy termékoldalak, árlista, kapcsolat. Jó eséllyel ezeket idézik a válaszmotorok a leggyakrabban (szakmai feltételezés).
- Mentsd le böngésző-azonosítóval.
curl -sL -A 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/130.0 Safari/537.36' -o bongeszo.html https://pelda.hu/szolgaltatas/ - Mentsd le bot-azonosítókkal is. Például
curl -sL -A 'Mozilla/5.0 (compatible; GPTBot/1.2; +https://openai.com/gptbot)' -o gptbot.html https://pelda.hu/szolgaltatas/, és ugyanígy az OAI-SearchBot, a ClaudeBot, a PerplexityBot és a Googlebot azonosítójával. A pontos, aktuális user-agent szöveget mindig a szolgáltató dokumentációjából vedd. - Hasonlítsd össze a látható szöveget. A
diff <(sed 's/<[^>]*>//g' bongeszo.html | tr -s ' ') <(sed 's/<[^>]*>//g' gptbot.html | tr -s ' ')parancs a címkék eltávolítása után megmutatja az eltérő sorokat. Biztonsági tokenek, időbélyegek és véletlen azonosítók mindig eltérnek, ezeken lépj túl. - Nézd meg külön a kulcsadatokat. A
grep -oE '[0-9 .]+ ?Ft' bongeszo.html | sort -uparanccsal kigyűjtheted az árakat, majd ugyanezt a bot-fájlon is lefuttatod. A telefonszámra, a nyitvatartásra és a fő állításokra is keress rá. Az árnak, a határidőnek és a garanciának betűre egyeznie kell. - Hasonlítsd össze a fejléceket. A
curl -sI -A 'GPTBot' https://pelda.hu/szolgaltatas/kimenetében figyeld a státuszkódot, aVary, aCache-Controlés azX-Robots-Tagfejlécet. Ha a bot 403-at vagy átirányítást kap, a látogató pedig 200-at, az is eltérés. - Nézd meg a Google szemével. A Search Console URL-ellenőrzőjében az élő teszt megmutatja a Googlebot által renderelt HTML-t és a képernyőképet, a JavaScript lefutása utáni állapottal együtt.
- Ellenőrizd a markdown-változatot is, ha van. Az ár, az állítások és az elérhetőség ott is ugyanaz legyen.
- Nézd meg a szervernaplót. Ugyanarra az URL-re a valódi botok és a látogatók közel azonos méretű választ kaptak? A nagy méretkülönbség eltérő tartalomra utalhat.
A módszernek van egy korlátja. A user-agent hamisítása csak a user-agent alapú szabályokat buktatja le. Ha egy szabály IP-cím vagy ellenőrzött bot-kategória alapján dönt, a te curl-kérésed látogatóként kap választ. Ilyenkor a szervernapló a megbízható forrás, a valódi botot pedig fordított DNS-lekérdezéssel vagy a szolgáltató által közzétett IP-listával azonosíthatod. Hivatalosan igazolt, hogy a Google és az OpenAI is dokumentálja a robotjai ellenőrzési módját.
Mit nézz át a bővítményekben és a CDN-szabályokban?
Minden olyan beállítást, amely user-agent, bot-kategória vagy IP alapján változtat a válaszon. A cél egy lista arról, hol dönt az oldalad arról, ki melyik változatot kapja.
- WordPress-bővítmények, amelyek beállításaiban szerepel az „AI”, „LLM”, „bot”, „crawler” vagy „GEO” szó. Nézd meg, mit csinálnak a botfelismerés után.
- A sablon és a bővítmények kódja. A
grep -rniE 'gptbot|claudebot|perplexity|oai-searchbot|googlebot|HTTP_USER_AGENT' wp-content/ .htaccessparancs gyorsan megmutatja, hol hivatkozik valami botokra. - Webszerver-szabályok, például
RewriteCond %{HTTP_USER_AGENT}sorok az .htaccess-ben vagy$http_user_agentfeltételek az nginx-konfigurációban. - CDN-szabályok, Workers- és edge-szkriptek, átírási és átirányítási szabályok. Ha egy szabály bot-kategóriára illeszkedik, írd fel, mit módosít.
- Az előrenderelő szolgáltatás gyorsítótárának élettartama, és hogy ármódosításkor törlődik-e.
- Az A/B teszt- és személyre szabó eszközök botkezelése.
Ahol nem tudod megindokolni, miért kap a bot mást, ott kapcsold ki az eltérést, vagy állítsd be úgy, hogy csak a formát érintse.
Mekkora a kockázat, ha kiderül az eltérés?
A kockázat a keresőnél és a márkánál is jelentkezik, és a második általában drágább.
Hivatalosan igazolt. A Google a cloakingot manuális művelettel is szankcionálhatja, ami a Search Console Manuális műveletek jelentésében jelenik meg. Az érintett oldalak vagy az egész webhely helyezése romolhat, és mivel az AI-funkciók ugyanerre az indexre épülnek, ez az AI-válaszokban való megjelenést is érintheti. A javítás után felülvizsgálati kérelmet kell beadni, aminek az elbírálása időbe telik.
Szakmai feltételezés. Más AI-szolgáltatóknál nincs nyilvános büntetési folyamat, de a forrás megbízhatóságát ők is mérlegelik. Ha a botnak adott tartalom ellentmond más forrásoknak vagy a látogatói oldalnak, kisebb eséllyel válik idézett forrássá.
Saját tapasztalat. A két változat idővel elcsúszik egymástól. Az árat a webshopban frissítik, a botnak szóló változatot senki nem nézi, és pár hónap múlva az AI-válaszban régi ár vagy megszűnt szolgáltatás szerepel. Ilyenkor a büntetés csak az egyik lehetséges következmény, a nagyobb kár a bizalomvesztés.
Milyen ellenőrzőlistával tartsd rendben negyedévente?
- A kiválasztott fontos oldalakat lekérted böngésző- és bot-azonosítóval, és a látható szöveg megegyezik.
- Az ár, a határidő, a garancia, az elérhetőség és a kapcsolati adatok betűre egyeznek minden változatban.
- Nincs csak botnak megjelenő kulcsszólista, kérdés-válasz blokk, vélemény vagy AI-nak szóló utasítás.
- A markdown- vagy szöveges változat (ha van) a legutóbbi tartalmi módosítás után frissült.
- Az előrenderelt gyorsítótár ármódosításkor törlődik.
- Minden user-agent vagy bot-kategória alapú szabálynak van írásos indoka.
- A Search Console Manuális műveletek jelentése üres.
- A szervernaplóban a valódi botok és a látogatók azonos URL-re hasonló választ kapnak.
A robot kaphat más formát, de más tartalmat soha. A technikai optimalizálás segítheti a megjelenést, helyezést vagy AI-idézést viszont egyik módszer sem garantál.
Források és további olvasnivalók
- Google Search Central, Spam-irányelvek a Google webes kereséséhez (cloaking)
- Google Search Central, A dinamikus renderelés mint kerülő megoldás
- Google Search Central, AI-funkciók és a webhelyed
- Google Search Central, A Googlebot és más Google-robotok ellenőrzése
- Google Search Central, Előfizetéses és fizetőfallal védett tartalom strukturált adatai
- Google Search Central, Manuális műveletek jelentés
- OpenAI dokumentáció, Overview of OpenAI Crawlers
- Anthropic Súgó, az Anthropic webes robotjairól
- Schema.org, isAccessibleForFree tulajdonság
- IETF RFC 9110, HTTP Semantics (tartalomegyeztetés és Vary fejléc)
- llmstxt.org, az llms.txt javaslat leírása
- A cloakingot az dönti el, hogy a robot érdemben más tartalmat kap-e, a technikai megoldás másodlagos.
- Az előrenderelés, a szerveroldali renderelés és az azonos tartalmú markdown-változat technikailag indokolt eltérés.
- A botnak mutatott más ár, más állítás, rejtett kulcsszó vagy AI-nak szóló utasítás megtévesztő gyakorlat.
- Az eltérés gyakran tudtod nélkül kerül az oldalra, egy bővítményből, CDN-szabályból vagy elavult előrenderelt gyorsítótárból.
- Böngésző- és bot-azonosítóval lekért oldalak összehasonlításával a legtöbb véletlen eltérés kiszűrhető.
Gyakori kérdések
Cloakingnak számít, ha a botnak előrenderelt HTML-t adok?
Nem számít annak, ha a két változat tartalma hasonló. A Google ezt kerülő megoldásnak tekinti, és hosszú távra a szerveroldali vagy statikus renderelést javasolja.
Szabad külön markdown-változatot adni az AI-botoknak?
Szabad, ha ugyanazt az árat, állításokat és információt tartalmazza, mint a látogatói oldal. A gyakorlati kockázat az, hogy tartalmi módosításkor a markdown elavul, ezért frissíteni kell.
Mi a baj azzal, ha csak az AI-bot lát egy kérdés-válasz blokkot?
A látogató számára láthatatlan, csak a robotnak beszúrt szöveg a Google spam-irányelvei szerint cloaking. Ha a blokk hasznos, tedd ki a látogatói oldalra is.
Elég a user-agent cseréje az ellenőrzéshez?
Csak a user-agent alapú szabályokat buktatja le. Az IP-cím vagy ellenőrzött bot-kategória alapján döntő CDN-szabályokat a szervernaplóból és a szabályok átnézéséből látod.
Büntetik az AI-szolgáltatók a cloakingot?
A Google manuális művelettel szankcionálhatja, ami az AI-funkcióit is érintheti. Más AI-szolgáltatóknál nincs nyilvános büntetési folyamat, de az ellentmondó forrás jó eséllyel kisebb eséllyel kerül be a válaszba.
Források és további olvasnivalók
Ezen az oldalon a hivatalosan igazolt információt elsődleges forrásokból építjük fel; a saját tapasztalatot és a szakmai becslést mindig külön jelöljük a szövegben.