Melyik AI-robotot engedd be az oldaladra, és melyiket nem?

Lónay Kornél

Az AI-keresők a saját robotjaikkal olvassák a weboldalakat. Hogy melyik AI-robot mit olvashat, azt a robots.txt fájl dönti el. Megmutatom, mit lát egy robot az oldaladból, melyiket érdemes beengedni, és mit mutatott a saját oldalam mérése. Hogy egy AI SEO-auditban mit nézek meg, azt az AI SEO-audit 100 ponton cikkben írtam meg.

Egy kávépörkölde tulajdonosa a weboldala robots.txt-beállításait nézi a laptopján

Röviden

Tartalom

Miért érdemes most foglalkozni az AI-keresőkkel?

Azért, mert a magyar keresőben is ott vannak. Magyarországon 2025 óta megjelenik az AI-áttekintés a Google találatai fölött, és 2025 őszén az AI mód is elindult. 2026. augusztus 31. óta a Google Search Console minden webhelynél ad egy kapcsolót, amellyel a tulajdonos eldöntheti, szerepelhet-e az oldala a generatív AI-funkciókban (Google Search Console súgó), és ugyanettől a naptól külön riport mutatja, milyen gyakran jelenik meg bennük (Google Search Console súgó).

A jó Google-helyezés ettől még számít, de nem mindent visz.

Az Ahrefs 2026 márciusi mérése szerint az AI-áttekintésben idézett oldalaknak csak 38%-a szerepelt ugyanarra a keresésre a Google első tíz találata között (Ahrefs).
38 %

Az elemzés szerint ennek oka, hogy a Google egy kérdés mögött több rokon keresést is lefuttat, és azok találataiból is idéz. Egy jó helyezés tehát segít, de nem elég. A többi azon múlik, amit a látogató nem lát: be tud-e jutni az AI-keresők robotja, érti-e a szöveget, és van-e az oldalon olyan tudás, amit érdemes idézni.

Hogy a te oldaladra be tud-e jutni az AI-keresők robotja, és érti-e a szöveget, azt hozzáférés nélkül is meg tudom nézni. A díjmentes ellenőrzésben megkapod az eredményt százalékban és a talált akadályok listáját. Ha azt is tudni szeretnéd, hol vannak az oldaladon, és hogyan javíthatók, az eredmény alatt a részletes javítási listát is megrendelheted (7 900 Ft).

Mit lát a robot, és mit látsz te?

Egy weboldal két nézetben létezik. Az egyik az, amit a böngésződben látsz. A másik az, amit egy AI-robot kap, amikor lekéri az oldalt. A kettő sokszor nem ugyanaz, és a tulajdonos csak az elsőt látja.

Amit megnyitáskor látsz Amit az AI-kereső robotja kap
Az oldal betölt, minden rendben A tárhely védelme visszautasíthatja a kérését, akkor is, ha a szabályok engedik
A szöveg ott van a képernyőn Ha a szöveget JavaScript tölti be, a robot üres vagy hiányos oldalt kap
A cégadataid a láblécben A háttérben lévő strukturált adat más telefonszámot vagy címet is mutathat
Egy szép, kérdés nélküli címsor Nincs kimondott mondat, amelyet a válaszban idézni lehetne
Nem tudod, jön-e látogató az AI-ból A mérés csak akkor mutatja, ha be van állítva

Melyik AI-robotot engedd be, és melyiket nem?

Ez az a pont, ahol a legtöbb tévedést látom. A nagy AI-szolgáltatóknak több robotjuk van, és mindegyik mást dönt el. Az egyik azt, hogy megjelenhetsz-e a keresési válaszban. A másik azt, hogy a szövegedből tanulhat-e a nyelvi modell. A harmadik akkor jön, amikor egy felhasználó épp a te oldaladról kérdez.

Az OpenAI dokumentációja szerint a ChatGPT keresésében való megjelenést az OAI-SearchBot dönti el: ha ezt kitiltod, az oldalad nem jelenik meg a ChatGPT keresési válaszaiban. A GPTBot ezzel szemben a modellek tanításához gyűjt, és a kettő egymástól függetlenül állítható (OpenAI). Érthető, ha valaki nem szeretné, hogy a szövegéből modellt tanítsanak. Aki viszont ezért egyszerűen „az OpenAI robotját” tiltja ki, könnyen a rosszat választja, és a keresésből is kiesik. A Perplexity is hasonlóan választja szét: a PerplexityBot a keresési találatokhoz dolgozik, modellt nem tanít (Perplexity).

A robotok mögött több index is van. Az Anthropic a Claude webkereséséhez a Brave Search-öt nevezi meg alfeldolgozóként (Anthropic), a Microsoft Copilot a Bing indexéből dolgozik. Ezért nem elég, ha az oldalad a Google-ben szerepel: az auditban azt is megnézem, hogy a Bing és a Brave ismeri-e.

Hogy a modell-tanító robotokat beengeded-e, az üzleti döntés, nem hiba. Az auditban ezt külön jelölöm, hogy tudatosan dönthess róla.

Mit mutatott a saját oldalam?

Ezt a saját oldalamon tanultam meg. 2026 szeptemberében az instantonline.hu robots.txt-je minden AI-robotot engedett, én pedig azt hittem, ezzel rendben is van. Aztán megnéztem a tárhely naplóját, vagyis azt, hogy a valódi robotok ténylegesen milyen választ kaptak.

Az OpenAI modell-tanító robotja 369 kérést küldött, és ebből 226-ot a tárhely védelme visszautasított, 429-es hibakóddal, amely azt jelenti: „túl sok kérés”.
226

Közben a ChatGPT keresőrobotja és a Claude robotja rendben bejutott.

A szabály tehát engedett, a szerver mégis visszautasított. Ha csak a beállítást nézem, ezt nem veszem észre. Ezért van az auditban kézi pont a tárhely naplójára: a robotok valódi válaszát mérni kell, nem elég a beállításból következtetni rá.

A díjmentes ellenőrzésben megnézem, mit enged a te oldalad az AI-robotoknak, és mit mutat a gépi mérés. A tárhely naplóját, ahol nálam a hiba kiderült, a megbízás után nézem át.

Gyakori kérdések

Kell llms.txt fájl a weboldalamra?

A Google Keresőhöz nem kell: a Google útmutatója szerint a Kereső figyelmen kívül hagyja, így a helyezésedre nincs hatása. A PageSpeed viszont ellenőrzi, ha van, ezért ha már létezik, érdemes rendben tartani. AI-ajánlást nem érdemes várni tőle.

A keresési válaszokból nem. Az OpenAI szerint a GPTBot a modellek tanításához gyűjt, a ChatGPT keresésében való megjelenést pedig az OAI-SearchBot dönti el. A kettő külön állítható: kimaradhatsz a tanításból úgy, hogy közben a keresésben megjelenhetsz.

Erre nem tudok határidőt mondani. Az OpenAI szerint a robots.txt módosítását nagyjából 24 óra alatt veszi át a rendszerük, de hogy egy oldalt mikor és milyen kérdésre idéznek, az a szolgáltatókon múlik. Amit vállalni tudok: megmutatom, mely akadályok vannak most az útban, és a javítás után újramérem őket.

Lónay Kornél
Lónay Kornél

InstantOnline alapító2004 óta dolgozom értékesítésben, 2016 óta készítek weboldalakat, eddig több mint 30 készült el a kezem alatt. A weboldalt mindig egy értékesítési rendszer részeként tervezem: kutatás, szöveg, forgalom és mérés együtt. Bővebben rólam →

Díjmentes
Díjmentes konzultáció

Beszéljük meg, miben segíthetek. 30 perces, díjmentes, kötelezettségmentes konzultáció.

Díjmentes konzultáció (felugró)
Egyedi ajánlatkérés

Írd le, mire van szükséged, és ez alapján elkészítem az ajánlatodat.

Egyedi ajánlatkérés (felugró)