SEO és GEO szójegyzékTechnikai SEO
Googlebot
Meghatározás
A Googlebot a Google webes feltérképező robotjának (web crawler) általános neve. Feladata, hogy a linkeken keresztül folyamatosan bejárja az internetet, és összegyűjtse a weboldalak tartalmát, amit aztán a Google rendszere feldolgoz és indexel. Ha a Googlebot nem tudja hatékonyan feltérképezni az oldaladat technikai hibák vagy rossz beállítások miatt, akkor az nem, vagy csak hiányosan fog megjelenni a Google találatai között. A munkáját a `robots.txt` fájllal tudod szabályozni, az `XML sitemap` és a jó belső linkelési struktúra pedig segít neki minden fontos tartalom megtalálásában. Több különböző verziója létezik, például külön robot felel a mobilos és az asztali oldalak, a képek vagy a hírek feltérképezéséért.
Gyakori kérdések
Mi a Googlebot feladata pontosan?
A Googlebot feladata a weboldalak feltérképezése (crawling). Linkeket követve fedezi fel az új és frissült tartalmakat, majd letölti azokat, hogy a Google rendszere később elemezhesse és felvehesse a keresési indexbe.
Hogyan látja a Googlebot a weboldalamat?
A Googlebot elsősorban a mobilos nézetet elemzi (ezt hívjuk mobile-first indexelésnek), és a modern böngészőkhöz hasonlóan képes a JavaScript-kódok futtatására is. A Google Search Console „URL-ellenőrzés” eszközével megnézheted, hogy a robot pontosan hogyan látja egy-egy oldaladat.
Hogyan tilthatom le a Googlebotot az oldalam bizonyos részeitől?
A `robots.txt` fájl segítségével megakadályozhatod, hogy a Googlebot hozzáférjen a weboldalad bizonyos mappáihoz vagy oldalaihoz. Fontos tudni, hogy ha egy oldalt letiltasz a `robots.txt`-ben, a Googlebot nem fogja tudni elolvasni az esetleges `noindex` utasítást sem. Az indexelésből való kizáráshoz ezért a `noindex` meta tag használata a javasolt módszer.
Miért terheli a szerveremet a Googlebot?
Ha egy weboldalnak sok aloldala van vagy a tartalma gyakran frissül, a Googlebot sűrűbben látogathatja, ami megnövekedett szerverterhelést okozhat. Ezt a jelenséget a feltérképezési kapacitás (crawl budget) kimerüléseként is emlegetik. A Google Search Console beállításaiban kérheted a feltérképezési sebesség csökkentését, de ez lassíthatja az új tartalmak indexelését.
Hogyan segíthetem, hogy a Googlebot gyorsan megtalálja az új oldalamat?
A leggyorsabb módszer, ha beküldöd az új oldal URL-jét a Google Search Console „URL-ellenőrzés” eszközén keresztül. Emellett győződj meg róla, hogy az oldal szerepel a naprakész `XML sitemap` fájlodban, és legalább egy belső link mutat rá a weboldalad egy már indexelt részéről.
Büntet a Google, ha megtévesztem a Googlebotot?
Igen, az álcázás (cloaking), vagyis amikor a Googlebotnak szándékosan más tartalmat mutatsz, mint a felhasználóknak, a Google irányelveinek súlyos megsértése. Az ilyen manipulatív technikák a weboldalad rangsorból való visszaesését vagy akár teljes kitiltását is eredményezhetik.
Ingyenes SEO és AI láthatósági audit
Szeretnél szintet lépni?
Kapcsolódó kifejezések:
- Indexelés (indexing)
- Feltérképezés (crawling)
- robots.txt
- XML sitemap
- Canonical tag
- Duplikált tartalom (duplicate content)
- Árva oldal (orphan page)
- 301-es átirányítás
- 404-es hiba
- 403-as hiba (403 Forbidden)
- 500-as hiba (500 Internal Server Error)
- URL (webcím)
- Webes adatkinyerés (web scraping)
- Core Web Vitals
- LCP (Largest Contentful Paint)
- HTTPS / SSL
- Mobiloptimalizálás (mobile optimization)
- Strukturált adat (schema markup)
- Hreflang
- Technikai SEO (technical SEO)