Crawl budget e-shopu: ako zabezpečiť, aby Google prehľadával dôležité produkty

E-shop môže mať kvalitné produkty, dobré ceny, optimalizované popisy aj silnú ponuku. Ak sa však Googlebot pravidelne pohybuje po tisícoch filtrov, parametroch, duplicitných URL a technických stránkach namiesto dôležitých produktov, časť SEO potenciálu zostáva nevyužitá.

Pri väčších e-shopoch preto nestačí riešiť iba kľúčové slová, titulky a texty kategórií. Dôležité je aj to, kam Google pri prehľadávaní webu venuje svoju pozornosť.

Práve s tým súvisí crawl budget.

Google crawl budget opisuje ako kombináciu toho, koľko URL dokáže Googlebot na webe prehľadávať a aký veľký záujem o ich prehľadávanie Google má. Problémom môžu byť najmä veľké množstvá URL s nízkou pridanou hodnotou – napríklad filtrová navigácia, session parametre, duplicity alebo nekonečné kombinácie URL.

Pre malý e-shop s niekoľkými desiatkami produktov crawl budget pravdepodobne nebude najväčšou SEO témou. Pri obchode s tisíckami alebo desaťtisícami produktov, filtrami, variantmi a často aktualizovaným sortimentom však môže mať technická efektivita prehľadávania oveľa väčší význam.

Ak chcete riešiť SEO e-shopu komplexne, pozrite si aj našu službu SEO pre e-shopy.

Čo je crawl budget e-shopu?

Predstavme si internetový obchod so 7 000 produktmi.

Na prvý pohľad môže vyzerať, že Google potrebuje spracovať približne 7 000 produktových stránok a niekoľko stoviek kategórií.

V skutočnosti však môže systém vytvárať napríklad:

  • URL podľa farby,
  • URL podľa veľkosti,
  • URL podľa ceny,
  • URL podľa výrobcu,
  • kombinácie viacerých filtrov,
  • URL podľa zoradenia produktov,
  • interné výsledky vyhľadávania,
  • parametre kampaní,
  • varianty produktových URL,
  • stránky stránkovania,
  • URL s identifikátormi používateľov alebo relácií.

Zo 7 000 produktov tak môže technicky vzniknúť niekoľko desiatok alebo stoviek tisíc dostupných URL.

Google pritom upozorňuje, že faceted navigation – teda filtrovanie produktov podľa rôznych vlastností – môže vytvárať prakticky neobmedzené množstvo URL a zbytočne spotrebovávať zdroje crawlera.

Výsledkom môže byť situácia, keď Google pravidelne navštevuje:

/topanky?farba=cierna&velkost=42&cena=50-100&sort=price

ale nový produkt, ktorý chcete dostať do organického vyhľadávania, objaví oveľa neskôr.

Crawl budget nie je iba o počte produktov

Jednou z častých chýb je pozerať sa iba na počet produktov v administrácii e-shopu.

Pre Google nie je rozhodujúce iba to, že máte 10 000 produktov.

Dôležité je, koľko rôznych URL dokáže na vašom webe objaviť.

E-shop môže mať:

  • 5 000 reálnych produktov,
  • 200 kategórií,
  • 100 informačných stránok,

ale crawler môže objaviť 100 000 alebo viac URL.

Problém preto často nevzniká v produktoch samotných, ale v technickej architektúre e-shopu.

Pri SEO audite sa preto nepozeráme iba na to, čo vidí návštevník. Potrebujeme pochopiť aj to, čo dokáže objaviť Googlebot.

1. Najprv určite, ktoré URL majú pre váš biznis hodnotu

Nie všetky stránky e-shopu sú rovnako dôležité.

Typicky majú vysokú prioritu:

  • hlavné produktové kategórie,
  • podkategórie s reálnym vyhľadávaním,
  • produkty s vysokým dopytom,
  • produkty s dobrou maržou,
  • bestsellery,
  • strategické značky,
  • produkty, ktoré chcete podporovať aj cez Google Shopping,
  • evergreen produkty,
  • kvalitný poradenský obsah.

Na druhej strane URL vytvorená iba kombináciou zoradenia „od najlacnejšieho“ a filtra určitej farby môže byť pre organické vyhľadávanie prakticky bez hodnoty.

SEO preto musí vychádzať aj z obchodnej logiky.

Produkt, na ktorom zarábate 40 eur a máte ho dlhodobo skladom, môže byť pre vás dôležitejší ako produkt s veľkou návštevnosťou, ale minimálnou maržou.

Práve preto v ROI index prepájame marketing e-shopov s dátami, SEO, reklamou a reálnou ekonomikou predaja.

2. Dajte pozor na produktové filtre

Filtre patria medzi najväčšie zdroje zbytočných URL v e-shopoch.

Používateľ ich potrebuje.

Google však nemusí potrebovať indexovať každú možnú kombináciu.

Predstavme si kategóriu televízorov s filtrami:

  • výrobca,
  • uhlopriečka,
  • rozlíšenie,
  • technológia,
  • cena,
  • dostupnosť.

Už pri niekoľkých možnostiach v každom filtri môžu vzniknúť tisíce kombinácií.

Ak každá kombinácia vytvorí samostatnú dostupnú URL, crawler získava obrovský priestor, ktorý môže postupne prechádzať.

Google priamo uvádza filtrovanú navigáciu medzi častými zdrojmi veľkého množstva duplicitných alebo málo hodnotných URL.

To však neznamená, že treba automaticky zablokovať všetky filtre.

Niektoré filtrované kombinácie môžu mať samostatný vyhľadávací potenciál.

Napríklad:

pánske bežecké topánky Nike

môžu predstavovať zaujímavú SEO landing page.

Naopak:

pánske bežecké topánky Nike zoradené podľa ceny od najnižšej

pravdepodobne samostatnú indexovanú stránku nepotrebujú.

Rozhodnutie preto musí vychádzať z analýzy vyhľadávania, obsahu a obchodného potenciálu.

3. Nepúšťajte Google do nekonečných kombinácií URL

Veľký problém predstavujú parametre, ktorých hodnoty sa dajú prakticky ľubovoľne kombinovať.

Napríklad:

?sort=price

?sort=name

?view=grid

?view=list

?page=2

?color=red

?color=red&size=l

?color=red&size=l&sort=price

Ak Google nájde odkazy na všetky tieto varianty, môže ich začať prehľadávať.

Google pri návrhu URL pre e-commerce odporúča štruktúru, ktorá umožňuje crawleru efektívne objavovať stránky, a upozorňuje na dynamické URL schopné vytvárať prakticky nekonečný priestor.

Pri veľkom e-shope preto treba rozhodnúť:

Ktoré parametre vytvárajú reálne nový obsah a ktoré iba inú technickú verziu tej istej stránky?

4. Canonical používajte správne – nie ako univerzálne riešenie

rel="canonical" je dôležitý nástroj pri duplicitných alebo veľmi podobných stránkach.

Ak existuje viac URL reprezentujúcich prakticky rovnaký obsah, canonical pomáha Googlu určiť preferovanú verziu stránky. Google tento proces označuje ako canonicalizáciu.

Canonical však nie je magické tlačidlo na crawl budget.

To, že stránka obsahuje canonical smerujúci na inú URL, automaticky neznamená, že ju Google už nikdy nebude prehľadávať.

Preto treba riešiť celý systém:

  • interné odkazy,
  • filtre,
  • parametre,
  • sitemapu,
  • canonical,
  • robots.txt,
  • status kódy,
  • architektúru webu.

Nie iba jednu značku v HTML kóde.

5. Robots.txt používajte na riadenie crawlingu, nie na odstraňovanie stránok z Google

Ďalšou častou chybou je zamieňanie:

crawlingu

a

indexácie.

robots.txt určuje, ku ktorým URL má crawler prístup. Google zároveň upozorňuje, že robots.txt nie je správnym nástrojom na spoľahlivé odstránenie webovej stránky z výsledkov vyhľadávania. URL blokovaná cez robots.txt sa za určitých okolností stále môže objaviť vo výsledkoch.

Robots.txt teda môže byť vhodný napríklad pri niektorých technických URL alebo nekonečných kombináciách filtrov, ak sú pravidlá navrhnuté správne.

Treba však postupovať opatrne.

Nesprávnym pravidlom môžete Googlu zablokovať:

  • dôležité kategórie,
  • produktové stránky,
  • CSS alebo JavaScript potrebný na pochopenie stránky,
  • obsah, ktorý chcete indexovať.

Preto odporúčame úpravy robots.txt vždy kontrolovať v kontexte celého e-shopu.

6. Noindex nie je hlavný nástroj na šetrenie crawl budgetu

Často sa objavuje odporúčanie:

Na všetky nepotrebné stránky nastavte noindex a ušetríte crawl budget.

Takto jednoducho to nefunguje.

Aby Google zistil, že stránka obsahuje noindex, musí ju spravidla najskôr prehľadať.

Google dokonca vo svojej dokumentácii upozorňuje, že noindex nie je vhodný ako primárny nástroj na riadenie crawl budgetu, hoci pri dlhodobom vyradení stránok môže nepriamo ovplyvniť správanie crawlera.

Noindex používajte primárne vtedy, keď nechcete, aby konkrétny obsah zostal indexovaný.

Nie ako univerzálnu opravu technickej architektúry.

7. XML sitemap musí obsahovať hlavne stránky, ktoré chcete indexovať

XML sitemap je jeden zo signálov, ktorým Googlu ukazujete dôležité URL.

Ak však do sitemap posielate:

  • presmerované URL,
  • neexistujúce stránky,
  • noindex stránky,
  • duplicitné parametre,
  • technické filtre,

vytvárate nekonzistentné signály.

Pri e-shope by sitemap mala obsahovať predovšetkým kvalitné indexovateľné URL, napríklad:

  • hlavné kategórie,
  • relevantné podkategórie,
  • aktívne produkty,
  • články,
  • ďalšie SEO landing pages.

Google zároveň upozorňuje, že odoslanie sitemap je iba signálom a samo osebe negarantuje prehľadanie ani indexáciu URL.

Sitemap teda nenahrádza dobré interné prelinkovanie.

8. Dôležité produkty musia byť dostupné cez interné odkazy

Produkt môže byť technicky indexovateľný, ale ak k nemu vedie cesta cez sedem úrovní kategórií, Google mu pravdepodobne nepriraďuje rovnakú prioritu ako produktu prelinkovanému priamo z hlavnej kategórie.

Interné prelinkovanie môže Googlu pomôcť:

  • objaviť nové produkty,
  • pochopiť štruktúru e-shopu,
  • rozpoznať vzťahy medzi kategóriami a produktmi,
  • identifikovať dôležité stránky.

Preto má zmysel pracovať napríklad so sekciami:

Najpredávanejšie produkty

Odporúčame

Novinky

Súvisiace produkty

Najobľúbenejšie produkty kategórie

Podobné produkty

Nesmie však ísť iba o SEO trik.

Prelinkovanie by malo pomáhať predovšetkým zákazníkovi.

9. Pozor na produkty dostupné iba cez JavaScript

Moderné e-shopy často používajú JavaScript na:

  • načítanie ďalších produktov,
  • infinite scroll,
  • filtre,
  • dynamické kategórie,
  • produktové varianty.

To môže byť z používateľského pohľadu výborné.

Crawler však musí mať možnosť produkty spoľahlivo objaviť.

Google pri stránkovaní e-shopov upozorňuje, že crawler objavuje URL predovšetkým prostredníctvom odkazov v href. Tlačidlá typu „Načítať ďalšie“, ktoré vyžadujú používateľskú interakciu, nemusia predstavovať rovnakú cestu k objavovaniu obsahu.

Ak teda máte 500 produktov, ale Google sa prostredníctvom HTML odkazov dostane iba k prvým 24, vzniká problém.

10. Neexistujúce produkty riešte podľa situácie

E-shopy často pracujú s produktmi, ktoré:

  • sú dočasne vypredané,
  • boli vyradené,
  • boli nahradené novým modelom,
  • už nikdy nebudú dostupné.

Každá situácia si vyžaduje iný prístup.

Dočasne vypredaný produkt

Ak sa produkt pravdepodobne vráti do ponuky, často dáva zmysel URL ponechať aktívnu a používateľovi jasne oznámiť dostupnosť.

Produkt bol nahradený

Ak existuje jasný nástupca, môže byť vhodné presmerovanie na nový produkt.

Produkt bol definitívne odstránený

Ak neexistuje relevantná náhrada, správny status 404 alebo 410 môže byť lepším riešením ako presmerovanie všetkých vyradených produktov na hlavnú stránku.

Google upozorňuje aj na problém soft 404 stránok medzi faktormi, ktoré môžu spôsobovať zbytočné crawlingové problémy.

11. Sledujte, či Google venuje pozornosť správnym URL

Technické SEO nemá fungovať podľa pocitu.

Pri väčšom e-shope je vhodné analyzovať napríklad:

  • ktoré URL Googlebot navštevuje,
  • ako často prehľadáva produkty,
  • koľko technických URL vzniká,
  • ktoré stránky zostávajú dlhšie neindexované,
  • či crawler trávi veľa času na parametroch,
  • či vznikajú opakované duplicity,
  • či sitemap obsahuje správne URL,
  • či dôležité produkty nie sú príliš hlboko v štruktúre webu.

Zmyslom nie je dosiahnuť čo najväčší počet crawlingových požiadaviek.

Cieľom je, aby Google efektívne objavoval a aktualizoval stránky, ktoré majú pre e-shop hodnotu.

12. Crawl budget a SEO musia rešpektovať obchodné priority

Pri optimalizácii e-shopu sa niekedy riešia tisíce technických detailov, ale zabudne sa na jednu jednoduchú otázku:

Ktoré produkty vlastne chceme predávať?

Ak má e-shop 30 000 položiek, pravdepodobne nie sú všetky rovnako hodnotné.

Môžete mať produkty:

  • s vysokou maržou,
  • s vysokou konverznosťou,
  • strategické pre získanie nového zákazníka,
  • s opakovaným nákupom,
  • sezónne,
  • s vysokým vyhľadávaním,
  • produkty dôležité pre značku.

Tieto dáta by mali ovplyvňovať nielen Google Ads a Shopping, ale aj SEO stratégiu.

Rovnaký princíp používame pri Google Ads pre e-shopy, kde samotný obrat nemusí byť najdôležitejším údajom. Podstatná je aj marža a reálna návratnosť marketingu.

Crawl budget pri Shoptet, WooCommerce a Shopify e-shopoch

Každá e-commerce platforma má svoje špecifiká.

Pri Shoptete môžu byť dôležité kategórie, filtre, parametre a spôsob práce s produktovými stránkami. Viac o marketingu tejto platformy nájdete na stránke marketing pre Shoptet e-shopy.

Pri WordPresse a WooCommerce závisí veľká časť technického SEO aj od témy, pluginov a konfigurácie. Pozrite si marketing pre WooCommerce e-shopy.

Shopify má vlastnú URL štruktúru a technické špecifiká, s ktorými treba pri SEO počítať. Viac nájdete na stránke marketing pre Shopify e-shopy.

Neexistuje preto jeden robots.txt alebo jedno pravidlo, ktoré je správne pre každý internetový obchod.

Crawl budget ovplyvňuje aj rýchlosť práce s novým sortimentom

Predstavte si e-shop, ktorý každý týždeň pridáva stovky produktov.

Ak je technická architektúra čistá, Google môže nové produkty objavovať efektívnejšie.

Ak však medzi nimi existujú desaťtisíce:

  • filtrov,
  • parametrov,
  • duplicitných stránok,
  • nepotrebných URL,

crawler má oveľa väčší priestor, ktorý musí vyhodnocovať.

Pre rýchlo sa meniace e-shopy preto nie je technické SEO jednorazová úloha.

Treba ho kontrolovať priebežne.

Crawl budget, Google a AI Visibility

Technicky dobre dostupný web nie je dôležitý iba pre klasické organické výsledky.

Google vo svojich aktuálnych odporúčaniach pre generatívne AI funkcie uvádza, že obsah musí byť dostupný na crawling, aby mohol byť použitý v systémoch vyhľadávania využívajúcich generatívnu AI. Pri veľmi veľkých a často aktualizovaných weboch Google priamo odporúča venovať pozornosť crawl budgetu.

Pre e-shop je preto čoraz rozumnejšie spájať:

technické SEO + obsah + produktové dáta + interné prelinkovanie + AI Visibility.

Viac o tejto téme nájdete v článku Optimalizácia webových stránok pre AI alebo v našom pohľade na to, ako ROI index prepája Google Ads, SEO a AI Visibility.

Najčastejšie chyby crawl budgetu pri e-shopoch

Pri technických auditoch e-shopov má zmysel preveriť najmä:

  1. tisíce indexovateľných filtrov bez vyhľadávacieho potenciálu,
  2. duplicity produktových URL,
  3. parametre zoradenia a zobrazenia,
  4. nekonečné kombinácie filtrov,
  5. interné vyhľadávanie dostupné crawlerom,
  6. chybné canonical značky,
  7. noindex na dôležitých stránkach,
  8. blokovanie dôležitého obsahu v robots.txt,
  9. sitemap obsahujúcu zlé alebo neindexovateľné URL,
  10. produkty dostupné iba cez JavaScript,
  11. nekonečné stránkovanie,
  12. soft 404 stránky,
  13. vyradené produkty bez jasnej stratégie,
  14. slabé interné prelinkovanie,
  15. dôležité produkty príliš hlboko v architektúre webu.

Jedna chyba nemusí byť problém.

Keď sa ich však skombinuje päť alebo desať, Google môže dostať veľmi nejasný obraz o tom, ktoré stránky e-shopu sú skutočne dôležité.

Ako by mal vyzerať technicky zdravý e-shop?

Ideálnym cieľom nie je mať čo najmenej URL.

Cieľom je mať správne URL.

Google by mal jednoducho objaviť:

kategória → podkategória → produkt

a nemal by sa strácať medzi tisíckami technických variantov tej istej stránky.

Dôležité kategórie by mali byť dobre interne prelinkované.

Dôležité produkty by mali byť dostupné prostredníctvom klasických odkazov.

XML sitemap by mala obsahovať indexovateľné URL.

Duplicitné verzie by mali mať jasne vyriešenú canonicalizáciu.

Filtre by mali mať SEO význam iba tam, kde existuje dôvod vytvárať samostatnú landing page.

Takýto systém pomáha nielen crawlerom, ale často vytvára aj prehľadnejší web pre zákazníka.

Neviete, či Google prehľadáva správne stránky vášho e-shopu?

Pri väčšom e-shope môže byť rozdiel medzi dobre a zle nastavenou technickou architektúrou obrovský.

Nestačí mať kvalitný produktový feed a spustenú reklamu.

Ak chcete dlhodobo získavať návštevnosť aj z organického vyhľadávania, Google musí vedieť:

  • ktoré produkty sú dôležité,
  • ktoré stránky má indexovať,
  • ktoré URL sú iba technické varianty,
  • ako spolu produkty a kategórie súvisia.

V ROI index sa na e-shop nepozeráme iba cez jednu disciplínu. Prepájame SEO, technickú optimalizáciu, Google Ads, produktové dáta, analytiku a AI Visibility s cieľom získavať merateľné obchodné výsledky.

Ak máte stovky alebo tisíce produktov a neviete, či Google využíva svoj crawling na správnych miestach, pozrite si službu SEO pre e-shopy alebo marketing pre e-shopy.

Dôležité nie je, aby Google prehľadal čo najviac URL. Dôležité je, aby čo najlepšie našiel, pochopil a pravidelne aktualizoval tie stránky, ktoré dokážu vášmu e-shopu priniesť zákazníkov a objednávky.

Miloš Vargic
Miloš Vargic
V marketingu sa pohybujem viac ako 22 rokov. Som zakladateľ agentúry ROI index a špecializujeme sa na výkonnostný marketing, ktorý firmám reálne prináša výsledky. Pomáhame značkám rásť vďaka efektívnej reklame na Google, Bingu a Facebooku, výkonnému SEO a GEO, precízne nastaveným marketingovým stratégiám pre B2B aj B2C segment. Pracoval som ako marketingový riaditeľ a spúšťal som reklamy v 23 krajinách a 14 jazykoch, kde sme dosahovali vysokú návratnosť investícií z rozpočtov nad 14 300 € mesačne.