Prejsť na obsah

robots.txt pre obchod: čo zatvárať a čo nie

LightSEO · Technické SEO

robots.txt pre obchod: čo zatvárať a čo nie

Jeden riadok v robots.txt môže zatvoriť celý web pred indexáciou. A stáva sa to pravidelne – najmä po presune z testovacieho servera na ostrý.

1
súbor v koreňovom adresári
5
typických sekcií na zatvorenie
0
zatvorených užitočných stránok

Čo to je

Ako funguje robots.txt

Je to odporúčanie, nie zákaz. Súbor hovorí robotom, kam nechodiť. Stránka zatvorená v robots sa však môže dostať do indexu cez odkaz.
Neskrýva stránku pred ľuďmi. Robots.txt je dostupný každému na adrese webu – neukrývajte v ňom servisné cesty.
Na spoľahlivé zatvorenie treba noindex. Alebo zákaz na úrovni servera, ak stránka naozaj nemá byť verejná.

Zatvárať

Čo zvyčajne nepatrí do indexu

🛒

Košík a dokončenie objednávky

Osobné stránky bez hodnoty pre vyhľadávanie.

👤

Osobný účet

Všetko, čo je za prihlásením.

🔎

Výsledky vyhľadávania na webe

Generujú nekonečné množstvo adries.

⚙️

Servisné sekcie

Administrácia, systémové súbory, testovacie stránky.

Chyby

Najčastejšie zlyhania

Zákaz celého webu po vývoji. Riadok, ktorý zatvára celý web, zabudli odstrániť po presune na ostrú doménu.
Zatvorené štýly a skripty. Vyhľadávač nedokáže stránku vykresliť a vidí ju rozbitú.
Pokus zatvoriť duplicity cez robots. Nefunguje to: na duplicity treba canonical alebo noindex.
Nie ste si istí, čo máte v robots.txt?

Skontrolujeme súbor a nastavenia indexácie – ukážeme, čo je zatvorené zbytočne a čo naopak stojí za zatvorenie.