SEO Nástroj

Tester robots.txt

Vložte obsah svojho robots.txt a otestujte, či sú konkrétne cesty URL povolené alebo zablokované pre rôzne prehľadávače.

Okamžité testovanie

Vložte svoj robots.txt a okamžite testujte cesty URL. Zobrazte výsledky v reálnom čase, ako píšete.

Podpora viacerých botov

Testujte proti Googlebot, Bingbot a iným populárnym prehľadávačom. Presne vidíte, ako každý bot interpretuje vaše pravidlá.

100% na strane klienta

Všetka analýza a testovanie prebieha vo vašom prehliadači. Obsah vášho robots.txt nikdy neopustí vaše zariadenie.

Pochopenie robots.txt

Súbor robots.txt je štandard používaný webovými stránkami na komunikáciu s prehľadávačmi a inými webovými robotmi. Hovorí botom, ktoré časti vašej stránky môžu a nemôžu navštíviť.

Čo je robots.txt?

Robots.txt je obyčajný textový súbor umiestnený v koreňovej časti vašej webovej stránky (napr. example.com/robots.txt), ktorý dodržiava protokol o vylúčení robotov. Obsahuje pravidlá, ktoré hovoria prehľadávačom, ktoré URL môžu navštíviť na vašej stránke.

Ako používať tento nástroj

Vložte obsah svojho robots.txt do textovej oblasti (alebo ho načítajte z domény), zadajte cestu URL, ktorú chcete testovať, vyberte user-agent a kliknite na 'Otestovať URL'. Nástroj vám okamžite povie, či je cesta povolená alebo zablokovaná.

Prečo testovať svoj robots.txt?

  • Zabráňte náhodnému zablokovaniu dôležitých stránok pred vyhľadávačmi
  • Zabezpečte, aby boli súkromné alebo administratívne stránky správne skryté pred prehľadávačmi
  • Opraviť problémy s prehľadávaním predtým, ako ovplyvnia vaše vyhľadávacie hodnotenie
  • Overte zmeny pred nasadením do produkcie

Zaručené súkromie

Tento nástroj funguje úplne vo vašom prehliadači. Obsah vášho robots.txt a testovacie URL nikdy nie sú odosielané na žiadny server. Ideálne na testovanie pravidiel, ktoré obsahujú citlivé cesty.

Často kladené otázky

Ako funguje zodpovedanie robots.txt?
Robots.txt používa zodpovedanie prefixu cesty. Pravidlo ako 'Disallow: /admin/' zablokuje všetky URL začínajúce na '/admin/'. Divoká karta (*) môže byť použitá na zodpovedanie vzorov a dolárový znak ($) ukotvuje zodpovedanie na konci URL.
Čo má prioritu: Povoliť alebo Zablokovať?
Keď sa na URL zhodujú pravidlá Povoliť aj Zablokovať, vyhráva najšpecifickejšie (najdlhšie) pravidlo. Ak sú rovnakej dĺžky, Povoliť má prioritu. To dodržiava štandardnú interpretáciu Google.
Zabráni robots.txt indexovaniu stránok?
Nie, robots.txt iba kontroluje prehľadávanie, nie indexovanie. Stránka zablokovaná robots.txt sa stále môže objaviť vo výsledkoch vyhľadávania, ak na ňu odkazujú iné stránky. Použite meta tag 'noindex' na zabránenie indexovaniu.
Čo sa stane, ak neexistuje robots.txt?
Ak súbor robots.txt neexistuje, prehľadávače predpokladajú, že môžu pristupovať ku všetkým častiam vašej stránky. Toto je predvolené správanie pre dobre sa správajúce boty.
Môžem testovať pravidlá s divokou kartou?
Áno, tento nástroj podporuje zodpovedanie s divokou kartou (*) a ukotvenie na konci URL ($) tak, ako to používa Google a iné hlavné vyhľadávače.