Eina SEO

Prova de robots.txt

Enganxa el teu contingut robots.txt i prova si rutes d'URL específiques estan permeses o bloquejades per a diferents bots de motors de cerca.

Prova Instantània

Enganxa el teu robots.txt i prova rutes d'URL immediatament. Veure els resultats en temps real mentre escrius.

Suport per a Múltiples Bots

Prova contra Googlebot, Bingbot i altres rastrejadors populars. Veure exactament com cada bot interpreta les teves regles.

100% del costat del client

Tota l'anàlisi i prova es realitza al teu navegador. El contingut del teu robots.txt mai deixa el teu dispositiu.

Entenent Robots.txt

El fitxer robots.txt és un estàndard utilitzat per llocs web per comunicar-se amb rastrejadors de motors de cerca i altres robots web. Indica als bots quines parts del teu lloc poden i no poden accedir.

Què és robots.txt?

Robots.txt és un fitxer de text pla situat a l'arrel del teu lloc web (p. ex., exemple.com/robots.txt) que segueix el Protocol d'Exclusió de Robots. Conté regles que indiquen als rastrejadors quines URLs poden accedir al teu lloc.

Com utilitzar aquesta eina

Enganxa el teu contingut robots.txt a l'àrea de text (o obtén-lo d'un domini), introdueix una ruta URL que vols provar, selecciona un user-agent i fes clic a 'Prova URL'. L'eina et dirà instantàniament si la ruta està permesa o bloquejada.

Per què provar el teu Robots.txt?

  • Prevenir bloquejar accidentalment pàgines importants dels motors de cerca
  • Assegurar que pàgines privades o d'administració estiguin correctament ocultes dels rastrejadors
  • Depurar problemes de rastreig abans que afectin les teves classificacions de cerca
  • Validar canvis abans de desplegar a producció

Privadesa Garantida

Aquesta eina funciona completament al teu navegador. El contingut del teu robots.txt i les URLs de prova mai són enviades a cap servidor. Perfecte per provar regles que contenen rutes sensibles.

Preguntes Freqüents

Com funciona la coincidència de robots.txt?
Robots.txt utilitza coincidència de prefixos de ruta. Una regla com 'Disallow: /admin/' bloqueja totes les URLs que comencen amb '/admin/'. El comodí (*) es pot utilitzar per a coincidències de patrons, i el signe de dòlar ($) ancla una coincidència al final d'una URL.
Què té prioritat: Permetre o Bloquejar?
Quan tant les regles Permetre com Bloquejar coincideixen amb una URL, la regla més específica (la més llarga) guanya. Si tenen la mateixa longitud, Permetre té prioritat. Això segueix la interpretació estàndard de Google.
Robots.txt impedeix que les pàgines siguin indexades?
No, robots.txt només controla el rastreig, no la indexació. Una pàgina bloquejada per robots.txt encara pot aparèixer en els resultats de cerca si altres pàgines enllacen a ella. Utilitza la meta etiqueta 'noindex' per evitar la indexació.
Què passa si no hi ha robots.txt?
Si no existeix cap fitxer robots.txt, els rastrejadors assumeixen que poden accedir a totes les parts del teu lloc. Aquest és el comportament per defecte per a bots ben comportats.
Puc provar regles de comodí?
Sí, aquesta eina suporta coincidències de comodí (*) i anclatge al final de l'URL ($) tal com s'utilitza per Google i altres motors de cerca importants.