SEO-työkalu

Robots.txt-testaaja

Liitä robots.txt-sisältösi ja testaa, onko tietyt URL-polut sallittuja tai estettyjä eri hakukoneiden boteilta.

Välitön testaus

Liitä robots.txt:si ja testaa URL-polkuja heti. Näe tulokset reaaliajassa kirjoittaessasi.

Monipuolinen bottituki

Testaa Googlebotin, Bingbotin ja muiden suosittujen indeksoijien kanssa. Näe tarkalleen, miten kukin botti tulkitsee sääntöjäsi.

100% asiakaspuolella

Kaikki käsittely ja testaus tapahtuu selaimessasi. Robots.txt-sisältösi ei koskaan poistu laitteeltasi.

Ymmärrä Robots.txt

Robots.txt-tiedosto on standardi, jota verkkosivustot käyttävät kommunikoidakseen hakukoneiden indeksoijien ja muiden verkkobottien kanssa. Se kertoo boteille, mitkä osat sivustostasi ovat käytettävissä ja mitkä eivät.

Mikä on robots.txt?

Robots.txt on tavallinen tekstitiedosto, joka sijaitsee verkkosivustosi juuressa (esim. esimerkki.com/robots.txt) ja joka noudattaa Robots Exclusion Protocolia. Se sisältää sääntöjä, jotka kertovat indeksoijille, mitä URL-osoitteita ne voivat käyttää sivustollasi.

Kuinka käyttää tätä työkalua

Liitä robots.txt-sisältösi tekstikenttään (tai hae se verkkotunnuksesta), syötä testattava URL-polku, valitse käyttäjä-agentti ja napsauta 'Testaa URL'. Työkalu kertoo heti, onko polku sallittu tai estetty.

Miksi testata robots.txt:si?

  • Estä tärkeiden sivujen vahingossa estäminen hakukoneista
  • Varmista, että yksityiset tai hallintapaneelin sivut on piilotettu oikein indeksoijilta
  • Vianetsintä indeksointiongelmille ennen kuin ne vaikuttavat hakukonesijoituksiisi
  • Vahvista muutokset ennen tuotantoon siirtymistä

Yksityisyys taattu

Tämä työkalu toimii kokonaan selaimessasi. Robots.txt-sisältösi ja testaus-URL-osoitteesi eivät koskaan siirry palvelimelle. Täydellinen työkalu herkkiä polkuja sisältävien sääntöjen testaamiseen.

Usein kysytyt kysymykset

Miten robots.txt:n vastaavuus toimii?
Robots.txt käyttää polun etuliitteen vastaavuutta. Sääntö kuten 'Estä: /admin/' estää kaikki URL-osoitteet, jotka alkavat '/admin/'. Jokerimerkkiä (*) voidaan käyttää kaavojen vastaavuuteen, ja dollarimerkki ($) sitoo vastaavuuden URL-osoitteen loppuun.
Mikä on etusijalla: Salli vai Estä?
Kun sekä Salli että Estä säännöt vastaavat URL-osoitetta, tarkin (pisin) sääntö voittaa. Jos ne ovat yhtä pitkiä, Salli saa etusijan. Tämä seuraa Googlen standarditulkintaa.
Estääkö robots.txt sivuja indeksoimasta?
Ei, robots.txt vain hallitsee indeksointia, ei indeksointia. Sivua, joka on estetty robots.txt:llä, voidaan silti näyttää hakutuloksissa, jos muut sivut linkittävät siihen. Käytä 'noindex'-meta-tagia estääksesi indeksoinnin.
Mitä tapahtuu, jos robots.txt:tä ei ole?
Jos robots.txt-tiedostoa ei ole, indeksoijat olettavat, että he voivat käyttää kaikkia osia sivustostasi. Tämä on oletuskäyttäytyminen hyvin käyttäytyville boteille.
Voinko testata jokerimerkki sääntöjä?
Kyllä, tämä työkalu tukee jokerimerkki (*) vastaavuutta ja URL-osoitteen loppupäähän sitomista ($) kuten Google ja muut suuret hakukoneet.