SEO Tööriist

Robots.txt testija

Kopeeri oma robots.txt sisu ja testi, kas konkreetsed URL-teed on lubatud või blokeeritud erinevate otsingumootori robotite jaoks.

Kohene Testimine

Kopeeri oma robots.txt ja testi URL teid kohe. Vaata tulemusi reaalajas, kui kirjutad.

Mitme Roboti Tugi

Testi Googleboti, Bingboti ja teiste populaarsete indekseerijate vastu. Vaata täpselt, kuidas iga robot sinu reegleid tõlgendab.

100% Klient-Poolne

Kõik analüüs ja testimine toimub sinu brauseris. Sinu robots.txt sisu ei lahku kunagi sinu seadmest.

Robots.txt Mõistmine

Robots.txt fail on standard, mida veebisaidid kasutavad, et suhelda otsingumootori indekseerijate ja teiste veebirobotitega. See ütleb robotitele, millised osad sinu saidist on neile ligipääsetavad ja millised mitte.

Mis on robots.txt?

Robots.txt on lihttekstifail, mis asub sinu veebisaidi juures (nt example.com/robots.txt) ja järgib Robotsi Välistamise Protokolli. See sisaldab reegleid, mis ütlevad indekseerijatele, milliseid URL-e nad saavad sinu saidil külastada.

Kuidas Seda Tööriista Kasutada

Kopeeri oma robots.txt sisu tekstiala (või laadi see domeenist), sisesta URL tee, mida soovid testida, vali kasutaja-agent ja kliki 'Testi URL'. Tööriist ütleb kohe, kas tee on lubatud või blokeeritud.

Miks Testida Oma Robots.txt?

  • Kaitsta olulisi lehti juhusliku blokeerimise eest otsingumootoritest
  • Tagada, et privaatseid või admin lehti peidetakse õigesti indekseerijatelt
  • Tõrgete lahendamine enne, kui need mõjutavad sinu otsinguhinnanguid
  • Kinnita muudatused enne tootmisse viimist

Privaatsus Tagatud

See tööriist töötab täielikult sinu brauseris. Sinu robots.txt sisu ja testitud URL-e ei saadeta kunagi ühtegi serverisse. Täiuslik reeglite testimiseks, mis sisaldavad tundlikke teid.

Korduma Kippuvad Küsimused

Kuidas töötab robots.txt sobitamine?
Robots.txt kasutab tee prefiksi sobitamist. Reegel nagu 'Keela: /admin/' blokeerib kõik URL-id, mis algavad '/admin/'. Juhuslik märk (*) saab kasutada mustri sobitamiseks ja dollarimärk ($) kinnitab sobituse URL lõppu.
Mis on prioriteediks: Luba või Keela?
Kui nii Luba kui Keela reeglid sobivad URL-iga, võidab kõige spetsiifilisem (pikem) reegel. Kui need on sama pikkusega, on prioriteet Luba. See järgib Google'i standardset tõlgendust.
Kas robots.txt takistab lehtede indekseerimist?
Ei, robots.txt kontrollib ainult indekseerimist, mitte indekseerimist. Leht, mis on blokeeritud robots.txt poolt, võib siiski ilmuda otsingutulemustes, kui teised lehed viitavad sellele. Kasuta 'noindex' meta silti indekseerimise takistamiseks.
Mis juhtub, kui robots.txt faili ei eksisteeri?
Kui robots.txt faili ei eksisteeri, eeldavad indekseerijad, et nad saavad ligipääsu kõigile sinu saidi osadele. See on hästi käituvate robotite vaikimisi käitumine.
Kas ma saan testida juhuslikke reegleid?
Jah, see tööriist toetab juhuslikku (*) sobitamist ja URL lõpu kinnitamist ($), nagu kasutavad Google ja teised suured otsingumootorid.