Εργαλείο SEO

Δοκιμαστής Robots.txt

Επικολλήστε το περιεχόμενο του robots.txt σας και δοκιμάστε αν συγκεκριμένες διαδρομές URL επιτρέπονται ή αποκλείονται για διάφορα ρομπότ αναζήτησης.

Άμεση Δοκιμή

Επικολλήστε το robots.txt σας και δοκιμάστε τις διαδρομές URL άμεσα. Δείτε τα αποτελέσματα σε πραγματικό χρόνο καθώς πληκτρολογείτε.

Υποστήριξη Πολλών Ρομπότ

Δοκιμάστε ενάντια στο Googlebot, Bingbot και άλλα δημοφιλή ρομπότ. Δείτε ακριβώς πώς κάθε ρομπότ ερμηνεύει τους κανόνες σας.

100% Πλευρά Πελάτη

Όλη η ανάλυση και η δοκιμή συμβαίνει στον περιηγητή σας. Το περιεχόμενο του robots.txt σας δεν φεύγει ποτέ από τη συσκευή σας.

Κατανόηση του Robots.txt

Το αρχείο robots.txt είναι ένα πρότυπο που χρησιμοποιείται από ιστοσελίδες για να επικοινωνούν με τα ρομπότ αναζήτησης και άλλα διαδικτυακά ρομπότ. Λέει στα ρομπότ ποιες περιοχές της ιστοσελίδας σας μπορούν και δεν μπορούν να προσπελαστούν.

Τι είναι το robots.txt;

Το robots.txt είναι ένα απλό αρχείο κειμένου που τοποθετείται στη ρίζα της ιστοσελίδας σας (π.χ., example.com/robots.txt) που ακολουθεί το Πρωτόκολλο Αποκλεισμού Ρομπότ. Περιέχει κανόνες που λένε στα ρομπότ ποιες διευθύνσεις URL μπορούν να προσπελάσουν στην ιστοσελίδα σας.

Πώς να Χρησιμοποιήσετε Αυτό το Εργαλείο

Επικολλήστε το περιεχόμενο του robots.txt σας στην περιοχή κειμένου (ή φέρτε το από ένα τομέα), εισάγετε μια διαδρομή URL που θέλετε να δοκιμάσετε, επιλέξτε έναν user-agent και κάντε κλικ στο 'Δοκιμάστε τη Διεύθυνση URL'. Το εργαλείο θα σας πει αμέσως αν η διαδρομή επιτρέπεται ή αποκλείεται.

Γιατί να Δοκιμάσετε το Robots.txt σας;

  • Αποτρέψτε την τυχαία απόκλειση σημαντικών σελίδων από τις μηχανές αναζήτησης
  • Εξασφαλίστε ότι οι ιδιωτικές ή οι σελίδες διαχείρισης είναι σωστά κρυμμένες από τα ρομπότ
  • Αποσφαλματώστε προβλήματα προσπέλασης πριν επηρεάσουν τις κατατάξεις σας στις αναζητήσεις
  • Επικυρώστε τις αλλαγές πριν τις αναπτύξετε στην παραγωγή

Εγγυημένη Ιδιωτικότητα

Αυτό το εργαλείο λειτουργεί εξ ολοκλήρου στον περιηγητή σας. Το περιεχόμενο του robots.txt σας και οι διευθύνσεις URL δοκιμής δεν αποστέλλονται ποτέ σε κανέναν διακομιστή. Ιδανικό για τη δοκιμή κανόνων που περιέχουν ευαίσθητες διαδρομές.

Συχνές Ερωτήσεις

Πώς λειτουργεί η αντιστοίχιση του robots.txt;
Το robots.txt χρησιμοποιεί αντιστοίχιση προθέματος διαδρομής. Ένας κανόνας όπως 'Disallow: /admin/' αποκλείει όλες τις διευθύνσεις URL που ξεκινούν με '/admin/'. Ο χαρακτήρας wildcard (*) μπορεί να χρησιμοποιηθεί για την αντιστοίχιση προτύπων, και το σύμβολο δολαρίου ($) αγκυρώνει μια αντιστοίχιση στο τέλος μιας διεύθυνσης URL.
Τι έχει προτεραιότητα: Επιτρέπεται ή Αποκλείεται;
Όταν και οι δύο κανόνες Επιτρέπεται και Αποκλείεται ταιριάζουν σε μια διεύθυνση URL, ο πιο συγκεκριμένος (μακρύτερος) κανόνας κερδίζει. Αν έχουν το ίδιο μήκος, η Επιτρέπεται έχει προτεραιότητα. Αυτό ακολουθεί την τυπική ερμηνεία της Google.
Αποτρέπει το robots.txt τις σελίδες από το να ευρετηριαστούν;
Όχι, το robots.txt ελέγχει μόνο την προσπέλαση, όχι την ευρετηρίαση. Μια σελίδα που αποκλείεται από το robots.txt μπορεί να εμφανιστεί ακόμα στα αποτελέσματα αναζήτησης αν άλλες σελίδες συνδέονται σε αυτήν. Χρησιμοποιήστε την ετικέτα meta 'noindex' για να αποτρέψετε την ευρετηρίαση.
Τι συμβαίνει αν δεν υπάρχει robots.txt;
Αν δεν υπάρχει αρχείο robots.txt, τα ρομπότ υποθέτουν ότι μπορούν να προσπελάσουν όλα τα μέρη της ιστοσελίδας σας. Αυτή είναι η προεπιλεγμένη συμπεριφορά για τα καλά συμπεριφερόμενα ρομπότ.
Μπορώ να δοκιμάσω κανόνες wildcard;
Ναι, αυτό το εργαλείο υποστηρίζει την αντιστοίχιση wildcard (*) και την αγκύρωση στο τέλος της διεύθυνσης URL ($) όπως χρησιμοποιείται από τη Google και άλλες μεγάλες μηχανές αναζήτησης.