SEO கருவி

Robots.txt சோதகர்

உங்கள் robots.txt உள்ளடக்கத்தை ஒட்டவும் மற்றும் குறிப்பிட்ட URL பாதைகள் வெவ்வேறு தேடல் இயந்திரப் பாட்டுகளுக்கு அனுமதிக்கப்படுகிறதா அல்லது தடைக்கப்படுகிறதா என்பதை சோதிக்கவும்.

உடனடி சோதனை

உங்கள் robots.txt ஐ ஒட்டவும் மற்றும் உடனடியாக URL பாதைகளை சோதிக்கவும். நீங்கள் டைப் செய்யும் போதே முடிவுகளை நேரில் காணவும்.

பல பாட்டுகள் ஆதரவு

Googlebot, Bingbot மற்றும் பிற பிரபலமான குரூலர்களுக்கு எதிராக சோதிக்கவும். ஒவ்வொரு பாட்டும் உங்கள் விதிகளை எவ்வாறு விளக்குகிறது என்பதை சரியாக காணவும்.

100% கிளையன்ட்-பக்கம்

எல்லா பார்சிங் மற்றும் சோதனை உங்கள் உலாவியில் நடைபெறும். உங்கள் robots.txt உள்ளடக்கம் உங்கள் சாதனத்தை விட்டு வெளியே செல்லாது.

Robots.txt ஐ புரிந்து கொள்ளுதல்

robots.txt கோப்பு என்பது தேடல் இயந்திர குரூலர்களுக்கும் பிற வலை ரோபோக்களுக்கு தொடர்பு கொள்ள வலைத்தளங்கள் பயன்படுத்தும் ஒரு தரநிலையாகும். இது உங்கள் தளத்தின் எந்த பகுதிகளை அவர்கள் அணுகலாம் மற்றும் அணுக முடியாது என்பதைக் கூறுகிறது.

robots.txt என்றால் என்ன?

Robots.txt என்பது உங்கள் வலைத்தளத்தின் அடித்தளத்தில் (எ.கா., example.com/robots.txt) வைக்கப்பட்ட ஒரு சாதாரண உரை கோப்பு ஆகும், இது Robots Exclusion Protocol ஐ பின்பற்றுகிறது. இது குரூலர்களுக்கு உங்கள் தளத்தில் எந்த URL களை அணுகலாம் என்பதைக் கூறும் விதிகளை கொண்டுள்ளது.

இந்த கருவியை எப்படி பயன்படுத்துவது

உங்கள் robots.txt உள்ளடக்கத்தை உரை பகுதியில் ஒட்டவும் (அல்லது ஒரு டொமைனில் இருந்து அதை ஏற்றவும்), நீங்கள் சோதிக்க விரும்பும் URL பாதையை உள்ளிடவும், ஒரு பயனர்-ஏஜெண்ட் தேர்ந்தெடுக்கவும், 'URL ஐ சோதிக்கவும்' என்பதைக் கிளிக் செய்யவும். இந்த கருவி உடனடியாக அந்த பாதை அனுமதிக்கப்பட்டது அல்லது தடைக்கப்பட்டதா என்பதை உங்களுக்கு தெரிவிக்கும்.

ஏன் உங்கள் Robots.txt ஐ சோதிக்க வேண்டும்?

  • தேடல் இயந்திரங்களில் முக்கியமான பக்கங்களை தவறுதலாக தடுப்பதைத் தடுக்கும்
  • தனியார் அல்லது நிர்வாக பக்கங்கள் குரூலர்களிடமிருந்து சரியாக மறைக்கப்படுவதை உறுதி செய்யவும்
  • உங்கள் தேடல் தரங்களை பாதிக்கும்முன் குரூல் சிக்கல்களை சரிசெய்யவும்
  • தொகுப்புக்கு முன்பு மாற்றங்களை சரிபார்க்கவும்

தனியுரிமை உறுதி செய்யப்பட்டது

இந்த கருவி முழுமையாக உங்கள் உலாவியில் இயங்குகிறது. உங்கள் robots.txt உள்ளடக்கம் மற்றும் சோதனை URL கள் எந்த சர்வருக்கும் அனுப்பப்படுவதில்லை. உணர்ச்சிமிக்க பாதைகளை உள்ளடக்கிய விதிகளை சோதிக்க சிறந்தது.

அடிக்கடி கேட்கப்படும் கேள்விகள்

robots.txt ஒத்திசைவு எப்படி வேலை செய்கிறது?
Robots.txt பாதை முன்னணி ஒத்திசைவைப் பயன்படுத்துகிறது. 'தடுப்பு: /admin/' என்ற விதி '/admin/' என்றால் தொடங்கும் அனைத்து URL களை தடுக்கும். மாறிலிகள் (*) மாதிரியான ஒத்திசைவைப் பயன்படுத்தலாம், மற்றும் டொலர் சின்னம் ($) URL இன் முடிவுக்கு ஒத்திசைவை அடிப்படையாகக் கொண்டுள்ளது.
அனுமதி அல்லது தடுப்பு எது முன்னுரிமை பெறுகிறது?
அனுமதி மற்றும் தடுப்பு விதிகள் இரண்டும் ஒரு URL ஐ ஒத்திசைவு செய்யும் போது, மிகவும் குறிப்பிட்ட (நீண்ட) விதி வெற்றி பெறுகிறது. அவை ஒரே நீளத்தில் இருந்தால், அனுமதி முன்னுரிமை பெறுகிறது. இது Google இன் தரநிலையை பின்பற்றுகிறது.
robots.txt பக்கங்களை குறியீட்டிடுவதில் தடுக்கும்嗎?
இல்லை, robots.txt குரூலிங்கை மட்டுமே கட்டுப்படுத்துகிறது, குறியீட்டிடுவதில்லை. robots.txt மூலம் தடைக்கப்பட்ட ஒரு பக்கம் பிற பக்கங்கள் அதற்கு இணைக்கப்பட்டால் தேடல் முடிவுகளில் தோன்றலாம். குறியீட்டிடுதலைத் தடுக்கும் 'noindex' மெட்டா குறிச்சொல்லைப் பயன்படுத்தவும்.
robots.txt இல்லை என்றால் என்ன ஆகும்?
robots.txt கோப்பு இல்லை என்றால், குரூலர்கள் உங்கள் தளத்தின் அனைத்து பகுதிகளையும் அணுகலாம் என்று கருதுகிறார்கள். இது நன்றாக நடக்கும் பாட்டுகளுக்கு இயல்பான நடத்தை.
நான் மாறிலி விதிகளை சோதிக்க முடியுமா?
ஆம், இந்த கருவி மாறிலி (*) ஒத்திசைவு மற்றும் URL இன் முடிவில் அடிப்படையாக்கம் ($) ஆகியவற்றை ஆதரிக்கிறது, இது Google மற்றும் பிற முக்கிய தேடல் இயந்திரங்கள் பயன்படுத்துகிறது.