Robots.txt Tester Tool
अपने robots.txt को पेस्ट करें और किसी भी URL का परीक्षण किसी भी क्रॉलर के खिलाफ करें ताकि यह देखा जा सके कि क्या अनुमति दी गई है।
Robots.txt Tester सुविधाएँ
परिनियोजन से पहले अपने क्रॉल नियमों की पुष्टि करें।
यह स्पष्ट रूप से दिखाता है कि कौन सा नियम मेल खाता है और क्या यह अनुमति या अस्वीकृति है।
Test against specific crawlers like Googlebot or the wildcard *.
चुने हुए उपयोगकर्ता-एजेंट के लिए सभी लागू नियमों को एक नज़र में प्रदर्शित करता है।
Robots.txt Tester के बारे में
यह उपकरण आपको किसी भी robots.txt फ़ाइल को पेस्ट करने और यह परीक्षण करने की अनुमति देता है कि यह किसी विशेष क्रॉलर और URL पथ के लिए कैसे व्यवहार करता है। यह नियमों को पार्स करता है, सबसे विशिष्ट मेल ढूंढता है, और आपको बताता है कि क्या पहुँच अनुमति दी गई है या अस्वीकृत।
अक्सर पूछे जाने वाले प्रश्न
क्या यह उपकरण उपयोग के लिए मुफ्त है?
हाँ, यह उपकरण पूरी तरह से मुफ्त है।
कोई खाता या पंजीकरण आवश्यक नहीं है।
आप इसे जितनी बार चाहें उपयोग कर सकते हैं।
क्या मेरा डेटा निजी है?
सभी प्रसंस्करण आपके ब्राउज़र में होता है।
आपकी robots.txt सामग्री कभी भी किसी सर्वर पर नहीं भेजी जाती है।
हम आपके इनपुट को स्टोर, लॉग या साझा नहीं करते हैं।
क्या यह वाइल्डकार्ड का समर्थन करता है?
हाँ। पथ में * वाइल्डकार्ड का समर्थन किया जाता है।
पथ के अंत का $ एंकर भी पहचाना जाता है।
जटिल पैटर्न को नियमित अभिव्यक्ति रूपांतरण का उपयोग करके मेल किया जाता है।
यदि कोई नियम मेल नहीं खाता है तो क्या होगा?
यदि कोई नियम मेल नहीं खाता है, तो URL को डिफ़ॉल्ट रूप से अनुमति दी गई मानी जाती है।
यह मानक robots.txt व्यवहार है।
परीक्षक स्पष्ट रूप से बताएगा जब कोई मेल खाने वाला नियम नहीं मिला।
क्या यह साइटमैप निर्देश का समर्थन करता है?
साइटमैप निर्देश robots.txt सामग्री से पार्स किया जाता है।
यह अनुमति/अस्वीकृति नियमों को प्रभावित नहीं करता है और केवल सूचनात्मक है।
साइटमैप URLs कच्चे नियमों की सूची में दिखाए जाते हैं।
क्या यह मोबाइल पर काम करता है?
हाँ, यह उपकरण पूरी तरह से उत्तरदायी है।
यह फोन, टैबलेट और डेस्कटॉप पर काम करता है।
कोई ऐप डाउनलोड करने की आवश्यकता नहीं है।
कौन से ब्राउज़र समर्थित हैं?
सभी आधुनिक ब्राउज़र समर्थित हैं।
इसमें Chrome, Firefox, Safari और Edge शामिल हैं।
सर्वश्रेष्ठ परिणामों के लिए अपने ब्राउज़र को अपडेट रखें।
क्या मैं एक साथ कई URLs का परीक्षण कर सकता हूँ?
वर्तमान में यह उपकरण एक बार में एक URL का परीक्षण करता है।
इनपुट में URL पथ बदलें और प्रत्येक URL के लिए फिर से परीक्षण करने के लिए Test पर क्लिक करें।
जब आप परीक्षण करते हैं, तो robots.txt सामग्री लोड रहती है।