Robots.txt 2.0
आप 5 सेकंड में डाउनलोड कर सकेंगे।
करीबन Robots.txt
रोबोट.txt रोबोट अपवर्जन फाइल्स और लॉग एनालाइजर सॉफ्टवेयर के लिए एक दृश्य संपादक है। यह एक उपयोगकर्ता को जल्दी से और आसानी से रोबोट बनाने की अनुमति देता है.txt खोज इंजन मकड़ियों को निर्देश देने के लिए आवश्यक फ़ाइलें, जो वेब साइट के कुछ हिस्सों को सामान्य वेब जनता द्वारा अनुक्रमित और खोज योग्य नहीं बनाया जाता है और फिर मकड़ियों की पहचान करने के लिए, जो उन निर्देशों को नहीं रखते हैं। कार्यक्रम उपयोगकर्ता को अपने एफटीपी या स्थानीय नेटवर्क सर्वर पर लॉग इन करने का एक तरीका प्रदान करता है और फिर उन दस्तावेजों और निर्देशिकाओं का चयन करता है जिन्हें खोजा जा सकता है। इस कार्यक्रम के माध्यम से आप नेत्रहीन उद्योग मानक रोबोट.txt फ़ाइलों को उत्पन्न करने में सक्षम होंगे; दुर्भावनापूर्ण और अवांछित मकड़ियों की पहचान करें और उन्हें अपनी साइट से प्रतिबंधित करें; बहुभाषी साइटों के लिए उपयुक्त पृष्ठों के लिए प्रत्यक्ष खोज इंजन क्रॉलर्स; द्वार पृष्ठ प्रबंधन के लिए रोबोट.txt फ़ाइलों का उपयोग करें; मकड़ियों को अपनी वेब साइट के संवेदनशील और निजी क्षेत्रों से बाहर रखें; सही ढंग से स्वरूपित रोबोट अपलोड करें.txt फ़ाइलों को सीधे अपने एफटीपी सर्वर पर अपलोड करें जो रोबोट.txt संपादक से स्विच नहीं कर रहा है; ट्रैक मकड़ी का दौरा; एचटीएमएल, माइक्रोसॉफ्ट एक्सेल सीएसवी और एक्सएमएल प्रारूपों और अधिक में मकड़ी का दौरा रिपोर्ट बनाएं। मुफ्त कार्यक्रम के अपडेट और समय में अप्रतिबंधित उन्नयन; के साथ काम करने के लिए वेब साइटों की असीमित संख्या