रोबोट । txt का उपयोग रोबोट अपवर्जन मानक के भाग के रूप में किया जाता है, एक स्वैच्छिक प्रोटोकॉल इंटरनेट संग्रह का सम्मान करता है कि शिकायतों बॉट को अनुक्रमण के कुछ पृष्ठों के द्वारा चित्रित किया गया है । एक परिणाम के रूप में, इंटरनेट संग्रह ने कई वेब साइटों को अनुपलब्ध कर दिया है जो अब वेबैक मशीन के माध्यम से दुर्गम हैं । वर्तमान में, इंटरनेट संग्रह रोबोट लागू करता है । txt नियम प्रतिक्रिया देते हैं; अगर एक साइट इंटरनेट संग्रह को ब्लॉक कर देती है, जैसे हेल्थकेयर अधिवक्ताओं, डोमेन से पहले संग्रहीत पेज को भी उपलब्ध नहीं किया जाता है । अवरुद्ध साइटों के मामलों में, केवल रोबोट । txt फ़ाइल को संग्रहीत किया गया है.
रोबोट अपवर्जन मानक किस प्रकार का प्रोटोकॉल है?
स्वैच्छिक