context: 1996 में ब्रूस्टर कहले, ब्रूस गिलियट के साथ, सभी सार्वजनिक रूप से सुलभ वर्ल्ड वाइड वेब पेज, गोफर पदानुक्रम, नेटनेव्स (यूज़नेट) बुलेटिन बोर्ड सिस्टम, और डाउनलोड करने योग्य सॉफ्टवेयर को क्रॉल करने और डाउनलोड करने के लिए सॉफ्टवेयर विकसित किया गया। इन "क्रॉलर्स" द्वारा एकत्र की गई जानकारी में इंटरनेट पर उपलब्ध सारी जानकारी शामिल नहीं है, क्योंकि अधिकांश डेटा प्रकाशक द्वारा प्रतिबंधित है या उन डेटाबेस में संग्रहीत किया गया है जो सुलभ नहीं हैं। ये "क्रॉलर" उन वेबसाइटों के लिए रोबोट बहिष्करण मानक का भी सम्मान करते हैं जिनके मालिक खोज परिणामों में प्रकट नहीं होते हैं या कैश किए जाते हैं। आंशिक रूप से कैश किए गए वेब साइटों में विसंगतियों को दूर करने के लिए, संग्रह-यह। संगठन को 2005 में इंटरनेट संग्रह द्वारा संस्थानों और सामग्री निर्माताओं को स्वेच्छा से फसल और डिजिटल सामग्री के संग्रह को संरक्षित करने और डिजिटल अभिलेखागार बनाने के साधन के रूप में विकसित किया गया था।।
question: उन कार्यक्रमों के लिए एक शब्द क्या है जो स्वचालित रूप से वेबसाइटों पर जाते हैं और उन्हें जो डेटा मिलते हैं उसे रिकॉर्ड करते हैं?
answer_text: क्रॉलर्स