विषय
- परिभाषा - वेब क्रॉलर का क्या अर्थ है?
- Microsoft Azure और Microsoft क्लाउड का परिचय | इस गाइड के दौरान, आप जानेंगे कि क्लाउड कंप्यूटिंग क्या है और Microsoft Azure आपको क्लाउड से अपना व्यवसाय चलाने और चलाने में कैसे मदद कर सकता है।
- Techopedia वेब क्रॉलर की व्याख्या करता है
परिभाषा - वेब क्रॉलर का क्या अर्थ है?
वेब क्रॉलर एक इंटरनेट बॉट है जो वेब इंडेक्सिंग में मदद करता है। वे एक वेबसाइट के माध्यम से एक समय में एक पृष्ठ को क्रॉल करते हैं जब तक कि सभी पृष्ठों को अनुक्रमित नहीं किया जाता है। वेब क्रॉलर एक वेबसाइट और उनसे संबंधित लिंक के बारे में जानकारी एकत्र करने में मदद करते हैं, और HTML कोड और हाइपरलिंक को मान्य करने में भी मदद करते हैं।
वेब क्रॉलर को वेब स्पाइडर, ऑटोमैटिक इंडेक्सर या बस क्रॉलर के रूप में भी जाना जाता है।
Microsoft Azure और Microsoft क्लाउड का परिचय | इस गाइड के दौरान, आप जानेंगे कि क्लाउड कंप्यूटिंग क्या है और Microsoft Azure आपको क्लाउड से अपना व्यवसाय चलाने और चलाने में कैसे मदद कर सकता है।
Techopedia वेब क्रॉलर की व्याख्या करता है
वेब क्रॉलर वेबसाइट के URL, मेटा टैग की जानकारी, वेब पेज की सामग्री, वेबपेज में लिंक और उन लिंक से आने वाले गंतव्यों, वेब पेज के शीर्षक और किसी भी अन्य प्रासंगिक जानकारी की जानकारी एकत्र करते हैं। वे उन URL का ट्रैक रखते हैं जो पहले से ही उसी पृष्ठ को डाउनलोड करने से बचने के लिए पहले ही डाउनलोड किए जा चुके हैं। री-विजिट पॉलिसी, चयन नीति, समानांतरकरण नीति और राजनीति नीति जैसी नीतियों का एक संयोजन वेब क्रॉलर के व्यवहार को निर्धारित करता है। वेब क्रॉलर्स के लिए कई चुनौतियां हैं, अर्थात् बड़े और लगातार विकसित हो रहे वर्ल्ड वाइड वेब, कंटेंट चयन ट्रेडऑफ़, सामाजिक दायित्व और प्रतिकूलताओं से निपटना।
वेब क्रॉलर वेब सर्च इंजन और सिस्टम के प्रमुख घटक हैं जो वेब पेजों में दिखते हैं। वे वेब प्रविष्टियों को अनुक्रमित करने में मदद करते हैं और उपयोगकर्ताओं को सूचकांक के खिलाफ प्रश्नों की अनुमति देते हैं और क्वेरी से मेल खाने वाले वेबपेज भी प्रदान करते हैं। वेब क्रॉलर का एक और उपयोग वेब संग्रह में है, जिसमें समय-समय पर संग्रहित और संग्रहीत किए जाने वाले वेबपेजों के बड़े सेट शामिल हैं। वेब क्रॉलर का उपयोग डेटा माइनिंग में भी किया जाता है, जिसमें आँकड़ों और डेटा एनालिटिक्स जैसे विभिन्न गुणों के लिए पृष्ठों का विश्लेषण किया जाता है।