इसे क्रॉलर क्यों कहा जाता है?

परिचय

क्या आपने कभी सोचा है कि कुछ तकनीकी उपकरणों या उपकरणों को विशिष्ट नाम या शब्द क्यों दिए जाते हैं? उदाहरण के लिए, सर्च इंजन Google को Google या मैसेजिंग प्लेटफ़ॉर्म WhatsApp को WhatsApp के नाम से क्यों जाना जाता है? इसी तरह, वेब क्रॉलर को क्रॉलर क्यों कहा जाता है? इस लेख में, हम इस प्रश्न का उत्तर देंगे - "इसे क्रॉलर क्यों कहा जाता है?" विस्तार से।

क्रॉलर क्या है?

इससे पहले कि हम "क्रॉलर" शब्द के इतिहास में उतरें, आइए पहले समझें कि इसका वास्तव में क्या मतलब है। क्रॉलर, जिसे स्पाइडर या बॉट के रूप में भी जाना जाता है, एक स्वचालित प्रोग्राम है जिसका उपयोग खोज इंजन द्वारा वेब पेजों से जानकारी एकत्र करने के लिए किया जाता है। उपयोगकर्ताओं के लिए एक तेज़ और अधिक कुशल खोज इंजन बनाने के लिए एकत्र किए गए डेटा का विश्लेषण और अनुक्रमण किया जाता है।

खोज इंजन क्रॉलर या स्पाइडर वेब पेजों की सामग्री का विश्लेषण करते हैं और अनुक्रमित करने के लिए नई सामग्री खोजने के लिए पेज पर उपलब्ध हाइपरलिंक का अनुसरण करते हैं। क्रॉलिंग और अनुक्रमण की यह सतत प्रक्रिया यह सुनिश्चित करती है कि खोज इंजन परिणाम पृष्ठ (एसईआरपी) हमेशा अद्यतित रहें और उपयोगकर्ता प्रश्नों के लिए सबसे प्रासंगिक परिणाम प्रदर्शित करें।

"क्रॉलर" शब्द की उत्पत्ति

"क्रॉलर" शब्द का सबसे पहला उपयोग मध्य दशक के मध्य में देखा जा सकता है। उस समय, कुछ खोज इंजन वेब पेजों को क्रॉल करने और उन्हें अनुक्रमित करने के लिए "स्पाइडर" नामक स्वचालित प्रोग्राम का उपयोग करते थे। हालाँकि, वर्ल्ड वाइड वेब पर तेजी से बढ़ती सामग्री को बनाए रखने के लिए एक अधिक कुशल और शक्तिशाली कार्यक्रम की आवश्यकता थी।

1994 में, वाशिंगटन विश्वविद्यालय में ब्रायन पिंकर्टन नामक कंप्यूटर विज्ञान के एक छात्र ने वेबक्रॉलर नामक एक कार्यक्रम विकसित किया। यह दुनिया का पहला पूर्ण-पाठ वेब खोज इंजन था जो केवल मेटाडेटा या कीवर्ड के बजाय किसी वेब पेज की संपूर्ण सामग्री को अनुक्रमित करता था। प्रोग्राम को उचित रूप से "क्रॉलर" नाम दिया गया था क्योंकि यह हाइपरलिंक्स का अनुसरण करके वेब पेजों के माध्यम से क्रॉल करता था।

वेबक्रॉलर ने तेजी से लोकप्रियता हासिल की और लाइकोस, अल्टाविस्टा और याहू जैसे कई अन्य क्रॉलर और खोज इंजनों के विकास को प्रेरित किया! समय के साथ, "क्रॉलर" वेब पृष्ठों के माध्यम से क्रॉल करने वाले वेब रोबोटों को संदर्भित करने के लिए उपयोग किया जाने वाला मानक शब्द बन गया।

क्रॉलर के प्रकार

वेब क्रॉलर को मोटे तौर पर तीन श्रेणियों में वर्गीकृत किया जा सकता है - सामान्य-उद्देश्य, विशिष्ट और वास्तविक समय। आइए उनमें से प्रत्येक पर करीब से नज़र डालें।

- सामान्य प्रयोजन क्रॉलर: ये खोज इंजनों द्वारा उपयोग किए जाने वाले सबसे सामान्य प्रकार के वेब क्रॉलर हैं। वे वेबसाइटों के माध्यम से क्रॉल करते हैं और उपयोगकर्ताओं को प्रासंगिक खोज परिणाम प्रदान करने के लिए सामग्री को अनुक्रमित करते हैं। सामान्य प्रयोजन वाले क्रॉलर के उदाहरणों में Googlebot, Bingbot और Yandexbot शामिल हैं।

- विशिष्ट क्रॉलर: ये क्रॉलर वेबसाइटों से विशिष्ट जानकारी एकत्र करने के लिए डिज़ाइन किए गए हैं और मुख्य रूप से अनुसंधान और डेटा खनन में उपयोग किए जाते हैं। उदाहरण के लिए, एक विशेष क्रॉलर का उपयोग ऑनलाइन खुदरा विक्रेताओं द्वारा बेचे जाने वाले उत्पादों की कीमतों पर डेटा एकत्र करने या समय के साथ वेबसाइटों पर किए गए परिवर्तनों को ट्रैक करने के लिए किया जा सकता है।

- रीयल-टाइम क्रॉलर: ये क्रॉलर अपडेट और सामग्री में बदलाव के लिए वेबसाइटों की लगातार निगरानी करते हैं, और वास्तविक समय में परिवर्तनों को अनुक्रमित करते हैं। इनका उपयोग मुख्य रूप से समाचार और मीडिया उद्योग में पाठकों को नवीनतम समाचार लेख प्रदान करने के लिए किया जाता है।

निष्कर्ष

निष्कर्षतः, शब्द "क्रॉलर" की उत्पत्ति प्रोग्राम वेबक्रॉलर से हुई है, जिसे 1994 में ब्रायन पिंकर्टन द्वारा विकसित किया गया था। यह शब्द वेब पेजों के माध्यम से क्रॉल करने और खोज इंजन इंडेक्स बनाने के लिए जानकारी एकत्र करने की प्रोग्राम की क्षमता को संदर्भित करता है। समय के साथ, यह सभी प्रकार के वेब क्रॉलर को संदर्भित करने के लिए उपयोग किया जाने वाला मानक शब्द बन गया। आज, हजारों क्रॉलर या स्पाइडर वेब पर क्रॉल कर रहे हैं, सामग्री को अनुक्रमित कर रहे हैं, और दुनिया भर में खोज इंजन उपयोगकर्ताओं को परिणाम प्रदान कर रहे हैं।