| संस्करण | 1.0 |
|---|---|
| प्रकाशक | SqrBox |
| जारी मिति | २०१३ मार्च १८ |
| मिति थपियो | २०१३ मार्च १८ |
| ओएस आवश्यकताहरू | Windows |
| आवश्यकताहरु | .NET Framework 3.5 |
| कुल डाउनलोड | २९२ |
| मूल्य | Free |
वर्णन
त्यहाँ एक व्यक्ति वा कम्पनीले वेब क्रलर सफ्टवेयर प्रयोग गर्न चाहने कारणहरूको अनन्त संख्या छ। यस प्रकारको कार्यक्रमले वेब ब्राउज गर्दछ निर्दिष्ट फेसनमा जुन स्वचालित, विधिगत वा व्यवस्थित तरिकामा हुन सक्छ। यदि तपाईं वेब क्रलर सफ्टवेयर शब्दमा नयाँ हुनुहुन्छ भने, सायद तपाईंले स्पाइडर, बट, कमिला, स्वचालित अनुक्रमणिका, रोबोट वा स्कटरहरूको बारेमा सुन्नु भएको छ? तिनीहरू सबै मूलतः एउटै कुरा हुन्!
वेब क्रलर सफ्टवेयरको उद्देश्य
जब तपाइँ वेब क्रलिङ सफ्टवेयरको बारेमा सोच्नुहुन्छ, तपाइँ शायद Google, Bing र Yahoo जस्ता ठूला नाम खोज इन्जिनहरू चित्रण गर्नुहुन्छ। तिनीहरूको बटहरू सामग्री, सान्दर्भिकता र अनुक्रमणिका निर्धारण गर्न वेब पृष्ठहरू मार्फत क्रल गर्छन्। भ्रमण गरिएका पृष्ठहरूको प्रतिलिपि सिर्जना गरेर, तिनीहरूले छिटो र अधिक सटीक खोजहरू प्रदान गर्न सक्छन्। SqrBox ले तपाइँलाई वेब क्रलर सफ्टवेयरको आवश्यकताको लागि तपाइँ निश्चित रूपमा खोज इन्जिन हुन आवश्यक छैन भनेर बताउनेछ। तपाई केवल त्यस्तो व्यक्ति हुनुपर्दछ जसलाई ठूलो मात्रा वा अत्यन्त जटिल जानकारी जम्मा गर्न आवश्यक छ।
वेब क्रलर सफ्टवेयर को प्रकार
यदि तपाइँ SqrBox जस्ता व्यावसायिक कम्पनीका सेवाहरू प्रयोग गर्ने योजना बनाउनुहुन्छ भने, तपाइँ वास्तवमै वेब क्रलर सफ्टवेयरको बारेमा सबै जटिल लिङ्गोसँग चिन्तित हुनु आवश्यक छैन। तैपनि, यसको बारेमा केही कुराहरू बुझ्न उपयोगी छ।
फोकस गरिएको क्रलिङ - यस प्रकारको वेब क्रलर सफ्टवेयरको उद्देश्य समान जानकारी समावेश हुने पृष्ठहरू डाउनलोड गर्नु हो। त्यहाँ प्राय: यस विधिसँग सम्बन्धित केही त्रुटिहरू छन् यद्यपि र क्रलरको वास्तविक प्रदर्शन र परिणाम खोजी भइरहेको त्यो विशिष्ट शीर्षकमा लिङ्कहरू कत्तिको समृद्ध छन् भन्नेमा निर्भर हुन्छ। यस प्रकारको वेब क्रलर सफ्टवेयर प्राय: थप क्रलिङका लागि खोजीहरूलाई कम गर्नको लागि सुरूवात बिन्दुको रूपमा प्रयोग गरिन्छ।
URL सामान्यीकरण - वेब क्रलर सफ्टवेयरले प्रायः URL सामान्यीकरणको केहि स्तरहरू प्रदर्शन गर्दछ जसले समान स्रोतको दोहोरिने क्रलिङलाई एक पटक भन्दा बढी कम गर्न मद्दत गर्दछ।
फलो गरिएका लिङ्कहरू प्रतिबन्धित गर्दै - केही अवस्थामा, वेब क्रलर सफ्टवेयरले निश्चित वेब सामग्रीबाट बच्न र .html पृष्ठहरू मात्र खोज्न चाहन्छ। यो गर्नको लागि, URL लाई प्राय: जाँच गरिन्छ र त्यसपछि मात्र स्रोतहरू अनुरोध गरिनेछ यदि URL मा .html, .asp, .htm, .php, .aspx, .jspx वा .jsp जस्ता निश्चित वर्णहरू छन्। वेब क्रलर सफ्टवेयरले सामान्यतया "?" सँग स्रोतहरूलाई बेवास्ता गर्नेछ। माकुरा जालबाट बच्न।
