web-crawler पर टैग किए गए जवाब

7
वेब साइट्स को क्रॉल करते समय एक अच्छा नागरिक कैसे बनें?
मैं कुछ कार्यक्षमता विकसित करने जा रहा हूं जो विभिन्न सार्वजनिक वेब साइटों को क्रॉल करेगा और उन पर डेटा को संसाधित / एकत्र करेगा। ई-मेल पतों की तलाश जैसा कुछ भी नहीं है - वास्तव में यह कुछ ऐसा है जो वास्तव में उनकी साइटों पर अतिरिक्त ट्रैफ़िक ला …
हमारी साइट का प्रयोग करके, आप स्वीकार करते हैं कि आपने हमारी Cookie Policy और निजता नीति को पढ़ और समझा लिया है।
Licensed under cc by-sa 3.0 with attribution required.