क्या वेब क्लाइंट http डेटा डाउनलोड करने का सबसे अच्छा तरीका है?

Question

समस्या: मुझे विभिन्न होस्टों से सैकड़ों छवियों को डाउनलोड करने की आवश्यकता है। प्रत्येक होस्ट में 20-सैकड़ों छवियों के बीच कहीं भी है।

समाधान: new WebClient का उपयोग करके हर बार किसी छवि को WebClient's DownloadData विधि के माध्यम से डाउनलोड करने की आवश्यकता होती है।

या ओपन सॉकेट कनेक्शन का पूल रखने और निचले स्तर के कॉल का उपयोग करके http अनुरोध करने के लिए बेहतर होगा?

क्या टीसीपी कनेक्शन खोलना/बंद करना महंगा है (मुझे लगता है कि वेब क्लाइंट क्या करता है), ताकि पूल का उपयोग करके अधिक कुशल लगता है?

Answer 1

मेरा मानना ​​है कि अंतर्निहित बुनियादी ढांचा WebClient उपयोग पहले से ही HTTP कनेक्शन पूल करेगा, इसलिए ऐसा करने की कोई आवश्यकता नहीं है। आप कुछ नमूना यूआरएल के साथ, निश्चित रूप से Wireshark जैसे कुछ का उपयोग करना जांच सकते हैं।

मूल रूप से, मैं इसे अन्य प्रोग्रामिंग कार्यों के साथ समान दृष्टिकोण लेता हूं - कोड को सबसे सरल तरीके से लिखें, और फिर जांचें कि यह आपकी आवश्यकताओं के लिए पर्याप्त प्रदर्शन करता है या नहीं। यदि ऐसा होता है, तो आप कर चुके हैं। यदि ऐसा नहीं होता है, तो क्यों काम करने के लिए उचित उपकरण (नेटवर्क विश्लेषक आदि) का उपयोग करें यह पर्याप्त प्रदर्शन नहीं कर रहा है, और समस्या को ठीक करने पर केवल अधिक जटिल कोड का उपयोग करें।

मेरा अनुभव यह है कि WebClient ठीक है अगर आपको इसकी आवश्यकता नहीं है - लेकिन यह आपको WebRequest के रूप में काफी बढ़िया नियंत्रण नहीं देता है। यदि आपको पर की आवश्यकता नहीं है, तो WebClient पर जाएं।

Answer 2

मैं HttpWebRequest और HttpWebResponse का उपयोग किसी भी चीज़ को स्क्रैप करने के लिए करता हूं। बेशक, आवश्यकता के लिए सेवाएं उपलब्ध नहीं हैं, लेकिन फिर भी, कभी-कभी सीमाएं (व्यापार सीमाएं) होती हैं और मैं अक्सर शुद्ध http अनुरोध से एचटीएमएल खोदना पसंद करता हूं। कभी-कभी डेवलपर की तरह महसूस करें, आपको पता है ...