हाइव जेडीबीसी कनेक्शन

Question

पूलिंग के लिए सबसे अच्छा अभ्यास क्या है मैं अपने एचडीएफएस डेटा स्टोर के खिलाफ क्वेरी जैसे एसक्यूएल करने के लिए हाइव जेडीबीसी ड्राइवर का उपयोग कर रहा हूं। मैं कनेक्शन पूलिंग को संभालने के लिए c3p0 का उपयोग करने का प्रयास कर रहा हूं। मुझे यकीन नहीं है कि यह सही दृष्टिकोण है क्योंकि हाइव क्वेरी में काफी समय लग सकता है, जिसका मतलब है कि कनेक्शन को लंबे समय तक पूल में वापस नहीं छोड़ा जा रहा है, मैं अधिकतम संख्या के लिए सही सेटिंग संख्या के बारे में सोचने के लिए संघर्ष कर रहा हूं c3p0 विन्यास में कनेक्शन के साथ-साथ।

क्या एचआईवी जेडीबीसी कनेक्शन को पूल करने के लिए कोई सर्वोत्तम अभ्यास है? c3p0? DBCP?

लगभग MAX_POOL_SIZE कैसे? क्या यह आरडीबी के लिए सामान्य सेटिंग से बड़ा होना चाहिए?

Answer 1

ओह महान, तो आपके द्वारा उल्लेख किए गए धागे में सवाल वास्तव में बहुत पहले मुझसे पूछा गया था :) यह देखना दिलचस्प होगा कि आपके उपयोग के मामले में इसका उपयोग कैसे किया जाए।

लेकिन मुझे आपको बताएं कि जब भी आप पूछताछ के आधार पर हाइवॉप नौकरियां लॉन्च करते हैं। इसलिए, यदि आप कई प्रश्नों को निष्पादित करना चाहते हैं, जो मुझे विश्वास है कि आप यहां क्या करना चाहते हैं, तो आपको नौकरी शेड्यूलर का उपयोग करने की आवश्यकता है जो कई नौकरियों को एक साथ चला सकता है। डिफ़ॉल्ट रूप से हडोप पहले-इन-फर्स्ट-आउट (एफआईएफओ) शेड्यूलर का उपयोग करता है, जो कार्य कतार से नौकरियां खींचता है। तो, फेयर शेड्यूलर या क्षमता शेड्यूलर पर स्विच करना चाहते हैं।

मेले शेयर शेड्यूलर के पीछे मूल विचार नौकरियों को संसाधनों को असाइन करना था, जैसे कि समय के साथ, प्रत्येक नौकरी उपलब्ध संसाधनों का बराबर हिस्सा प्राप्त करती है।

क्षमता शेड्यूलर मेले शेड्यूलर के कुछ सिद्धांतों को साझा करता है लेकिन इसमें अलग-अलग अंतर भी हैं। सबसे पहले, बड़े समूहों के लिए क्षमता शेड्यूलिंग परिभाषित की गई थी, जिसमें एकाधिक, स्वतंत्र उपभोक्ता और लक्षित अनुप्रयोग हो सकते हैं। पूल शेड्यूलिंग के बजाय क्षमता शेड्यूलिंग में, कई कतार बनाई जाती हैं, जिनमें प्रत्येक एक कॉन्फ़िगर करने योग्य संख्या के साथ मानचित्र और स्लॉट को कम करता है। प्रत्येक कतार को एक गारंटीकृत क्षमता भी सौंपी जाती है (जहां क्लस्टर की कुल क्षमता प्रत्येक कतार की क्षमता का योग होता है)। दूसरा, एक कतार के भीतर नौकरियों को प्राथमिकता देने की क्षमता। अंत में, कतारों पर सख्त पहुंच नियंत्रण की उपस्थिति है।

Answer 2

किंडा को this thread में उत्तर मिला। मैं इसे आज़माउंगा और देख सकता हूं कि यह कैसा चल रहा है।