mapreduce

35गर्मी

2उत्तर

के बीच अंतर फोर्क/जॉइन और मानचित्र/कमी के बीच महत्वपूर्ण अंतर क्या है? क्या वे विघटन और वितरण (डेटा बनाम गणना) के प्रकार में भिन्न हैं?

33गर्मी

6उत्तर

हडोप एक मानचित्र और एकाधिक

हमारे पास के साथ विश्लेषण करने के लिए एक बड़ा डेटासेट है कार्यों को कम करें। सभी ही नक्शा समारोह द्वारा उत्पन्न एक ही डाटासेट पर एल्गोरिथ्म काम कम। बड़े डेटासेट लागत को हर बार करने के लिए बहुत अधिक पढ

22गर्मी

5उत्तर

जॉबकॉन्फ़

का उपयोग किये बिना हैडोप जॉब चलाएं मुझे एक हैडोप जॉब सबमिट करने का एक उदाहरण नहीं मिल रहा है जो बहिष्कृत JobConf कक्षा का उपयोग नहीं करता है। JobClient, जिसे बहिष्कृत नहीं किया गया है, अभी भी केवल Job

9गर्मी

4उत्तर

हडोप मैपराइडस

का उपयोग करके क्रमबद्ध शब्द गणना गिनती है मै मैड्रिडस के लिए बहुत नया हूं और मैंने एक हडोप शब्द-गणना उदाहरण पूरा किया है। उस उदाहरण में यह शब्द गणनाओं के बिना छोड़े गए फ़ाइल (कुंजी-मूल्य जोड़े के साथ)

9गर्मी

1उत्तर

हाडोप मैपराइडस के साथ परियोजना आइडिया

मैंने कुछ महीने पहले हडोप सीखा और उस पर एक बहुत ही प्रारंभिक प्रोग्रामिंग प्रोजेक्ट करने में कामयाब रहा। मैं एक छोटे से मध्यम आकार की परियोजना या हडोप के साथ छोटे प्रोग्रामिंग असाइनमेंट की श्रृंखला कर

6गर्मी

3उत्तर

मानचित्र फ्रेमवर्क/इंफ्रास्ट्रक्चर को कम करें

मानचित्र कम करना एक ऐसा पैटर्न है जो हाल ही में बहुत सारे कर्षण प्राप्त करता है और मैं इसे अपनी परियोजनाओं में से एक में प्रकट करना शुरू करता हूं जो एक ईवेंट प्रोसेसिंग पाइपलाइन (आईफोन एक्सेलेरोमीटर औ

7गर्मी

1उत्तर

डिस्को/मैपराइडस: पिछले पुनरावृत्ति के परिणामों का उपयोग नए पुनरावृत्ति

पर इनपुट के रूप में वर्तमान में डिस्को पर पेजरैंक लागू कर रहा है। एक पुनरावृत्त एल्गोरिदम के रूप में, एक पुनरावृत्ति के परिणाम अगले पुनरावृत्ति में इनपुट के रूप में उपयोग किए जाते हैं। मेरे पास एक बड़

14गर्मी

3उत्तर

हैडोप का उपयोग करके, क्या मेरे रेड्यूसर एक ही कुंजी के साथ सभी रिकॉर्ड प्राप्त करने की गारंटी रखते हैं?

मैं हाइव का उपयोग कर एक हडोप नौकरी चला रहा हूं वास्तव में uniq कई टेक्स्ट फ़ाइलों में लाइनों को माना जाता है। कम चरण में, यह प्रत्येक कुंजी के लिए सबसे हाल ही में टाइमस्टैम्प रिकॉर्ड चुनता है। क्या है

11गर्मी

5उत्तर

बहुत सारे लॉग फ़ाइलों से बचने के लिए हैडोप लॉगिंग को कॉन्फ़िगर करना

मुझे हैडोप के साथ $ HADOOP_LOG_DIR/userlogs में बहुत अधिक लॉग फ़ाइलों का उत्पादन करने में समस्या है (Ext3 फाइल सिस्टम केवल 32000 उपनिर्देशिका की अनुमति देता है) जो इस प्रश्न में एक ही समस्या की तरह दि

6गर्मी

3उत्तर

एक ही मानचित्र में पाठ की एकाधिक पंक्तियां

मैं एक मैपिंग में एन लाइनों को भेजने के लिए हैडोप का उपयोग करने की कोशिश कर रहा हूं। मुझे लाइनों को पहले ही विभाजित करने की आवश्यकता नहीं है। मैंने NLineInputFormat का उपयोग करने का प्रयास किया है, हा