2010-03-11 11 views
9

अपाचे सुअर से SequenceFile लिए डेटा संग्रहीत Piggybank SequenceFileLoader का उपयोग कर Hadoop अनुक्रम फ़ाइलों से डेटा लोड कर सकते हैं वहाँ वहाँ है कि सुअर से हडोप अनुक्रम फाइलों को लिखने की अनुमति होगी?अपाचे सुअर

उत्तर

2

ऐसा करने के लिए स्टोरफंक को लागू करने का एक मामला है।

यह अब संभव है, हालांकि एक बार पिग 0.7 बाहर आने के बाद यह थोड़ा आसान हो जाएगा, क्योंकि इसमें लोड/स्टोर इंटरफेस का एक पूर्ण रीडिज़ाइन शामिल है।

"Hadoop विस्तारित पैक" ट्विटर के बारे में स्रोत खोलने के लिए है मुक्त-स्रोत github में, शामिल Google प्रोटोकॉल बफ़र (समान के लिए इनपुट/आउटपुट स्वरूप पर इमारत के आधार पर लोड और स्टोर funcs पैदा करने के लिए कोड - आप पहले से ही स्पष्ट रूप से अनुक्रम फ़ाइलों के लिए उनको है)। अगर आपको कुछ कम छोटी चीजें करने के उदाहरणों की आवश्यकता है तो इसे देखें। यद्यपि यह काफी सरल होना चाहिए।