मैं Flume में HTTPSource उपयोग कर रहा हूँ HDFS में JSON सम्मिलित करने के लिए कैसे: {"username":"xyz","password":"123"}
मेरा प्रश्न है: मैं के स्रोत को संशोधित करने के है [{
"headers" : {
है MemChannel और HDFS के साथ कुछ ट्विटर कीवर्ड को संसाधित करने का प्रयास कर रहा हूं। लेकिन flume-ng कंसोल पर HDFS started स्थिति के बाद और प्रगति नहीं दिखा रहा है। यहां /etc/flume-ns/conf/flume-env.sh
मैं अपने आवेदन के लिए Flume एजेंट कॉन्फ़िगर किया गया है, जहां स्रोत Spooldir है और सिंक HDFS है मैं HDFS में फ़ाइलों को इकट्ठा करने में सक्षम हूँ से टाइमस्टैम्प निकालें। एजेंट विन्यास है: agent.source
का उपयोग कर फ़्लम में उपयोग योग्य स्थान समाप्त हो गया है, मैं स्रोत के रूप में स्पूल निर्देशिका के साथ फ्लूम पर काम कर रहा हूं, सिंक के रूप में एचडीएफएस और चैनल के रूप में फ़ाइल। फ्लूम नौकरी निष्पादित
फ़्लम ट्विटर एजेंट का उपयोग करके ट्विटर डेटा स्ट्रीम करके बनाई गई फ़ाइल को पढ़ने और पार्स करने में सक्षम नहीं है, न तो जावा और न ही एरो टूल्स का उपयोग कर। मेरी आवश्यकता है एवरो प्रारूप को जेएसओएन प्रा