2016-09-08 24 views
8

एयरफ्लो और निफ़ी वर्कफ़्लो पर एक ही काम करते हैं? प्रत्येक के लिए प्रो/कॉन क्या हैं? मुझे कुछ जेसन फाइलें पढ़ने की ज़रूरत है, इसमें अधिक कस्टम मेटाडेटा जोड़ें और इसे संसाधित करने के लिए एक कफका कतार में डालें। मैं निफ़ी में ऐसा करने में सक्षम था। मैं अभी भी एयरफ्लो पर काम कर रहा हूं। मैं अपने प्रोजेक्ट के लिए सबसे अच्छा वर्कफ़्लो इंजन चुनने का प्रयास कर रहा हूं धन्यवाद!एयरबर्न एयरफ्लो बनाम अपाचे निफ़ी

उत्तर

7

वायु प्रवाह और अपाचे NiFi चेकआउट इस reddit पद के एक महान अवलोकन के लिए: https://www.reddit.com/r/bigdata/comments/51mgk6/comparing_airbnb_airflow_and_apache_nifi/

, Json फ़ाइलों के अंतर्ग्रहण उन्हें समृद्ध बनाने और उन्हें काफ्का के लिए मार्ग के अपने विशिष्ट यूज-केस के लिए मेरा मानना ​​है कि NiFi के लिए सही उपकरण है काम। प्रत्येक के लिए प्रोसेसर आप संभावित इस्तेमाल कर सकते हैं, साथ ही दस्तावेज के एक जोड़े, नीचे हैं:

GetFile: https://nifi.apache.org/docs/nifi-docs/components/org.apache.nifi.processors.standard.GetFile/index.html

JoltTransformJSON: https://nifi.apache.org/docs/nifi-docs/components/org.apache.nifi.processors.standard.JoltTransformJSON/index.html

PublishKafka (या PublishKafka_0_10 अपने संस्करण के आधार पर): https://nifi.apache.org/docs/nifi-docs/components/org.apache.nifi.processors.kafka.pubsub.PublishKafka/index.html

संबंधित मुद्दे