स्पार्क में hbase को कैसे कॉन्फ़िगर करें?

Question

स्पार्क को hbase से जोड़ने के लिए क्या कदम हैं?

मेरे पास दोनों के लिए मास्टर पते हैं। क्या मैं सिर्फ स्पार्क क्लासपाथ में hbase पता जोड़ता हूं?

Answer 1

HBase के साथ स्पार्क जोड़ने उपयोगी होना चाहिए के बारे में इस पोस्ट: http://www.vidyasource.com/blog/Programming/Scala/Java/Data/Hadoop/Analytics/2014/01/25/lighting-a-spark-with-hbase

Do I just add the hbase address into spark classpath?

नहीं। असल में, आप चिंगारी classpath में HBase कॉन्फ़िगरेशन फ़ाइलें रखना चाहिए। यदि नहीं, तो आपको उन्हें अपने कोड में सेट करना चाहिए, जैसे:

Configuration hConf = HBaseConfiguration.create(conf); 
    hConf.set("hbase.zookeeper.quorum", "PDHadoop1.corp.CompanyName.com,PDHadoop2.corp.CompanyName.com"); 
    hConf.setInt("hbase.zookeeper.property.clientPort", 10000);