हैडऑप जॉब ट्रैकर

Question

शुरू करने में त्रुटि मैंने विंडोज-सिग्विन का उपयोग करके हडूप में एक साधारण प्रोग्राम चलाने की कोशिश की।

मैं नामनोड शुरू करने में सक्षम हूं।

jobtracker हालांकि शुरू अपवाद के साथ विफल रहता है:

FATAL mapred.JobTracker: java.lang.IllegalArgumentException: Does not contain a valid host:port authority: local 
     at org.apache.hadoop.net.NetUtils.createSocketAddr(NetUtils.java:162) 
     at org.apache.hadoop.net.NetUtils.createSocketAddr(NetUtils.java:128) 
     at org.apache.hadoop.mapred.JobTracker.getAddress(JobTracker.java:2560) 
     at org.apache.hadoop.mapred.JobTracker.<init>(JobTracker.java:2200) 
     at org.apache.hadoop.mapred.JobTracker.<init>(JobTracker.java:2192) 
     at org.apache.hadoop.mapred.JobTracker.<init>(JobTracker.java:2186) 
     at org.apache.hadoop.mapred.JobTracker.startTracker(JobTracker.java:300) 
     at org.apache.hadoop.mapred.JobTracker.startTracker(JobTracker.java:291) 
     at org.apache.hadoop.mapred.JobTracker.main(JobTracker.java:4978) 

मैं इस को हल करने के लिए सभी संभव तरीकों की कोशिश की, लेकिन व्यर्थ। कोई भी पॉइंटर्स मेरी मदद करेगा।

HDFS-site.xml विन्यास:

<configuration><br> 
    <property> 
    <name>fs.default.name< /name> 
    <value>hdfs://localhost:9100</value> 
    </property> 
    <property> 
    <name>mapred.job.tracker< /name> 
    <value>localhost:9101< /value> 
    </property> 
    <property> 
    <name>dfs.replication< /name> 
    <value>1</value> 
    </property> 
</configuration> 

Answer 1

समस्या है निम्नलिखित लाइनों चाहिए पर mapred-site.xml और नहीं HDFS-site.xml, में

<property> 
<name>mapred.job.tracker</name> 
<value>localhost:9101</value> 
</property> 

जिस तरह से आप विंडोज़ में हैडोप चलाने की कोशिश कर रहे हैं? विकास के लिए? आपके पास एक लिनक्स मशीन नहीं है या एक स्थापित करने के लिए अनिच्छुक नहीं है?

एक और बात, आप आमतौर पर इस संपत्ति कोर-site.xml नहीं HDFS-site.xml में जब इस पर के रूप में "वितरित छद्म" उदाहरण पर काम कर रखा है,

<property> 
<name>fs.default.name</name> 
<value>hdfs://localhost:9100</value> 
</property> 

Answer 2

मैं एक ही मुद्दे का सामना करना पड़ा पृष्ठ: http://hadoop.apache.org/docs/r1.1.2/single_node_setup.html#PseudoDistributed

यह पता चला कि हैडऑप बस मेरी conf फ़ाइलों को नहीं उठा रहा था। ऊपर दिए गए लिंक पर दिए गए उदाहरणों का मानना ​​है कि आप अपने हूडियो (i.e. /Usr/jane/hadoop-1.1.2) के इंस्टॉल में चल रहे हैं। मैं उदाहरण को दूसरी निर्देशिका में चलाने की कोशिश कर रहा था। मुझे यकीन है कि आप अन्य 'conf' निर्देशिकाओं को पहचानने के लिए हैडॉप को कॉन्फ़िगर कर सकते हैं, लेकिन मैंने आसान मार्ग लिया और बस मेरी हैडऑप निर्देशिका में चलना शुरू कर दिया। https://issues.apache.org/jira/browse/HDFS-2515