स्क्वाप निर्यात

Question

में ऑटोइनक्रिएशन-आईडी का उपयोग कैसे करें मेरे पास एचडीएफएस में एक टैब से अलग टेक्स्टफाइल है, और इसे एक MySQL तालिका में निर्यात करना चाहते हैं।

चूंकि टेक्स्टफाइल में पंक्तियों में संख्यात्मक आईडी नहीं हैं, इसलिए मैं SQL INSERT (autoincrement) के दौरान स्वचालित रूप से सेट आईडी के साथ एक तालिका में निर्यात कैसे करूं?

अगर मैं (आईडी तालिका में आखिरी परिभाषित विशेषता जा रहा है) निर्यात करने की कोशिश, मैं

java.util.NoSuchElementException 
    at java.util.AbstractList$Itr.next(AbstractList.java:350) 
    at entity.__loadFromFields(entity.java:996) 

मिलता है मैं स्वत: जनरेट की कक्षा लेने के लिए और इसे संशोधित आईडी-विशेषता बाहर करने के लिए, मैं

मिल

java.io.IOException: java.sql.SQLException: No value specified for parameter 27 

जहां पैरामीटर 27 'आईडी' है।

संस्करण Sqoop 1.3.0-cdh3u3 है

Answer 1

I n Sqoop 1.4.1, एक "शून्य" लिखना पाठ फ़ाइल फ़ील्ड स्थिति में ऑटोइनक्रिकमेंट फ़ील्ड के अनुरूप मेरे लिए काम करता है। MySQL पर निर्यात करने के बाद आप एक वृद्धिशील और स्वचालित रूप से हस्ताक्षरित आईडी देखेंगे।

Answer 2

Sqoop मेलिंग सूची पर किसी के रूप में सुझाव दिया:

• इस तालिका
• कॉपी में
• Sqoop निर्यात आईडी के बिना एक अस्थायी तालिका बनाएं अंतिम तालिका में इस तालिका की पंक्तियां (जिसमें ऑटोइनक्रिकमेंट आईडी है)

Answer 3

मेरा स्रोत तालिका HIVE में है। मेरे लिए क्या काम करता है कि मैं आईडी int नामक कॉलम जोड़ता हूं, और स्तंभ को न्यूल के रूप में पॉप्युलेट करता हूं। Sqoop के बाद, mysql डालने (आईडी, एक्स, वाई) मान (शून्य, "x_value," y_value ") प्राप्त करेगा। फिर mysql आईडी को स्वत: वृद्धि के रूप में पॉप्युलेट करना जानता है।