com.fasterxml.jackson.databind.JsonMappingException: जैक्सन संस्करण बहुत पुराना है 2.5.3

Question

मेरा ओएस ओएस एक्स 10.11.6 है। मैं स्पार्क 2.0, ज़ेप्पेलिन 0.6, स्कैला 2.11

चला रहा हूं जब मैं ज़ेप्पेलिन में यह कोड चलाता हूं तो मुझे जैक्सन से अपवाद मिलता है। जब मैं स्पार्क-खोल में यह कोड चलाता हूं - कोई अपवाद नहीं।

val filestream = ssc.textFileStream("/Users/davidlaxer/first-edition/ch06") 

com.fasterxml.jackson.databind.JsonMappingException: Jackson version is too old 2.5.3 
    at com.fasterxml.jackson.module.scala.JacksonModule$class.setupModule(JacksonModule.scala:56) 
    at com.fasterxml.jackson.module.scala.DefaultScalaModule.setupModule(DefaultScalaModule.scala:19) 
    at com.fasterxml.jackson.databind.ObjectMapper.registerModule(ObjectMapper.java:651) 
    at org.apache.spark.rdd.RDDOperationScope$.<init>(RDDOperationScope.scala:82) 
    at org.apache.spark.rdd.RDDOperationScope$.<clinit>(RDDOperationScope.scala) 
    at org.apache.spark.streaming.StreamingContext.withNamedScope(StreamingContext.scala:273) 
    at org.apache.spark.streaming.StreamingContext.textFileStream(StreamingContext.scala:413) 
    ... 51 elided 

चिंगारी कोर में निर्भरता कम-pom.xml से पता चलता संस्करण 2.6.5

<dependency> 
     <groupId>com.fasterxml.jackson.core</groupId> 
     <artifactId>jackson-databind</artifactId> 
     <version>2.6.5</version> 
     <scope>compile</scope> 
    </dependency> 

Maven का संस्करण है:

David-Laxers-MacBook-Pro:2.5.3 davidlaxer$ mvn -version 
Apache Maven 3.3.9 (bb52d8502b132ec0a5a3f4c09453c07478323dc5; 2015-11-10T08:41:47-08:00) 
Maven home: /opt/local/share/java/maven3 
Java version: 1.8.0_05, vendor: Oracle Corporation 
Java home: /Library/Java/JavaVirtualMachines/jdk1.8.0_05.jdk/Contents/Home/jre 
Default locale: en_US, platform encoding: UTF-8 
OS name: "mac os x", version: "10.11.6", arch: "x86_64", family: "mac" 

जावा का संस्करण है:

David-Laxers-MacBook-Pro:2.5.3 davidlaxer$ java -version 
java version "1.8.0_05" 
Java(TM) SE Runtime Environment (build 1.8.0_05-b13) 
Java HotSpot(TM) 64-Bit Server VM (build 25.5-b02, mixed mode) 

ज़ेपेल्लिन को फोल के साथ बनाया गया था lowing पैरामीटर:

$ mvn clean package -Pspark-2.0 -Phadoop-2.4 -Pyarn -Ppyspark -Psparkr -Pscala-2.11 -DskipTests 

टसेपेल्लिन में और स्पार्क में निर्भरता वृक्ष जनरेट कर रहा है 2.6.5 के रूप में सभी जैक्सन-DataBind संदर्भ दिखाया।

$ mvn dependency:tree -Dverbose 
shows [INFO] +- com.fasterxml.jackson.core:jackson-databind:jar:2.6.5:compile 

मैं ~/.m2/भंडार/com/fasterxml हटाने और पुनर्निर्माण स्पार्क और टसेपेल्लिन की कोशिश की।

David-Laxers-MacBook-Pro:~ davidlaxer$ !e 
echo $PATH 
/Users/davidlaxer/.sdkman/candidates/springboot/current/bin:/Users/davidlaxer/.jenv/shims:/Users/davidlaxer/.jenv/bin:/Developer/NVIDIA/CUDA-6.5/bin:/usr/local/lib/erlang/erts-5.9.1/bin:/users/davidlaxer/anaconda/bin:/users/davidlaxer/anaconda/bin/bin:/opt/local/Library/Frameworks/Python.framework/Versions/2.7/bin:/opt/local/bin:/opt/local/sbin:/usr/local/lib/erlang/erts-5.9.1/bin:/users/davidlaxer/anaconda/bin:/usr/local/bin:/usr/bin:/bin:/usr/sbin:/sbin:/opt/X11/bin:/usr/local/CrossPack-AVR/bin:/usr/local/git/bin:/usr/texbin::/opt/local/bin/scala/bin::/usr/local/hadoop/bin:/usr/local/hadoop/sbin:/Users/davidlaxer/pig-0.13.0-src/bin:/Users/davidlaxer/pig-0.13.0-src/sbin:/Users/davidlaxer/Downloads/apache-maven-3.2.1/bin:/Users/davidlaxer/anaconda/bin/bin::/usr/local/hadoop/bin:/usr/local/hadoop/sbin:/Users/davidlaxer/.rvm/bin:/Library/Frameworks/JRuby.framework/Versions/Current/bin:/usr/local/gradle-source-build/bin:/Users/davidlaxer/bin:/Users/davidlaxer/storm/bin:/usr/bin:/usr/sbin:/Users/davidlaxer/spark/bin:/Library/PostgreSQL/9.4/bin:/usr/local/mysql/bin 

कोई भी विचार क्यों मैं संस्करण 2.5.3 उठा रही है:

यहाँ मेरी $ पथ है?

Answer 1

निम्नलिखित संस्करण के साथ './zeppelin-zengine/target/lib/' और './zeppelin-server/target/lib/' में जैक्सन जार (2.5.x संस्करण) को प्रतिस्थापित करने से समस्या हल हो जाएगी।

जैक्सन-DataBind-2.6.5.jar जैक्सन कोर-2.6.5.jar जैक्सन-एनोटेशन-2.6.5.jar

Answer 2

आप उपयोग कर सकते हैं $ SPARK_HOME/जार/जैक्सन-DataBind-2.6 .5.jar जैक्सन-कोर-2.6.5.जर जैक्सन-एनोटेशन-2.6.5.जर पुराने संस्करण जार ऑफ़र $ ZEPPELIN_HOME/lib