java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object;)


spark提交自己編寫的jar的時候如果出現如上的錯誤,多半是你項目中使用的spark相關jar的版本和你提交到的spark的版本不匹配,如下:

 

項目pom.xml導入的spark-core版本號如下:

<dependency>
    <groupId>org.apache.spark</groupId>
    <artifactId>spark-core_2.12</artifactId>
    <version>2.4.5</version>
</dependency>

 

但是你spark集群的版本又是2.11的,項目中使用的jar的版本一定要和spark目錄下面的jars里面的版本一致才行


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM