報錯日志： 解決辦法： 需要把hdfs的配置文件 hdfs-site.xml和core-site.xml配置文件copy到flume/conf/ 目錄下， 另外把需要的hadoop jar包拷貝到flume/lib 目錄下（或者引用環境變量） 需要的相關jar包 ...

這是因為缺少一個hadoop-common包，引入即可： 參考：https://blog.csdn.net/u010429286/article/details/78780145 ...

時調用的jar文件是hadoop-common-2.5.1.jar中的org.apache.hadoop.ut ...

在使用yarn-session模式啟動flink總是說找不到hadoop配置文件， 原因： 1.有可能是沒有配置HADOOP_HOME環境變量，可以 echo $HADOOP_HOME，如果輸出正確說明沒問題，看第二步 2.在flink的lib目錄下缺少了jar包 ...

這是因為pom文件引入的flink相關依賴設置成了provided 作用域 要嘛把這個去掉 但是如果是IDEA的話 可以更簡單的操作 把這個打勾保存 接着重新啟動main方法即可 ...

啟動spark-shell時，報錯如下： 解決方法： 這是由於錯誤的配置導致了hadoop的包和spark的包沖突。 原來是不知道啥時候修改了spark-defaults.conf中的配置。 所以解決方法也是很簡單，刪除這個配置就可以。 ...

1、sparkML的版本不對應 　　請參考官網找到對於版本， 　　比如我的 spark2.3.3 spark MLlib 也是2.3.3 ...

項目里引入了兩個不同的 POI 版本 ，可能是版本沖突引起的。 但是奇怪的是 用Eclipse在本地就失敗，在公共測試 環境就是OK的，同事用的 edea 編譯器也是OK的。 Caused by: java.lang.NoSuchMethodError ...