报错日志： 解决办法： 需要把hdfs的配置文件 hdfs-site.xml和core-site.xml配置文件copy到flume/conf/ 目录下， 另外把需要的hadoop jar包拷贝到flume/lib 目录下（或者引用环境变量） 需要的相关jar包 ...

这是因为缺少一个hadoop-common包，引入即可： 参考：https://blog.csdn.net/u010429286/article/details/78780145 ...

时调用的jar文件是hadoop-common-2.5.1.jar中的org.apache.hadoop.ut ...

在使用yarn-session模式启动flink总是说找不到hadoop配置文件， 原因： 1.有可能是没有配置HADOOP_HOME环境变量，可以 echo $HADOOP_HOME，如果输出正确说明没问题，看第二步 2.在flink的lib目录下缺少了jar包 ...

这是因为pom文件引入的flink相关依赖设置成了provided 作用域 要嘛把这个去掉 但是如果是IDEA的话 可以更简单的操作 把这个打勾保存 接着重新启动main方法即可 ...

启动spark-shell时，报错如下： 解决方法： 这是由于错误的配置导致了hadoop的包和spark的包冲突。 原来是不知道啥时候修改了spark-defaults.conf中的配置。 所以解决方法也是很简单，删除这个配置就可以。 ...

1、sparkML的版本不对应 　　请参考官网找到对于版本， 　　比如我的 spark2.3.3 spark MLlib 也是2.3.3 ...

项目里引入了两个不同的 POI 版本 ，可能是版本冲突引起的。 但是奇怪的是 用Eclipse在本地就失败，在公共测试 环境就是OK的，同事用的 edea 编译器也是OK的。 Caused by: java.lang.NoSuchMethodError ...