不多说，直接上干货！ 　　最近，开始，进一步学习spark的最新版本。由原来经常使用的spark-1.6.1，现在来使用spark-2.2.0-bin-hadoop2.6.tgz。 前期博客 Spark on YARN模式的安装 ...

找到方法再写 ...

1、今天启动启动spark的spark-shell命令的时候报下面的错误，百度了很多，也没解决问题，最后想着是不是没有启动hadoop集群的问题 ，可是之前启动spark-shell命令是不用启动hadoop集群也是可以启动起来的。今天突然报错了。 2、然后启动hadoop集群 ...

先给出错误的代码 解决方法：给SparkSession.builder一个对应的变量值，这个变量值是spark。 这里的spark不是某个包下面的东西，而是我们SparkSession.builder()对应的变量值，下面是正确的写法 原文出处：import ...

在scala中执行如下代码，报 join 错误！！ scala> val data = itemTotalTime.join(totalTime, "userId") 　　错误日志如下： <console>:29: error: overloaded ...

【问题】 解压spark的tar包后，执行bin/spark-shell，执行val lines=sc.textFile("README.md")时，抛错error: not found: value sc 【解决办法】 这是因为shell启动时没有初始化sparkContext，修改 ...

// 创建conf,spark streaming至少要启动两个线程，一个负责接受数据，一个负责处理数据 ...

解决方法： 修改simple.sbt文件： 切记：中间相连部分两个百分号一定要写上 ...