相信很多同学都想通过阅读一些框架的源码，来提高自己的代码能力，但往往在第一步，搭建环境的时候就碰了壁。 本篇就来介绍下如何在Windows下，将最新版的Spark2.4.3编译，并导入到IDEA编译器中。最后通过在IDEA运行Spark自带的一共Example代码结尾。 1.搭建Spark源码 ...

Spark的一些基本情况如下： Spark：一个java web框架 License：Apache License 服务器：Jettry jre版本：8 github地址：https://github.com/perwendel/spark 官方文档 ...

最近需要将生产环境的spark1.3版本升级到spark1.6(尽管spark2.0已经发布一段时间了，稳定可靠起见，还是选择了spark1.6)，同时需要基于spark开发一些中间件，因此需要搭建一套windows下的spark的开发环境，方便代码的编写和调试。中间遇到了比较多的问题，在此 ...

开发环境总体版本信息如下： 1、linux：centos 6.8，安装过程参见 http://www.cnblogs.com/zhwyxuhui/p/8983663.html 2、java版本：jdk-8u172-linux-x64.tar.gz 3、hadoop版本 ...

spark依赖配置网址http://mvnrepository.com/1.create new project2.meven，直接next3.输入group id等4.输入project name5.可以删掉main下的java和resources6.右键点击项目，选Add Framework ...

一、安装jdk jdk版本最好是1.7以上，设置好环境变量，安装过程，略。 二、安装Maven 我选择的Maven版本是3.3.3，安装过程，略。 编辑Maven安装目录conf/settings.xml文件， <!-- 修改Maven 库存放目录--> < ...

写这篇笔记的目的，主要是分享我在Go学习中遇到的坑。让后面的学习者参考一下有用的经验。 其中有一些小技巧，对初学者来说，可能会大大节约填坑的时间。 比如如何设置vscode的Go调试器，Go的语法高亮，Go的插件下载加速和跨墙访问。 如果其他朋友有类似经验和技术，也不妨分享 ...

qgroundcontrol是一款无人机地面站开源软件，C++/QT开发 在https://github.com/mavlink/qgroundcontrol上就能找到，选择稳定版下载最新的是2.6 下载https://github.com/mavlink/qgroundcontrol ...