相信很多同學都想通過閱讀一些框架的源碼，來提高自己的代碼能力，但往往在第一步，搭建環境的時候就碰了壁。 本篇就來介紹下如何在Windows下，將最新版的Spark2.4.3編譯，並導入到IDEA編譯器中。最后通過在IDEA運行Spark自帶的一共Example代碼結尾。 1.搭建Spark源碼 ...

Spark的一些基本情況如下： Spark：一個java web框架 License：Apache License 服務器：Jettry jre版本：8 github地址：https://github.com/perwendel/spark 官方文檔 ...

最近需要將生產環境的spark1.3版本升級到spark1.6(盡管spark2.0已經發布一段時間了，穩定可靠起見，還是選擇了spark1.6)，同時需要基於spark開發一些中間件，因此需要搭建一套windows下的spark的開發環境，方便代碼的編寫和調試。中間遇到了比較多的問題，在此 ...

開發環境總體版本信息如下： 1、linux：centos 6.8，安裝過程參見 http://www.cnblogs.com/zhwyxuhui/p/8983663.html 2、java版本：jdk-8u172-linux-x64.tar.gz 3、hadoop版本 ...

spark依賴配置網址http://mvnrepository.com/1.create new project2.meven，直接next3.輸入group id等4.輸入project name5.可以刪掉main下的java和resources6.右鍵點擊項目，選Add Framework ...

一、安裝jdk jdk版本最好是1.7以上，設置好環境變量，安裝過程，略。 二、安裝Maven 我選擇的Maven版本是3.3.3，安裝過程，略。 編輯Maven安裝目錄conf/settings.xml文件， <!-- 修改Maven 庫存放目錄--> < ...

寫這篇筆記的目的，主要是分享我在Go學習中遇到的坑。讓后面的學習者參考一下有用的經驗。 其中有一些小技巧，對初學者來說，可能會大大節約填坑的時間。 比如如何設置vscode的Go調試器，Go的語法高亮，Go的插件下載加速和跨牆訪問。 如果其他朋友有類似經驗和技術，也不妨分享 ...

qgroundcontrol是一款無人機地面站開源軟件，C++/QT開發 在https://github.com/mavlink/qgroundcontrol上就能找到，選擇穩定版下載最新的是2.6 下載https://github.com/mavlink/qgroundcontrol ...