現在大家可以跟我一起來實現Ubuntu 12.04下Hadoop 2.2.0 集群搭建，在這里我使用了兩台服務器，一台作為master即namenode主機，另一台作為slave即datanode主機，增加更多的slave只需重復slave部分的內容即可。 系統版本： master ...

1：Spark1.0.0屬性配置方式 Spark屬性提供了大部分應用程序的控制項，並且可以單獨為每個應用程序進行配置。 在Spark1.0.0提供了3種方式的屬性配置： SparkConf方式 SparkConf方式可以直接將屬性值傳 ...

本文機器學習庫使用的部分代碼來源於spark1.0.0官方文檔。 mllib是spark對機器學習算法和應用的實現庫，包括分類、回歸、聚類、協同過濾、降維等，本文的主要內容為如何使用scala語言創建sbt工程實現機器學習算法，並進行本地和集群的運行。（初學者建議先在RDD交互式模式下按行輸入 ...

在前一篇文章中，我們已經搭建好了Hadoop的群集，接下來，我們就是需要基於這個Hadoop群集，搭建Spark的群集。由於前面已經做了大量的工作，所以接下來搭建Spark會簡單很多。 首先打開三個虛擬機，現在我們需要安裝Scala，因為Spark是基於Scala開發的，所以需要安裝Scala ...

首先注意版本兼容問題！！！本文采用的是Scala 2.11.8 + Hadoop 2.7.5 + Spark 2.2.0 請在下載Spark時務必看清對應的Scala和Hadoop版本！ 一、配置JDK 1. 下載jdk http://www.oracle.com ...

最近在嘗試內部搭建gitlab，wiki這些工具... 我使用的官網的gitlab-ce包一鍵安裝，自己搭建的ubuntu12.04 server服務器. 分配253地址，放在辦公室的小角落。 配置過程中，在mail的配置上花了挺久時間...其實，只要看完下面的所有出現過的關鍵詞 ...

---恢復內容開始--- 1.安裝build-essential。 列出Git相關包（git-core 和 git-doc）所以來的各個安裝包並安裝： 2.上述依賴包安裝完成后，下載git源碼包到適當路徑並解壓縮，然后在解壓縮路徑下進行編輯。 git源碼下載鏈接：http ...

實際操作如下： 准備工作 版本：4.0.2 下載地址：https://redis.io/download 離線版本：（鏈接: https://pan.baidu.com/s/1bpwDtOr ...