1.HDFS的工作機制： HDFS集群分為兩大角色：NameNode、DataNode (Secondary Namenode) NameNode負責管理整個文件系統的元數據 Data ...

1. MapReduce使用 　　MapReduce是Hadoop中的分布式運算編程框架，只要按照其編程規范，只需要編寫少量的業務邏輯代碼即可實現 一個強大的海量數據並發處理程序 2. 運行Ha ...

1.Hdfs shell客戶端命令操作： 1.1.查看命令列表：hadoop fs　 1.1.1.查看文件列表：hadoop fs　-ls / （/：HDFS文件系統的根目錄） ...

案例1：開發shell采集腳本 1.點擊流日志每天都10T，在業務應用服務器上，需要准實時上傳至數據倉庫（Hadoop HDFS）上 2.一般上傳文件都是在凌晨24點操作，由於很多種類的業務數據都 ...