大數據學習——數據流程圖


 

1)         數據采集:定制開發采集程序,或使用開源框架FLUME

2)         數據預處理:定制開發mapreduce程序運行於hadoop集群

3)         數據倉庫技術:基於hadoop之上的Hive

4)         數據導出:基於hadoop的sqoop數據導入導出工具

5)         數據可視化:定制開發web程序或使用kettle等產品

6)         整個過程的流程調度:hadoop生態圈中的oozie工具或其他類似開源產品


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM