大數據架構-東方國信


mark:


  • 新方向:原來我們講的 Iaas/Paas/Saas 三層平台,未來運營商的大數據平台將向更深層次方向演進,如:Paas ( T-Paas、D-Paas)
  • mark架構中的新技術:kudu、Ceph、OGG(Oralce GoldenGate)、RHadoop、TiDB
  • mark自主研發XCloud框架:分布式執行計划引擎、分布式調度引擎、查詢引擎、集群狀態管理服務
  • 借簽東方國信的hadoop發行版: HBase讀寫優化 + 二級索引、BEH-Manager 集 cluster 管理監控、權限控制、開發工具包於一體
  • 決策應用 : SparkR/RHadoop計算
  • 大數據資產管理:實現數據全生命周期端到端的透明經管控,實現“數據模型標准化、數據關系脈絡化、數據加工可視化、數據質量度量化、數據服務自動化”,全業務流的實時監控
  • 智能預警引擎設計思路: 基於Hadoop/Spark,重點關注向導式數據建模,支撐拖拉模式下的多種挖掘算法
  • 常規多維分析:向下深鑽
  • 大數據核心技術在平台產品實踐:以大數據核心技術為基礎,面向開發和使用場景,進行二次封裝,持續構建從采集消息、存儲、計算、安全、開放等方面可視化的平台產品及應用工具
  • 實時決策引擎:后台組件集成了storm、spark streaming、kafka、flume、hbase等現階段比較流行並且版本趨於穩定的實時流計算技術組件,通過將數據采集、事件定義、數據處理、事件調度等流程的界面可視化配置管理,可方便的發布實時流場景應用程序,降低使用難度,提高程序開發效率 

     參考: http://www.bonc.com.cn/

運營商的大數據架構:


 

大數據核心技術體系


 

運營商的應用與實踐


 

大數據核心技術在平台產品實踐


 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM