大數據時代，海量數據分析就像吃飯一樣，成為了我們每天的工作。為了更好的為公司提供運營決策，各種抖機靈甚至異想天開的想法都會緊跟着接踵而來！業務多變，決定了必須每天修改系統，重新跑數據，這就要求極高的海量數據讀取和存儲速度！ 公司每天增加幾億行的業務日志數據，我們需要從中分析出各種維度的業務畫像 ...

數據存儲和成本管理： 有效的降低存儲資源的消耗，節省存儲成本，是存儲管理孜孜追求的目標； 一般從 4 個方面優化存儲：數據壓縮、數據重分布、存儲治理項優化、生命周期管理； 一、數據壓縮 實際中的數據存儲情況：在其它分布式計算系統中，為了提高 ...

技術特點 數字化和信息化 IT基礎設施 大數據平台 大數據面對的場景 大數據技術棧 大數據平台技術選型 AI平台： AI面對的問題 准則： 關於未來趨勢 廣連接、快反應 雲計算 1.雲計算技術棧 2.多雲架構 ...

摘要：用戶的多場景融合分析的訴求不允許將集群進行拆分，不允許將數據分析業務割裂而導致業務模塊之間失去關聯，故華為開啟了單集群2萬節點規模探索。 7月9日，中國通信院在大數據產業峰會·成果發布會上為通過大數據產品能力評測的產品頒發證書，華為雲FusionInsight MRS以測試項全部滿分 ...

說到處理大數據的工具，普通的開源解決方案（尤其是Apache Hadoop）堪稱中流砥柱。弗雷斯特調研公司的分析師Mike Gualtieri最近預測，在接下來幾年，“100%的大公司”會采用Hadoop。Market Research的一份報告預測，到2011年，Hadoop市場會以58%的年 ...

隨着網絡性能提升，雲端計算架構逐步向存算分離轉變，AWS Aurora 率先在數據庫領域實現了這個轉變，大數據計算領域也迅速朝此方向演化。 存算分離在雲端有明顯優勢，不但可以充分發揮彈性計算的靈活，同時集中的托管存儲可以提供更大的容量和更低的成本，避免了雲端大量自建存儲集群的維護代價 ...

這是一個商業對話中言必稱大數據和AI的時代，用數據爆炸來形容這個時代毫不過分。但面對這么多和雜的數據很多傳統品牌企業失去了方向，束手無策，傳統品牌時代那種高舉高打，有錢就可以任性的時代已經結束，取代的是精准營銷，商業智能等多種形式。 現實很美 ...

線上服務的有效監控和數據收集，一直是后端服務離不開的話題。直播作為一種經典的分布式系統，監控以及數據收集更是必不可少的工作。如何對海量的服務集群有效的監控和保活，又如何抓取集群中的碎片數據中來優化服務？網易雲信音視頻研發工程師將和大家共同探討。 推薦閱讀 視頻私有雲實戰：基於Docker ...