原文:騰訊雲 CHDFS — 雲端大數據存算分離的基石

隨着網絡性能提升,雲端計算架構逐步向存算分離轉變,AWS Aurora 率先在數據庫領域實現了這個轉變,大數據計算領域也迅速朝此方向演化。 存算分離在雲端有明顯優勢,不但可以充分發揮彈性計算的靈活,同時集中的托管存儲可以提供更大的容量和更低的成本,避免了雲端大量自建存儲集群的維護代價。 一 問題和挑戰 對象存儲是廣泛使用的雲端非結構化數據存儲解決方案,越來越多的非結構化數據聚集於對象存儲的數據湖中 ...

2020-12-01 20:25 0 552 推薦指數:

查看詳情

統一元數據數據湖Catalog讓大數據分離不再是問題

摘要:為了解決現階段大數據分離痛點問題,華為大數據推出重量級數據湖Catalog服務。 1 背景 隨着5G、IoT等技術的發展,企業積累了越來越多的數據,需要激發更多的數據價值變現。傳統大數據平台從建設到落地的長周期,不利於業務的高速發展;平台建成后,維護、升級、擴容均以集群為單位 ...

Thu Apr 01 18:19:00 CST 2021 0 331
騰訊副總裁劉煜宏:大數據平台力彈性資源池達500萬核,國內最強

9月11日,在2020騰訊全球數字生態大會上,騰訊副總裁劉煜宏透露,騰訊大數據平台的力彈性資源池達500萬核,每日分析任務數達1500萬,每日實時計算次數超過40萬億,能支持超過一萬億維度的數據訓練。騰訊不僅已經成為國內力最強的廠商,同時也是日實時計算量最大的公司。 騰訊 ...

Wed Sep 30 03:00:00 CST 2020 0 421
解讀clickhouse分離在華為實踐

摘要:本文是我們對clickhouse做了最簡單的支持obs的適配改造。 本文分享自華為社區《clickhouse分離在華為實踐》,作者: he lifu。 clickhouse是一款非常優秀的OLAP數據庫系統,2016年剛開源的時候就因為卓越的性能表現得到大家的關注,而近兩年 ...

Tue Oct 12 23:29:00 CST 2021 0 222
華為FusionInsight MRS在金融行業分離的實踐

摘要:華為FusionInsight MRS的大數據分離解決方案,實現資源價值最大化,存儲與計算資源全面化、靈活配置、彈性伸縮,降本增效。 在大數據、雲計算、5G、AI等技術日新月異,數字經濟加速發展的背景下,數據成為新的生產資料,數字化轉型成為政企高速發展的關鍵。作為數字化轉型 ...

Thu Feb 18 18:32:00 CST 2021 0 373
雲端_大數據平台和AI平台以及雲計算

技術特點 數字化和信息化 IT基礎設施 大數據平台 大數據面對的場景 大數據技術棧 大數據平台技術選型 AI平台: AI面對的問題 准則: 關於未來趨勢 廣連接、快反應 雲計算 1.雲計算技術棧 2.多雲架構 ...

Thu Nov 11 00:05:00 CST 2021 0 876
騰訊深度歸檔讓數據從磁帶走向雲端

在數字化轉型浪潮中,如何存儲和利用好數據,是企業面臨的首要問題。相比於傳統互聯網全面擁抱,產業互聯網在數字化轉型過程中,通常第一步是利用存儲來歸檔數據。 隨着業務的增長,企業積攢了大量重要數據,一些數據在經過清洗和處理后,需要長期保存,以備將來進一步分析;一些數據則是出於行業監管和合規的要求 ...

Fri Nov 27 23:42:00 CST 2020 0 449
華為MVP周崢:氣象預報是個技術活,大數據、超、AI,缺一不可

摘要:在這樣一個關乎民生的行業里,人工智能、大數據、超這些技術,可發揮的潛力也是無限的,華為MVP周崢就是其中的技術踐行者,他正帶領着團隊為國內氣象行業帶來一股溫柔而不失力量的春風。 本文分享自華為社區《【億碼當先,聚金陵】華為MVP周崢:氣象預報是個技術活,大數據、超、AI ...

Tue Jul 20 18:21:00 CST 2021 0 181
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM