摘要:本文是我們對clickhouse做了最簡單的支持obs的適配改造。 本文分享自華為雲社區《clickhouse存算分離在華為雲實踐》,作者: he lifu。 clickhouse是一款非常優秀的OLAP數據庫系統,2016年剛開源的時候就因為卓越的性能表現得到大家的關注,而近兩年 ...
背景 ClickHouse 作為開源 OLAP 引擎,因其出色的性能表現在大數據生態中得到了廣泛的應用。區別於 Hadoop 生態組件通常依賴 HDFS 作為底層的數據存儲,ClickHouse 使用本地盤來自己管理數據,官方推薦使用 SSD 作為存儲介質來提升性能。但受限於本地盤的容量上限以及 SSD 盤的價格,用戶很難在容量 成本和性能這三者之間找到一個好的平衡。JuiceFS 的某個客戶近期 ...
2021-10-19 16:32 0 884 推薦指數:
摘要:本文是我們對clickhouse做了最簡單的支持obs的適配改造。 本文分享自華為雲社區《clickhouse存算分離在華為雲實踐》,作者: he lifu。 clickhouse是一款非常優秀的OLAP數據庫系統,2016年剛開源的時候就因為卓越的性能表現得到大家的關注,而近兩年 ...
前言: 本文根據華為雲NoSQL數據庫架構師余汶龍,在今年的中國系統架構師大會SACC上的演講整理而成,內容如下。 本次分享的大綱分成如下四個部分: 什么是GaussDB(for Redis)? 為什么選擇存算分離 設計與實現 競爭力總結 什么是GaussDB ...
摘要:華為雲FusionInsight MRS的大數據存算分離解決方案,實現資源價值最大化,存儲與計算資源全面雲化、靈活配置、彈性伸縮,降本增效。 在大數據、雲計算、5G、AI等技術日新月異,數字經濟加速發展的背景下,數據成為新的生產資料,數字化轉型成為政企高速發展的關鍵。作為數字化轉型 ...
引言 隨着大數據技術架構的演進,存儲與計算分離的架構能更好的滿足用戶對降低數據存儲成本,按需調度計算資源的訴求,正在成為越來越多人的選擇。相較 HDFS,數據存儲在對象存儲上可以節約存儲成本,但與此同時,對象存儲對海量文件的寫性能也會差很多。 騰訊雲彈性 MapReduce ...
摘要:如何快速通過雲化,實現資源利用率提升,降本增效,打破傳統系統建設的數據孤島,成為企業快速發展的關鍵所在。 隨着5G和AIoT技術的發展,數據量指數級增長,新的數據業務層出不窮。作為數字化 ...
隨着網絡性能提升,雲端計算架構逐步向存算分離轉變,AWS Aurora 率先在數據庫領域實現了這個轉變,大數據計算領域也迅速朝此方向演化。 存算分離在雲端有明顯優勢,不但可以充分發揮彈性計算的靈活,同時集中的托管存儲可以提供更大的容量和更低的成本,避免了雲端大量自建存儲集群的維護代價 ...
摘要:為了解決現階段大數據存算分離痛點問題,華為雲大數據推出重量級數據湖Catalog服務。 1 背景 隨着5G、IoT等技術的發展,企業積累了越來越多的數據,需要激發更多的數據價值變現。傳統大數據平台從建設到落地的長周期,不利於業務的高速發展;平台建成后,維護、升級、擴容均以集群為單位 ...
摘要:GaussDB(for Redis)(下文簡稱高斯Redis)是華為雲數據庫團隊自主研發的兼容Redis協議的雲原生數據庫,該數據庫采用計算存儲分離架構,突破開源Redis的內存限制,可輕松擴展至PB級存儲。 本文將從存儲架構、四大特性、競爭力、應用場景等方面進行介紹。 存儲架構 ...