原文:ClickHouse 存算分離架構探索

背景 ClickHouse 作為開源 OLAP 引擎,因其出色的性能表現在大數據生態中得到了廣泛的應用。區別於 Hadoop 生態組件通常依賴 HDFS 作為底層的數據存儲,ClickHouse 使用本地盤來自己管理數據,官方推薦使用 SSD 作為存儲介質來提升性能。但受限於本地盤的容量上限以及 SSD 盤的價格,用戶很難在容量 成本和性能這三者之間找到一個好的平衡。JuiceFS 的某個客戶近期 ...

2021-10-19 16:32 0 884 推薦指數:

查看詳情

解讀clickhouse分離在華為雲實踐

摘要:本文是我們對clickhouse做了最簡單的支持obs的適配改造。 本文分享自華為雲社區《clickhouse分離在華為雲實踐》,作者: he lifu。 clickhouse是一款非常優秀的OLAP數據庫系統,2016年剛開源的時候就因為卓越的性能表現得到大家的關注,而近兩年 ...

Tue Oct 12 23:29:00 CST 2021 0 222
GaussDB(for Redis)揭秘:Redis分離架構最全解析

前言: 本文根據華為雲NoSQL數據庫架構師余汶龍,在今年的中國系統架構師大會SACC上的演講整理而成,內容如下。 本次分享的大綱分成如下四個部分: 什么是GaussDB(for Redis)? 為什么選擇分離 設計與實現 競爭力總結 什么是GaussDB ...

Wed Jun 30 22:32:00 CST 2021 0 187
華為雲FusionInsight MRS在金融行業分離的實踐

摘要:華為雲FusionInsight MRS的大數據分離解決方案,實現資源價值最大化,存儲與計算資源全面雲化、靈活配置、彈性伸縮,降本增效。 在大數據、雲計算、5G、AI等技術日新月異,數字經濟加速發展的背景下,數據成為新的生產資料,數字化轉型成為政企高速發展的關鍵。作為數字化轉型 ...

Thu Feb 18 18:32:00 CST 2021 0 373
分離下寫性能提升10倍以上,EMR Spark引擎是如何做到的?

​引言 隨着大數據技術架構的演進,存儲與計算分離架構能更好的滿足用戶對降低數據存儲成本,按需調度計算資源的訴求,正在成為越來越多人的選擇。相較 HDFS,數據存儲在對象存儲上可以節約存儲成本,但與此同時,對象存儲對海量文件的寫性能也會差很多。 騰訊雲彈性 MapReduce ...

Tue Nov 03 06:20:00 CST 2020 0 524
騰訊雲 CHDFS — 雲端大數據分離的基石

隨着網絡性能提升,雲端計算架構逐步向分離轉變,AWS Aurora 率先在數據庫領域實現了這個轉變,大數據計算領域也迅速朝此方向演化。 分離在雲端有明顯優勢,不但可以充分發揮彈性計算的靈活,同時集中的托管存儲可以提供更大的容量和更低的成本,避免了雲端大量自建存儲集群的維護代價 ...

Wed Dec 02 04:25:00 CST 2020 0 552
統一元數據,數據湖Catalog讓大數據分離不再是問題

摘要:為了解決現階段大數據分離痛點問題,華為雲大數據推出重量級數據湖Catalog服務。 1 背景 隨着5G、IoT等技術的發展,企業積累了越來越多的數據,需要激發更多的數據價值變現。傳統大數據平台從建設到落地的長周期,不利於業務的高速發展;平台建成后,維護、升級、擴容均以集群為單位 ...

Thu Apr 01 18:19:00 CST 2021 0 331
突破開源Redis的內存限制,分離的GaussDB到底有多能“裝”?

摘要:GaussDB(for Redis)(下文簡稱高斯Redis)是華為雲數據庫團隊自主研發的兼容Redis協議的雲原生數據庫,該數據庫采用計算存儲分離架構,突破開源Redis的內存限制,可輕松擴展至PB級存儲。 本文將從存儲架構、四大特性、競爭力、應用場景等方面進行介紹。 存儲架構 ...

Thu Jan 21 22:41:00 CST 2021 0 385
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM