簡介: 數據倉庫概念從1990年提出,經過了四個主要階段。從最初的數據庫演進到數據倉庫,到MPP架構,到大數據時代的數據倉庫,再到今天的雲原生的數據倉庫。在不斷的演進過程中,數據倉庫面臨着不同的挑戰。 作者 ...
簡介:阿里雲智能研究員 林偉 :阿里巴巴從湖到倉的演進給我們帶來了湖倉一體的思考,使得湖的靈活性 數據種類豐富與倉的可成長性和企業級管理得到有機融合,這是阿里巴巴最佳實踐的寶貴資產,是大數據的新一代架構。 林偉,阿里雲智能研究員 阿里雲智能通用計算平台MaxCompute 機器學習PAI平台技術負責人 本篇內容將從三個部分為讀者講述離線實時一體化數倉與湖倉一體 雲原生大數據平台的持續演進。通過從 ...
2021-11-23 11:02 0 150 推薦指數:
簡介: 數據倉庫概念從1990年提出,經過了四個主要階段。從最初的數據庫演進到數據倉庫,到MPP架構,到大數據時代的數據倉庫,再到今天的雲原生的數據倉庫。在不斷的演進過程中,數據倉庫面臨着不同的挑戰。 作者 ...
簡介:阿里雲雲原生一體化數倉產品技術深度解讀。 本文大綱 一、雲原生一體化數倉的發布背景 1 市場情況 2 挑戰和痛點 二、雲原生一體化數倉是什么 三、雲原生一體化數倉的技術理念 1 離線實時一體 2 湖倉一體 3 分析服務一體 4 全鏈路數據治理 一、雲原生 ...
簡介: 本文由 T3 出行大數據平台負責人楊華和資深大數據平台開發工程師王祥虎介紹 Flink、Kylin 和 Hudi 湖倉一體的大數據生態體系以及在 T3 的相關應用場景。 本文由 T3 出行大數據平台負責人楊華和資深大數據平台開發工程師王祥虎介紹 Flink、Kylin ...
雲倉系統開發(蘇銘.188.1414.7927)雲倉系統,雲倉模式,雲倉平台,雲商系統,雲商模式,雲商平台,雲倉管理系統,倉配一體化,雲倉是個什么概念呢?隨便問一個物流經理人可能未必說的會很全面,但是隨着雲倉的普及和發展,我們需要去梳理一下雲倉產生的原因,形式以及由雲倉所帶來的創新 ...
徐昱 Apache Hudi Contributor;華米高級大數據開發工程師 巨東東 華米大數據開發工程師 1. 應用背景及痛點介紹 華米科技是一家基於雲的健康服務提供商,擁有全球領先的智能可穿戴技術。在華米科技,數據建設主要圍繞兩類數據:設備數據和APP數據,這些數據 ...
簡介: 由汽車之家實時計算平台負責人邸星星在 4 月 17 日上海站 Meetup 分享的,基於 Flink + Iceberg 的湖倉一體架構實踐。 內容簡要: 一、數據倉庫架構升級的背景 二、基於 Iceberg 的湖倉一體架構實踐 三、總結與收益 ...
Data Lakehouse(湖倉一體)是新出現的一種數據架構,它同時吸收了數據倉庫和數據湖的優勢,數據分析師和數據科學家可以在同一個數據存儲中對數據進行操作,同時它也能為公司進行數據治理帶來更多的便利性。那么何為Data Lakehouse呢,它具備些什么特性呢? 具備哪些特性? 一直以來 ...
此前Apache Hudi社區一直有小伙伴詢問能否使用Amazon Redshift查詢Hudi表,現在它終於來了。 現在您可以使用Amazon Redshift查詢Amazon S3 數據湖中Apache Hudi/Delta Lake表數據。Amazon Redshift Spectrum ...