大數據雲原生系列| 微信 Flink on Kubernetes 實戰總結
前言 架構轉型，擁抱雲原生服務生態 當前微信內部的大數據計算平台是基於自研的 Yard 資源調度系統來建設，Yard 的設計初衷除了提供在線服務資源隔離外，另一方面是為了提高在線服務機器的整體資源利用率，其核心策略是在機器空閑時能在上面跑一些大數據離線任務。但是對接業界各種大數據計算框架 ...
原文：【大數據雲原生系列】大數據系統雲原生漸進式演進最佳實踐
.引言 隨着雲原生概念的興起，越來越多的企業投身於雲原生轉型的浪潮，以解決傳統應用面臨的彈性能力不足 資源利用率較低 迭代周期較長等問題。通過雲原生技術 如容器，不可變基礎設施和聲明式API等 ，使得企業在公有雲 私有雲和混合雲等雲環境構建和運行應用變得更加容易，更能充分利用雲環境的優勢，加速了企業應用迭代 降低資源成本 提高系統容錯性和資源彈性。 基於Hadoop生態的傳統大數據系統，同樣面臨 ...
2020-09-21 19:03 0 921 推薦指數：
相關推薦
基於雲原生的大數據實時分析方案實踐
1 方案介紹 大數據處理技術現今已廣泛應用於各個行業，為業務解決海量存儲和海量分析的需求。但數據量的爆發式增長，對數據處理能力提出了更大的挑戰，同時對時效性也提出了更高的要求。實時分析已成為企業大數據分析中最關鍵的術語，這意味企業可將所有數據用於大數據實時分析，實現在數據接受同時即刻為企業生成 ...
雲原生大數據架構中實時計算維表和結果表的選型實踐
文件系統 HDFS，分布式計算引擎 MapReduce，以及分布式數據庫 HBase。最初的大數據技術與需 ...
離線實時一體化數倉與湖倉一體—雲原生大數據平台的持續演進
簡介：阿里雲智能研究員 林偉 ：阿里巴巴從湖到倉的演進給我們帶來了湖倉一體的思考，使得湖的靈活性、數據種類豐富與倉的可成長性和企業級管理得到有機融合，這是阿里巴巴最佳實踐的寶貴資產，是大數據的新一代架構。 林偉，阿里雲智能研究員、阿里雲智能通用計算平台MaxCompute ...
走近雲原生的開源大數據統一平台-阿里雲
Data BI warehouse 方案對比 cloudra cdp sdx【數據血緣】 Shared Data Experience (SDX) | Cloudera https://www.cloudera.com/products/sdx.html Security ...
大數據雲平台Greenplum：多租戶篇
Greenplum 是最出色的開源MPP數據庫，經過15年的發展，從數據倉庫發展成了雲時代的理想大數據平台。 本系列文章將從各個方面介紹Greenplum對雲的支持。本篇側重多租戶。 1. 什么是多租戶 多租戶指一套系統能夠支撐多個租戶。一個租戶通常是具有相似訪問 ...
斷篇-金融大數據最佳實踐總結篇
一、數據挖掘的價值體現 任何數據分析或者挖掘的項目都不會直接產生經濟價值和意義，分析出的數據結果既不能給企業直接帶來一個客戶，也不能幫助企業賣出一件產品。數據分析的價值體現在於業務部門根據分析結果制定相關的經營策略並貫徹執行。 二、大數據之困-通道 大數據之困-如何打通底層數據存儲 ...
阿里巴巴雲原生大數據運維平台 SREWorks 正式開源
簡介：阿里巴巴雲原生大數據運維平台 SREWorks，沉淀了團隊近10年經過內部業務錘煉的 SRE 工程實踐，今天正式對外開源，秉承“數據化、智能化”運維思想，幫助運維行業更多的從業者采用“數智”思想做好高效運維。 作者 | 晟白 來源 | 阿里技術公眾號 隨着行業不斷發展 ...