【大數據雲原生系列】大數據系統雲原生漸進式演進最佳實踐
了企業應用迭代、降低資源成本、提高系統容錯性和資源彈性。 基於Hadoop生態的傳統大數據系統，同樣 ...
原文：大數據雲原生系列| 微信 Flink on Kubernetes 實戰總結
前言 架構轉型，擁抱雲原生服務生態 當前微信內部的大數據計算平台是基於自研的 Yard 資源調度系統來建設，Yard 的設計初衷除了提供在線服務資源隔離外，另一方面是為了提高在線服務機器的整體資源利用率，其核心策略是在機器空閑時能在上面跑一些大數據離線任務。但是對接業界各種大數據計算框架 例如 Hadoop MapReduce Spark Flink 等 都需要專門定制化開發，迭代維護非常不靈活， ...
2021-03-25 14:22 0 332 推薦指數：
相關推薦
6大數據實戰系列-sparkSql實戰
，並且SparkSql支持多種數據源操作包括hive、hdfs、rdd、json、mysql，本文先講解hive、hdf ...
大數據雲平台Greenplum：多租戶篇
Greenplum 是最出色的開源MPP數據庫，經過15年的發展，從數據倉庫發展成了雲時代的理想大數據平台。 本系列文章將從各個方面介紹Greenplum對雲的支持。本篇側重多租戶。 1. 什么是多租戶 多租戶指一套系統能夠支撐多個租戶。一個租戶通常是具有相似訪問 ...
大數據開發實戰系列之電信客服(1)
大數據實戰開發系列，以實戰為主，輔以一些基礎知識，關於電信客服，在網上也有很多的資料，這里我自然會去參考網上的資料，程序的整體設計是在今天開始的，老夫盡量在本周末錢結束這個電信客服的程序編寫。因為我也是一個學習者，所以在程序編寫過程中難免會存在問題，有問題還請大家指出，有則改之，無則加勉 ...
SparkStreaming實時流式大數據處理實戰總結
總結《SparkStreaming實時流式大數據處理實戰》 一、初始spark 1. 初始sparkstreaming 1.1 大數據處理模式 1. 一種是原生流處理（Native）的方式，即所有輸入記錄會一條接一條地被處理，storm 和 flink 2. 另一種是微批處理（Batch ...
微軟Azure已開始支持hadoop--大數據雲計算
微軟Azure已開始支持hadoop，對於有需要彈性大數據運算的公司可能是個好消息。據悉，近期微軟已提供一個預覽版的Azure HDInsight（Hadoop on Azure）服務，運行在Linux操作系統上。與對應的Windows一樣，Azure HDInsight on Linux服務也是 ...
大數據實戰項目有哪些
目前大數據的就業情況，對我們大學生來說，重要的一道坎是什么？實戰經驗有木有？翻看各大招聘網站的應聘需求，都需要兩到三年的開發經驗。這個很重要，企業開出了高額的薪資，自然是想得到相應的回報。 我們大數據課程為就業課程，除了對大數據生態圈各個服務組件進行細致的講解，還通過企業級真實大數據項目實戰 ...
大數據雲計算學習路線圖(純屬個人看法和觀點)
【ps:以下純屬個人觀點和看法，有什么不對的，還請多多指教。】 1：之前發過一個Java攻城獅的學習路線圖【ps:挺詳細的~~~】：http://www.cnblogs.com/biehongli/ ...