Druid在有贊的實踐
轉載一篇自己在公司博客上的文章 一、Druid介紹 Druid 是 MetaMarket 公司研發，專為海量數據集上的做高性能 OLAP (OnLine Analysis Processing)而 ...
原文：Spark on K8S 在有贊的實踐
作者：胡加華 amp 馮明瀟 部門：數據中台 一 前言 隨着近幾年業務快速發展與迭代，大數據的成本也水漲船高，如何優化成本，建設低成本高效率的底層服務成為了有贊數據基礎平台 年的主旋律。本文主要介紹了隨着雲原生時代的到來，經歷 年發展的有贊離線計算平台如何擁抱雲原生，通過容器化改造 彈性伸縮 大數據組件的錯峰混部，做到業務成倍增長的情況下成本負增長。 首先介紹一下目前有贊離線計算的一些現狀。 萬兆 ...
2021-09-22 23:26 0 200 推薦指數：
相關推薦
Spark on K8S - Operator
Operator，現在是由 Google 開發的 這個 Operator 使用的 Spark on K8S 方案和 ...
k8s部署spark
1.鏡像構建打包推送阿里鏡像： DockerFile構建： 推送鏡像到阿里雲 打包鏡像相關文件地址:鏈接：https://pan.baidu.com/s/1OoBuEVcCNjsYZKqBTCMWaw 提取碼：ct16 2.k8s 構建spark ...
Spark on K8S（Standalone）
目錄 Spark on K8S 的幾種模式 Start Minikube Download Spark Build Spark Image 啟動集群 提交 Job Log Spark on K8S 的幾種模式 ...
Spark on K8S （Kubernetes Native）
目錄 Spark on K8S 的幾種模式 Start Minikube Spark on K8S 官網 Download Spark Build Spark Image 在宿主機提交 Job 在容器里提交 Job Spark ...
是時候考慮讓你的Spark跑在K8S上了
相信玩Spark的你已經注意到最新的Spark版本已經支持不做任何修改可以直接跑在K8S上了，即 ...
Spark on K8S環境部署細節
Spark on K8S環境部署細節 spark k8s time: 2020-1-3 Spark on K8S環境部署細節 Spark operator安裝 准備kubectl ...
Spark on K8S （Kubernetes Native）
Spark on K8S 的幾種模式 Standalone：在 K8S 啟動一個長期運行的集群，所有 Job 都通過 spark-submit 向這個集群提交 Kubernetes Native：通過 spark-submit 直接向 K8S 的 API Server 提交，申請到資源 ...