大数据云原生系列| 微信 Flink on Kubernetes 实战总结
前言 架构转型，拥抱云原生服务生态 当前微信内部的大数据计算平台是基于自研的 Yard 资源调度系统来建设，Yard 的设计初衷除了提供在线服务资源隔离外，另一方面是为了提高在线服务机器的整体资源利用率，其核心策略是在机器空闲时能在上面跑一些大数据离线任务。但是对接业界各种大数据计算框架 ...
原文：【大数据云原生系列】大数据系统云原生渐进式演进最佳实践
.引言 随着云原生概念的兴起，越来越多的企业投身于云原生转型的浪潮，以解决传统应用面临的弹性能力不足 资源利用率较低 迭代周期较长等问题。通过云原生技术 如容器，不可变基础设施和声明式API等 ，使得企业在公有云 私有云和混合云等云环境构建和运行应用变得更加容易，更能充分利用云环境的优势，加速了企业应用迭代 降低资源成本 提高系统容错性和资源弹性。 基于Hadoop生态的传统大数据系统，同样面临 ...
2020-09-21 19:03 0 921 推荐指数：
相关推荐
基于云原生的大数据实时分析方案实践
1 方案介绍 大数据处理技术现今已广泛应用于各个行业，为业务解决海量存储和海量分析的需求。但数据量的爆发式增长，对数据处理能力提出了更大的挑战，同时对时效性也提出了更高的要求。实时分析已成为企业大数据分析中最关键的术语，这意味企业可将所有数据用于大数据实时分析，实现在数据接受同时即刻为企业生成 ...
云原生大数据架构中实时计算维表和结果表的选型实践
文件系统 HDFS，分布式计算引擎 MapReduce，以及分布式数据库 HBase。最初的大数据技术与需 ...
离线实时一体化数仓与湖仓一体—云原生大数据平台的持续演进
简介：阿里云智能研究员 林伟 ：阿里巴巴从湖到仓的演进给我们带来了湖仓一体的思考，使得湖的灵活性、数据种类丰富与仓的可成长性和企业级管理得到有机融合，这是阿里巴巴最佳实践的宝贵资产，是大数据的新一代架构。 林伟，阿里云智能研究员、阿里云智能通用计算平台MaxCompute ...
走近云原生的开源大数据统一平台-阿里云
Data BI warehouse 方案对比 cloudra cdp sdx【数据血缘】 Shared Data Experience (SDX) | Cloudera https://www.cloudera.com/products/sdx.html Security ...
大数据云平台Greenplum：多租户篇
Greenplum 是最出色的开源MPP数据库，经过15年的发展，从数据仓库发展成了云时代的理想大数据平台。 本系列文章将从各个方面介绍Greenplum对云的支持。本篇侧重多租户。 1. 什么是多租户 多租户指一套系统能够支撑多个租户。一个租户通常是具有相似访问 ...
断篇-金融大数据最佳实践总结篇
一、数据挖掘的价值体现 任何数据分析或者挖掘的项目都不会直接产生经济价值和意义，分析出的数据结果既不能给企业直接带来一个客户，也不能帮助企业卖出一件产品。数据分析的价值体现在于业务部门根据分析结果制定相关的经营策略并贯彻执行。 二、大数据之困-通道 大数据之困-如何打通底层数据存储 ...
阿里巴巴云原生大数据运维平台 SREWorks 正式开源
简介：阿里巴巴云原生大数据运维平台 SREWorks，沉淀了团队近10年经过内部业务锤炼的 SRE 工程实践，今天正式对外开源，秉承“数据化、智能化”运维思想，帮助运维行业更多的从业者采用“数智”思想做好高效运维。 作者 | 晟白 来源 | 阿里技术公众号 随着行业不断发展 ...