原文:滴滴实时计算发展之路及平台架构实践

toc: true title: 滴滴实时计算发展之路及平台架构实践 date: tags: Flink 大数据 滴滴的核心业务是一个实时在线服务,因此具有丰富的实时数据和实时计算场景。本文将介绍滴滴实时计算发展之路以及平台架构实践。 实时计算演进 随着滴滴业务的发展,滴滴的实时计算架构也在快速演变。到目前为止大概经历了三个阶段: 业务方自建小集群阶段 集中式大集群 平台化阶段 SQL化阶段。 ...

2019-11-04 21:42 0 497 推荐指数:

查看详情

克拉克拉(KilaKila):大规模实时计算平台架构实战

克拉克拉(KilaKila):大规模实时计算平台架构实战 一、产品背景:克拉克拉(KilaKila)是国内专注二次元、主打年轻用户的娱乐互动内容社区软件。KilaKila推出互动语音直播、短视频配音、对话小说等功能,满足当下年轻用户个性化、碎片化的文娱需求。App用户等级体系作为克拉克拉社区化 ...

Thu Jan 10 23:55:00 CST 2019 0 649
实时计算平台

实时计算平台中的弹性集群资源管理 本文系微博运维数据平台(DIP)在实时计算平台的研发过程中集群资源管理方面的一些经验总结和运用,主要关注以下几个问题: 异构资源如何整合? 实时计算应用之间的物理资源如何隔离? 集群资源利用率如何提高 ...

Fri Jul 01 07:07:00 CST 2016 0 2265
贝壳基于 Flink 的实时计算演进之路

简介: 贝壳找房在实时计算之路上的平台建设以及实时数仓应用。 摘要:贝壳找房大数据平台实时计算负责人刘力云带来的分享内容是贝壳找房的实时计算演进之路,内容如下: 发展历程 平台建设 实时数仓及其应用场景 事件驱动场景 未来规划 ...

Tue Apr 27 19:16:00 CST 2021 0 241
实时计算数据架构的演变

传统数据基础架构 传统单体数据架构最大的特点便是集中式数据存储,大多数分为计算层和存储层。 存储层,主要是负责存储企业各种系统产生的数据,如 Web 业务系统、订单系统、CRM 系统,ERP 系统、监控系统,数据比如系统的订单交易量,网站的活跃用户数,每个用户的交易额。 所有的操作均需要借助于 ...

Thu Sep 19 07:46:00 CST 2019 0 809
云原生大数据架构实时计算维表和结果表的选型实践

​简介: 随着互联网技术的日渐发展、数据规模的扩大与复杂的需求场景的产生,传统的大数据架构无法承载。 ​ 作者 | 志羽 来源 | 阿里技术公众号 一 前言 传统的大数据技术起源于 Google 三架马车 GFS、MapReduce、Bigtable,以及其衍生的开源分布式 ...

Thu Sep 16 19:07:00 CST 2021 0 101
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM