项目实战 从 0 到 1 学习之Flink（9）flink实时数仓从入门到实战
第一章、flink实时数仓入门 一、依赖 二、Flink DataSet API编程指南 Flink最大的亮点是实时处理部分，Flink认为批处理是流处理的特殊情况，可以通过一套引擎处理批量和流式数据，而Flink在未来也会重点投入更多的资源到批流融合中。我在Flink ...
原文：项目实战 从 0 到 1 学习之 Flink（8）大数据之Hudi + Kylin的准实时数仓实现
问题导读： 数据库 数据仓库如何理解 数据湖有什么用途 解决什么问题 数据仓库的加载链路如何实现 Hudi新一代数据湖项目有什么优势 在近期的 Apache Kylin Apache Hudi Meetup 直播上，Apache Kylin PMC Chair 史少锋和 Kyligence 解决方案工程师刘永恒就 Hudi Kylin 的准实时数仓实现进行了介绍与演示。下文是分享现场的回顾。我的分 ...
2020-05-27 09:46 0 1489 推荐指数：
相关推荐
融合趋势下基于 Flink Kylin Hudi 湖仓一体的大数据生态体系
简介： 本文由 T3 出行大数据平台负责人杨华和资深大数据平台开发工程师王祥虎介绍 Flink、Kylin 和 Hudi 湖仓一体的大数据生态体系以及在 T3 的相关应用场景。 本文由 T3 出行大数据平台负责人杨华和资深大数据平台开发工程师王祥虎介绍 Flink、Kylin ...
【实战篇】大数据实时数仓项目从架构设计到落地实施
注：由于文章篇幅有限，获取资料可直接扫二维码，更有深受好评的大数据实战精英+架构师好课等着你。 大数据技术交流QQ群：207540827 速点链接加入高手战队：http://www.dajiangtai.com/course/112.do 项目概述 某电商平台拟对电商网站的各种行为 ...
顺丰科技 Hudi on Flink 实时数仓实践
简介： 介绍了顺丰科技数仓的架构，趟过的一些问题、使用 Hudi 来优化整个 job 状态的实践细节，以及未来的一些规划。 本文作者为刘杰，介绍了顺丰科技数仓的架构，趟过的一些问题、使用 Hudi 来优化整个 job 状态的实践细节，以及未来的一些规划。主要内容为： 数仓架构 ...
大数据必须了解的Flink实时数据架构
本文从上述现状及实时数据需求出发，结合工业界案例、笔者的实时数据开发经验， 梳理总结了实时数据体系建设的总体方案。 作者：刘大龙@唯品会；来源：Flink 中文社区 随着互联网的发展进入下半场，数据的时效性对企业的精细化运营越来越重要， 商场如战场，在每天产生的海量数据中，如何能 ...
基于 Hudi 和 Kylin 构建准实时高性能数据仓库
+ Kylin 的准实时数仓实现进行了介绍与演示。下文是分享现场的回顾。 我的分享主题是《基于 Hu ...
准实时数仓设计方案
原文出处：大数据最佳实践 链接：https://mp.weixin.qq.com/s/VlYyzLvTECM5XSRLklGrOg 目前的数仓大概分为离线数仓和实时数仓。离线数仓一般是T+1的数据ETL方案；实时数仓一般是分钟级别甚至更短的时间内的ETL方案。实时数仓一般是将上游业务库的数据 ...
“准实时数仓”设计方案
目前的数仓大概分为离线数仓和实时数仓。离线数仓一般是T+1的数据ETL方案；实时数仓一般是分钟级别甚至更短的时间内的ETL方案。实时数仓一般是将上游业务库的数据通过binlog等形式，实时抽取到Kafka，进行实时ETL。但目前主流的实时数仓也会细分为两类，一类是标准的实时数仓 ...