大数据必须了解的Flink实时数据架构
本文从上述现状及实时数据需求出发，结合工业界案例、笔者的实时数据开发经验， 梳理总结了实时数据体系建设的总体方案。 作者：刘大龙@唯品会；来源：Flink 中文社区 随着互联网的发展进入下半场，数据的时效性对企业的精细化运营越来越重要， 商场如战场，在每天产生的海量数据中，如何能 ...
原文：新一代大数据实时数据架构到底长啥样
随着互联网的发展进入下半场，数据的时效性对企业的精细化运营越来越重要， 商场如战场，在每天产生的海量数据中，如何能实时有效的挖掘出有价值的信息， 对企业的决策运营策略调整有很大帮助。此外，随着 G 技术的成熟 广泛应用， 对于工业互联网 物联网等数据时效性要求非常高的行业，企业就更需要一套完整成熟的实时数据体系来提高自身的行业竞争力。 本文从上述现状及实时数据需求出发，结合工业界案例 笔者的实时 ...
2020-10-29 14:48 0 389 推荐指数：
相关推荐
【实战篇】大数据实时数仓项目从架构设计到落地实施
注：由于文章篇幅有限，获取资料可直接扫二维码，更有深受好评的大数据实战精英+架构师好课等着你。 大数据技术交流QQ群：207540827 速点链接加入高手战队：http://www.dajiangtai.com/course/112.do 项目概述 某电商平台拟对电商网站的各种行为 ...
大数据——如何设计实时数据平台（设计篇）
导读：本文将会分上下两篇对一个重要且常见的大数据基础设施平台展开讨论，即“实时数据平台”。 在上篇设计篇中，我们首先从两个维度介绍实时数据平台：从现代数仓架构角度看待实时数据平台，从典型数据处理角度看待实时数据处理；接着我们会探讨实时数据平台整体设计架构、对具体问题的考量以及解决思路。 在下篇技术 ...
新一代数据库之Etcd 简介
1、etcd介绍 etcd是Google公司使用Go语言开发的开源、高可用的分布式key-value存储系统，可以用于配置共享和服务的注册和发现。 类似项目有zookeeper以及consu ...
新一代银行架构-笔记
1、 新一代银行IT架构建设目标 从ACID到CAP/BASE： BASE是对CAP理论中一致性和可用性权衡 ...
大数据Spark+Kafka实时数据分析案例
本案例利用Spark+Kafka实时分析男女生每秒购物人数，利用Spark Streaming实时处理用户购物日志，然后利用websocket将数据实时推送给浏览器，最后浏览器将接收到的数据实时展现，案例的整体框架图如下： 下面分析详细分析下上述步骤： 应用程序将购物日志 ...
大数据开发实战：实时数据平台和流计算
1、实时数据平台整体架构 实时数据平台的支撑技术主要包含四个方面：实时数据采集（如Flume）,消息中间件（如Kafka）, 流计算框架（如Storm, Spark, Flink和Beam），以及数据实时存储（如列族存储的HBase） 实时数据平台最为核心的技术 ...