原文:唯品会:在 Flink 容器化与平台化上的建设实践

简介:唯品会 Flink 的容器化实践应用,Flink SQL 平台化建设,以及在实时数仓和实验平台上的应用案例。 转自dbaplus社群公众号作者:王康,唯品会数据平台高级开发工程师 自 年起,为保障内部业务在平时和大促期间的平稳运行,唯品会就开始基于 Kubernetes 深入打造高性能 稳定 可靠 易用的实时计算平台,现在的平台支持 Flink Spark Storm 等主流框架。 本文将分 ...

2021-06-24 16:36 0 170 推荐指数:

查看详情

Flink会的实践

简介: Flink会的容器实践应用以及产品经验。 会自 2017 年开始基于 k8s 深入打造高性能、稳定、可靠、易用的实时计算平台,支持会内部业务在平时以及大促的平稳运行。现平台支持 Flink、Spark、Storm 等主流框架。本文主要分享 Flink ...

Tue Apr 27 22:12:00 CST 2021 0 225
Flink SQL 1.11 on Zeppelin 平台实践

简介: 鉴于有很多企业都无法配备专门的团队来解决 Flink SQL 平台的问题,那么到底有没有一个开源的、开箱即用的、功能相对完善的组件呢?答案就是本文的主角——Apache Zeppelin。 作者:LittleMagic 大数据领域 SQL 化开发的风潮方兴未艾(所谓 ...

Thu Oct 29 18:48:00 CST 2020 0 480
Flink SQL 1.11 on Zeppelin 平台实践

作者:LittleMagic 大数据领域 SQL 化开发的风潮方兴未艾(所谓"Everybody knows SQL"),Flink 自然也不能“免俗”。 Flink SQL 是 Flink 系统内部最高级别的 API,也是流批一体思想的集大成者。 用户可以通过简单明了的 SQL 语句像查表 ...

Fri Nov 27 23:57:00 CST 2020 0 416
Kubernetes容器平台建设实践

【51CTO.com原创稿件】Kubernetes是Google开源的一个容器编排引擎,它支持自动部署、大规模可伸缩、应用容器管理。伴随着云原生技术的迅速崛起,如今Kubernetes 事实上已经成为应用容器平台的标准,越来越受到企业的青睐,在生产中也应用的越来越广泛。 我们的容器平台建设 ...

Sun Aug 18 23:44:00 CST 2019 0 779
平台建设思路浅谈

随着业务的不断发展,软件系统不可避免的走向熵增:复杂度越来越高、研发效率越来越差、稳定性逐渐降低等。这时抽象核心能力,走向平台的道路成为很多系统的首要选择。笔者结合自己的经验,总结了平台建设的几种思路,希望对大家建设平台有所帮助。 平台有以下优点 复用性强:复用核心逻辑,业务功能 ...

Fri Feb 18 03:46:00 CST 2022 0 724
大数据平台

大数据平台会近几年有了飞速发展,已经完成了从0到1的过程,各个部门逐渐将其引入到实际业务中。 “百尺竿头,更进一步”,在业务压力和集群负载同步增加的情况下,如何实现平台优化是2017年的主旋律。 我们不可能面面俱到讲所有新东西,主要从集群健康和资源有效利用角度进行探讨,围绕集群监控 ...

Sun Sep 02 01:16:00 CST 2018 0 787
知乎的 Flink 数据集成平台建设实践

简介: 本文由知乎技术平台负责人孙晓光分享,主要介绍知乎 Flink 数据集成平台建设实践。内容如下: 1. 业务场景 ; 2. 历史设计 ; 3. 全面转向 Flink 后的设计 ; 4. 未来 Flink 应用场景的规划。 本文由知乎技术平台负责人孙晓光分享,主要介绍知 ...

Fri Apr 23 17:59:00 CST 2021 0 231
马蜂窝容器平台前端赋能实践

容器对前端开发真的有用吗?答案是肯定的。 最初当我向公司的前端同学「安利」容器技术的时候,很多人都会说:「容器?这不是用在后端的技术吗?我不懂啊,而且前端开发用不上吧。」 但其实,今天我们讨论的「前端」已经不是传统意义上的「前端」, 首先体现在终端类型的多样性,比如 iOS ...

Fri Jun 21 18:43:00 CST 2019 4 505
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM