原文:腾讯云 CHDFS — 云端大数据存算分离的基石

随着网络性能提升,云端计算架构逐步向存算分离转变,AWS Aurora 率先在数据库领域实现了这个转变,大数据计算领域也迅速朝此方向演化。 存算分离在云端有明显优势,不但可以充分发挥弹性计算的灵活,同时集中的托管存储可以提供更大的容量和更低的成本,避免了云端大量自建存储集群的维护代价。 一 问题和挑战 对象存储是广泛使用的云端非结构化数据存储解决方案,越来越多的非结构化数据聚集于对象存储的数据湖中 ...

2020-12-01 20:25 0 552 推荐指数:

查看详情

统一元数据数据湖Catalog让大数据分离不再是问题

摘要:为了解决现阶段大数据分离痛点问题,华为大数据推出重量级数据湖Catalog服务。 1 背景 随着5G、IoT等技术的发展,企业积累了越来越多的数据,需要激发更多的数据价值变现。传统大数据平台从建设到落地的长周期,不利于业务的高速发展;平台建成后,维护、升级、扩容均以集群为单位 ...

Thu Apr 01 18:19:00 CST 2021 0 331
腾讯副总裁刘煜宏:大数据平台力弹性资源池达500万核,国内最强

9月11日,在2020腾讯全球数字生态大会上,腾讯副总裁刘煜宏透露,腾讯大数据平台的力弹性资源池达500万核,每日分析任务数达1500万,每日实时计算次数超过40万亿,能支持超过一万亿维度的数据训练。腾讯不仅已经成为国内力最强的厂商,同时也是日实时计算量最大的公司。 腾讯 ...

Wed Sep 30 03:00:00 CST 2020 0 421
解读clickhouse分离在华为实践

摘要:本文是我们对clickhouse做了最简单的支持obs的适配改造。 本文分享自华为社区《clickhouse分离在华为实践》,作者: he lifu。 clickhouse是一款非常优秀的OLAP数据库系统,2016年刚开源的时候就因为卓越的性能表现得到大家的关注,而近两年 ...

Tue Oct 12 23:29:00 CST 2021 0 222
华为FusionInsight MRS在金融行业分离的实践

摘要:华为FusionInsight MRS的大数据分离解决方案,实现资源价值最大化,存储与计算资源全面化、灵活配置、弹性伸缩,降本增效。 在大数据、云计算、5G、AI等技术日新月异,数字经济加速发展的背景下,数据成为新的生产资料,数字化转型成为政企高速发展的关键。作为数字化转型 ...

Thu Feb 18 18:32:00 CST 2021 0 373
云端_大数据平台和AI平台以及云计算

技术特点 数字化和信息化 IT基础设施 大数据平台 大数据面对的场景 大数据技术栈 大数据平台技术选型 AI平台: AI面对的问题 准则: 关于未来趋势 广连接、快反应 云计算 1.云计算技术栈 2.多云架构 ...

Thu Nov 11 00:05:00 CST 2021 0 876
腾讯深度归档让数据从磁带走向云端

在数字化转型浪潮中,如何存储和利用好数据,是企业面临的首要问题。相比于传统互联网全面拥抱,产业互联网在数字化转型过程中,通常第一步是利用存储来归档数据。 随着业务的增长,企业积攒了大量重要数据,一些数据在经过清洗和处理后,需要长期保存,以备将来进一步分析;一些数据则是出于行业监管和合规的要求 ...

Fri Nov 27 23:42:00 CST 2020 0 449
华为MVP周峥:气象预报是个技术活,大数据、超、AI,缺一不可

摘要:在这样一个关乎民生的行业里,人工智能、大数据、超这些技术,可发挥的潜力也是无限的,华为MVP周峥就是其中的技术践行者,他正带领着团队为国内气象行业带来一股温柔而不失力量的春风。 本文分享自华为社区《【亿码当先,聚金陵】华为MVP周峥:气象预报是个技术活,大数据、超、AI ...

Tue Jul 20 18:21:00 CST 2021 0 181
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM