原文:大数据架构-东方国信

mark: 新方向:原来我们讲的 Iaas Paas Saas 三层平台,未来运营商的大数据平台将向更深层次方向演进,如:Paas T Paas D Paas mark架构中的新技术:kudu Ceph OGG Oralce GoldenGate RHadoop TiDB mark自主研发XCloud框架:分布式执行计划引擎 分布式调度引擎 查询引擎 集群状态管理服务 借签东方国信的hadoop发 ...

2017-05-27 08:53 0 2198 推荐指数:

查看详情

[祝贺] 东方国信集团的钢铁大数据和工业节能两个案例入选工信部工业互联网优秀案例

一、公司介绍 东方国信成立于1997年,是中国领先的大数据上市科技公司(股票代码 300166)。自成立以来,东方国信就专注于大数据领域,紧跟全球大数据技术的发展趋势,通过自主研发,打造了面向大数据采集、汇聚、处理、存储、分析、挖掘、应用、管控为一体的大数据核心能力,构建 ...

Fri Feb 24 05:06:00 CST 2017 2 1241
大数据架构之:Kafka

、基于数据的接口层。 冗余:消息队列持久化,防止数据丢失。 扩展性:消息队列解耦处理过程,容易 ...

Tue Nov 10 03:21:00 CST 2015 1 7175
大数据架构之:Storm

Storm是一个免费开源、分布式、高容错的实时计算系统,Twitter开发贡献给社区的。Storm令持续不断的流计算变得容易,弥补了Hadoop批处理所不能满足的实时要求。 ...

Tue Nov 10 03:44:00 CST 2015 0 1774
大数据Lambda架构

1 Lambda架构介绍 Lambda架构划分为三层。各自是批处理层,服务层,和加速层。终于实现的效果,能够使用以下的表达式来说明。 query = function(alldata) 1.1 批处理层(Batch Layer, Apache ...

Mon Feb 22 16:41:00 CST 2016 0 1883
五个顶级的大数据架构

本文将介绍用于大数据堆栈的五个最有用的架构,以及每个架构的优点,以便更好地理解和权衡。此外,还对成本、何时使用、热门产品,以及每种架构的提示和技巧进行了阐述。 自从像AWS这样的公共云产品开辟了大数据分析功能以来,小企业通过挖掘大量的数据做到只有大企业才能做到的事情,至今 ...

Fri Sep 07 01:41:00 CST 2018 0 3266
大数据架构之:Flume

Source Flume基础架构:Flume 可以单节点直接采集数据。 Flume 的内 ...

Tue Nov 10 03:04:00 CST 2015 2 3096
大数据架构之:Spark

Spark是UC Berkeley AMP 实验室基于map reduce算法实现的分布式计算框架,输出和结果保存在内存中,不需要频繁读写HDFS,数据处理效率更高Spark适用于近线或准实时、数据挖掘与机器学习应用场景 Spark和Hadoop Spark是一个针对超大数据 ...

Tue Nov 10 03:30:00 CST 2015 0 1786
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM