原文:淘宝大数据之路【转】

原文地址:https: yq.aliyun.com articles 年至今淘宝网从零开始飞速发展,走过了 个年头,支撑淘宝业务野蛮式生长背后是一套不断完善的技术平台,淘宝大数据平台,就是其中非常重要的一个组成部分,承担了数据采集 加工处理 数据应用的职责,淘宝大数据平台一路到今天,总共经历了三个大的阶段 如图 ,不同阶段面临了不一样的挑战,随着我的理解回顾下这些年大数据所经历过的故事: 图 数据 ...

2019-08-22 18:47 0 473 推荐指数:

查看详情

大数据学习之路-phoenix

1.phoenix安装 ------------------ 1.安装phoenix a)下载apache-phoenix-4.10.0-HBase-1.2-bin.tar.gz 下载网 ...

Fri Nov 16 21:03:00 CST 2018 0 1750
大数据技术 - 学习之路(一)

缘起 大学的时候,记得班里好多同学学习Android、iOS开发,那时候客户端开发非常火,并且工作后工资也很高。但是我并没有心动,我觉得这么多人去学并不一定是件好事,很可能跟网站开发一样,一段时间市 ...

Mon Feb 25 21:49:00 CST 2019 8 1195
大数据学习之路之Hadoop

Hadoop介绍 一、简介 Hadoop是一个开源的分布式计算平台,用于存储大数据,并使用MapReduce来处理。Hadoop擅长于存储各种格式的庞大的数据,任意的格式甚至非结构化的处理。两个核心: HDFS:Hadoop分布式文件系统(Hadoop Distributed File ...

Fri Sep 20 03:36:00 CST 2019 0 474
大数据迁移实践之路

随着业务的迅速发展,农业银行某系统承担的运行压力越来越大。现阶段, 该系统每天的交易量在2300 万笔以上,峰值达2950 万笔。交易量的攀升导致了后台数据数据量的激增,从而影响了联机程序响应时间,也增加了系统各类资源开销和后续数据分析的处理时间。为保障系统稳定运行,项目组从增加系统资源、优化 ...

Thu Jul 03 17:25:00 CST 2014 0 5646
胖子哥的大数据之路(一)-数据仓库也需要大数据

一、楔子   大数据传统企业实施,其路漫漫,绝不会如昙花一现,探索大数据在传统行业的实施之路,寻找一条适合传统行业的企业大数据实施方法体系,是我执着坚守的信念,大数据是一种信仰,吾将上下而求索。记下项目中的点滴,算是日志,自勉。 二、项目背景   最近在处理一个商业银行的大数据项目,旨在构建 ...

Wed Feb 12 15:45:00 CST 2014 7 3339
大数据数据清洗

原文地址:http://www.sohu.com/a/66109558_116235 数据清洗, 是整个数据分析过程中不可缺少的一个环节,其结果质量直接关系到模型效果和最终结论。在实际操作中,数据清洗通常会占据分析过程的50%—80%的时间。国外有些学术机构会专门研究如何做数据清洗,相关 ...

Fri Jun 09 00:38:00 CST 2017 0 1421
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM