淘宝的技术架构
淘宝的技术架构一直在变的，分几个阶段： V1.0：小而快（2003.5 – 2004.5） 2003年淘宝诞生，用的是LAMP经典架构（linux+apache+mysql+php），后端用的是php语言 ...
原文：淘宝海量数据产品的技术架构
淘宝海量数据产品的技术架构是什么，又是如何应对双十一的海量访问的 先看图： 按照数据的流向来划分，我们把淘宝数据产品的技术架构分为五层 如图 所示 ，分别是数据源 计算层 存储层 查询层和产品层。位于架构顶端的是我们的数据来源层，这里有淘宝主站的用户 店铺 商品和交易等数据库，还有用户的浏览 搜索等行为日志等。这一系列的数据是数据产品最原始的生命力所在。 在数据源层实时产生的数据，通过淘宝自主研发 ...
2014-04-01 15:19 0 4938 推荐指数：
相关推荐
淘宝技术架构演进之路
1.概述 本文以淘宝为例，介绍从一百到千万级并发情况下服务端架构的演进过程，同时列举出每个演进阶段遇到的相关技术，让大家对架构的演进有一个整体的认知，最后汇总一些架构的设计原则。 2.基本概念 在介绍架构之前，为了避免读者对架构设计中的一些概念不了解，下面对接个最基础的概念进行介绍 ...
揭秘淘宝286亿海量图片存储与处理架构
8月27日下午，在IT168系统架构师大会存储与系统架构分论坛上，淘宝网技术委员会主席，淘宝网核心工程师章文嵩向我们详细介绍了淘宝网图片处理与存储系统的架构。章文嵩博士的演讲日程包括了淘宝的整个系统架构、淘宝图片存储系统架构，淘宝网独立开发的TFS集群文件系统，前端CDN系统以及淘宝网在节能服务器 ...
高并发访问和海量数据 大型网站架构技术一览
高并发访问和海量数据 大型网站架构技术一览 林涛 发表于：2016-4-19 12:12 分类：WebServer 标签：并发，海量数据，高并发 44次 大型网站的挑战主要来自庞大的用户，高并发的访问和海量数据，任何简单的业务一旦需要处理数以P计的数据和面对数以亿计的用户，问题就会 ...
关于海量用户访问的通用技术架构的一些思考
最近12306.cn网站事件引起了很多人对架构的思考。这种访问量巨大的网站究竟该如何来做架构，下面是我的想法： 因为要考虑到通用抛开业务单纯从技术层面分析，要承载海量用户的访问，要求网站高性能和高可用、安全可靠 、高可收缩性 、易于维护 等等一堆硬性的要求。对架构师来说 ...
股票分钟数据存储方案及海量数据架构方案
场景20亿分钟K线数据的更新及查找 1，了解数据使用情况 这些k线数据用于回测，而对于分钟k线回测： 大部分回测周期在近几个月或近几年 热门股票几多沪深300、上证50等 分钟回测需要一定的实时性既在开盘时间进行回测 ...
我的《海量数据处理与大数据技术实战》出版啦！
我是如何持续写作的？ 其实，关于写作，我也没多想，就是想着总结自己学习和工作中遇到的一些问题。我最开始写文章并不是在CSDN或者其他的一些博客平台，而是在QQ空间。那时的我还在上学，在QQ空间里 ...
利用大数据技术处理海量GPS数据
我秀中国物联网地图服务平台目前接入的监控车辆近百万辆，每天采集GPS数据7亿多条，产生日志文件70GB，使用传统的数据处理方式非常耗时。 比如，仅仅对GPS做一些简单的统计分析，程序就需要几个小时才能跑完一天的数据，完全达不到实时 ...