大数据基础原理
http://yuedu.baidu.com/ebook/d128cf8e33687e21ae45a935?pn=1&click_type=10010002 2.3 Hadoop原理2.3.1 Hadoop HDFS原理HDFS是一个高度容错性的系统，适合部署在廉价的机器 ...
原文：大数据 --> ProtoBuf的使用和原理
ProtoBuf的使用和原理 一 简介 Protobuf是一个灵活的 高效的用于序列化数据的协议。相比较XML和JSON格式，protobuf更小 更快 更便捷。Protobuf是跨语言的，并且自带了一个编译器 protoc ，只需要用它进行编译，可以编译成Java python C 等代码，然后就可以直接使用，不需要再写其他代码，自带有解析的代码。一条消息数据，用protobuf序列化后的大小是 ...
2016-04-23 12:01 0 6796 推荐指数：
相关推荐
大数据--Spark原理
Apache Spark是一个围绕速度、易用性和复杂分析构建的大数据处理框架，最初在2009年由加州大学伯克利分校的AMPLab开发，并于2010年成为Apache的开源项目之一，与Hadoop和Storm等其他大数据和MapReduce技术相比，Spark有如下优势： 1.运行 ...
大数据技术原理与应用——大数据概述
这篇博文里的好多内容之前在读《大数据时代》时读到过，所以就算是补上的读书笔记？ 信息科技为大数据时代提供技术支撑 1.存储设备容量不断增加 2.CPU处理能力大幅提升 3.网络带宽不断增加 数据产生方式的变革促成大数据时代的来临 1.运营式系统阶段 2. ...
大数据之Pregel图计算原理
大数据之图计算相关原理 最近在看大数据图计算相关的论文，故将图计算的原理简单梳理一遍，参考资料为<<大数据技术原理与应用>> 一、图计算简介 1.1. 图结构： 图形数据结构与一般数据结构不同，它必须要反映数据所对应元素之间的几何关系和拓扑关系。图形数据 ...
01大数据技术原理与应用
1、为什么产生大数据技术？随着时代的发展社会的进步，每天都处在信息爆炸的环境，大量的零散的信息充斥着我们的生活，想要促进信息技术与各行各业的深度融合与发展由此产生了大数据技术。大数据是信息通信技术发展积累至今，按照自身技术发展逻辑，从提高生产效率向更高级智能阶段的自然生长。无处不在的信息感知和采集 ...
大数据技术原理与应用(第2版)
本书系统介绍了大数据的相关知识，分为大数据基础篇、大数据存储与管理篇、大数据处理与分析篇、大数据应用篇。全书共15章，内容包含大数据的基本概念、大数据处理架构Hadoop、分布式文件系统HDFS、分布式数据库HBase、NoSQL数据库、云数据库、MapReduce、Spark、流计算、图计算 ...
大数据技术原理与运用知识
一·大数据概述 随着信息技术发展的巨大变革，企业和学术机构纷纷加大技术、资金和人员投入，加强对大数据关键技术的研发与运用。 大数据的发展历程总体上划分为三个重要阶段：萌芽期、成熟期和大规模应用期。 二.大数据概念 大数据的4个特点：数据量大、数据类型繁多、处理速度快和价值密度低 ...