大数据技术之Hadoop （HDFS文件系统） 一 HDFS概念 1.1 概念 HDFS，它是一个文件系统，全称：Hadoop Distributed File System，用于存储文件通过 ...

大数据技术之Hadoop（MapReduce） 一 MapReduce入门 1.1 MapReduce定义 Mapreduce是一个分布式运算程序的编程框架，是用户开发“基于hadoop的数据分 ...

第三章 分布式文件系统HDFS 3.1 HDFS简介 HDFS（Hadoop Distributed File System）是Hadoop项目的核心子项目，是分布式计算中数据存储管理的基础，是基 ...

大数据技术之Hadoop（Map-Reduce） 一 MapReduce入门 1.1 MapReduce定义 Mapreduce是一个分布式运算程序的编程框架，是用户开发“基于hadoop的数据 ...

大数据技术之Azkaban 一 概述 1.1 为什么需要工作流调度系统 1）一个完整的数据分析系统通常都是由大量任务单元组成： shell脚本程序，java程序，mapreduce程序、hiv ...