原文:hadoop源码学习(一)--configuration类详解

学习hadoop也有一段时间了,本来一直在dataguru的日志系统上写一些学习工作的总结,但是比较的随意,没有太多的总结性。到最后因为那边的编辑系统不太好使,就决定转过来了。好了,废话少说,开始开源的hadoop项目源码学习旅途。 这个系列的博客将根据 hadoop权威指南 第三版 的第五章开始,逐步分析学习文章中第一次出现的类。 第五章开始,就是Configuration,那就从这里入手。 ...

2013-03-23 15:20 1 15181 推荐指数:

查看详情

Hadoop源码Configuration

  本文hadoop版本为最新版本2.6。Configuration做为Hadoop的一个基础功能承担着重要的责任,为Yarn、HSFS、MapReduce、NFS、调度器等提供参数的配置、配置文件的分布式传输(实现了Writable接口)等重要功能。   Hadoop的加载配置文件的功能 ...

Sun Dec 28 23:00:00 CST 2014 0 4308
hadoopConfiguration剖析

Configurationhadoop中五大组件的公用,所以放在了core下,org.apache.hadoop.conf.Configruration。这个是作业的配置信息,任何作用的配置信息必须通过Configuration传递,因为通过Configuration可以实现在多个 ...

Thu Dec 11 05:54:00 CST 2014 0 6552
MyBatis学习笔记(三) Configuration

一、初探Configuration 我们先来看一下MyBatis的XML配置文件的结构,(摘自mybatis.org) 下面这个是Configuration的部分变量 一点不一样是不是??? 其实Configuration是由XMLConfigBuilder(继承 ...

Tue Apr 23 08:10:00 CST 2019 0 837
Hadoop学习笔记(9) ——源码初窥

Hadoop学习笔记(9) ——源码初窥 之前我们把Hadoop算是入了门,下载的源码,写了HelloWorld,简要分析了其编程要点,然后也编了个较复杂的示例。接下来其实就有两条路可走了,一条是继续深入研究其编程及部署等,让其功能使用的淋漓尽致。二是停下来,先看看其源码,研究下如何实现 ...

Mon Aug 18 15:02:00 CST 2014 2 6122
Hadoop源码学习笔记(1) ——第二季开始——找到Main函数及读一读Configure

Hadoop源码学习笔记(1) ——找到Main函数及读一读Configure 前面在第一季中,我们简单地研究了下Hadoop是什么,怎么用。在这开源的大牛作品的诱惑下,接下来我们要研究一下它是如何实现的。 提前申明,本人是一直搞.net的,对java略为生疏,所以在学习该作品时 ...

Thu Oct 30 15:50:00 CST 2014 1 2497
[Hadoop源码详解]之一MapReduce篇之InputFormat

个人小站,正在持续整理中,欢迎访问:http://shitouer.cn 小站博文地址:[Hadoop源码详解]之一MapReduce篇之InputFormat 1. 概述 我们在设置MapReduce输入格式的时候,会调用这样一条语句 ...

Thu Feb 28 16:52:00 CST 2013 3 8807
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM