原文:Hadoop2 实战系列之1 -- Hortonworks Sandbox的安装和使用

欢迎转载,转载请注明出处,谢谢,徽沪一郎。 概要 本文主要讲述如何利用hortonworks sanbox来搭建hadoop 的学习环境。Hortonworks sanbox集成了hadoop 及其上的一些常用工具如hive, pig等。 下载 下载地址 http: hortonworks.com products hortonworks sandbox 导入到virtualbox 在virtua ...

2014-02-20 12:25 1 6019 推荐指数:

查看详情

Hadoop2源码分析-RPC探索实战

1.概述   在《Hadoop2源码分析-RPC机制初识》博客中,我们对RPC机制有了初步的认识和了解,下面我们对Hadoop V2的RPC机制做进一步探索,在研究Hadoop V2的RPC机制,我们需要掌握相关的Java基础知识,如:Java NIO、动态代理与反射等。本篇博客介绍的内容目录 ...

Fri May 08 19:05:00 CST 2015 0 2227
Hadoop 发行版本 Hortonworks 安装详解(一) 准备工作

一、前言 目前Hadoop发行版非常多,所有这些发行版均是基于Apache Hadoop衍生出来的,之所以有这么多的版本,完全是由Apache Hadoop的开源协议决定的:任何人可以对其进行修改,并作为开源或商业产品发布/销售。 Hortonworks这个名字源自儿童书中一只叫Horton ...

Sun Jan 07 05:37:00 CST 2018 0 7568
MySQL Sandbox安装使用

前言 经常看见新同学对于安装MySQL十分惧怕,这是因为不熟悉的缘故,确实源码编译比较麻烦,缺少各种依赖包也够折腾的。当然还有预编译包,但是对于新同学来说好像都挺麻烦的。当然有yum安装,但是我们需要多实例,测试多个版本就不方便了。那么我来说说比较简单的方法。使用沙箱环境。MySQL ...

Wed Jun 04 19:56:00 CST 2014 0 2780
Hadoop 发行版本 Hortonworks 安装详解(二) 安装Ambari

一、通过yum安装ambari-server 由于上一步我们搭建了本地源,实际上yum是通过本地源安装的ambari-server,虽然也可以直接通过官方源在线安装,不过体积巨大比较费时。 这里我选择头结点1作为安装ambari的服务器。 二、设置ambari-server ...

Thu Jan 25 08:13:00 CST 2018 0 2297
Hadoop2的HA安装(high availability):JournalNode+ zookeeper

前面介绍过使用NFS+zookeeper来解决namenode单点失败问题,因为NFS可能也会存在单点问题,所以hadoop提供了一种叫做JournalNode技术,这项技术可以在JournalNode节点间共享数据 我们来介绍这一种技术:JournalNode+ zookeeper ...

Tue May 13 18:13:00 CST 2014 3 5159
Hadoop2配置详解

配置文件 hadoop的配置是由两种重要类型的配置文件进行驱动的: 默认是只读的配置: core-default.xml, hdfs-default.xml, yarn-default.xml and mapred-default.xml。 特殊节点配置 ...

Sat Dec 20 18:50:00 CST 2014 0 2628
Hadoop2Hadoop3的区别

在这篇文章中,我们将讨论Hadoop 2.x与Hadoop 3.x之间的比较。 Hadoop3版本中添加了哪些新功能,Hadoop3中兼容的Hadoop 2程序,Hadoop 2和Hadoop 3有什么区别?我们希望Hadoop 2和Hadoop 3之间的这个功能的区别将帮助回答 ...

Fri May 01 00:32:00 CST 2020 0 5468
Hadoop2Hadoop1的区别

Hadoop2Hadoop1的区别 1. Namenode NameNode其实是Hadoop的一个目录服务,它包含着整个集群存储的文件的元数据。 早期发行的Hadoop1版本将所有HDFS目录和文件的元数据存储到一个NameNode单点。整个集群的数据状态取决于这个单点 ...

Tue Aug 29 00:55:00 CST 2017 0 1161
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM