高可用Hadoop平台－实战
1.概述 今天继续《高可用的Hadoop平台》系列，今天开始进行小规模的实战下，前面的准备工作完成后，基本用于统计数据的平台都拥有了，关于导出统计结果的文章留到后面赘述。今天要和大家分享的案例是一个基于电商网站的用户行为分析，这里分析的指标包含以下指标： 统计每日PV 每日注册 ...
原文：配置高可用的Hadoop平台
.概述 在Hadoop .x之后的版本，提出了解决单点问题的方案 HA High Available 高可用 。这篇博客阐述如何搭建高可用的HDFS和YARN，执行步骤如下： 创建hadoop用户 安装JDK 配置hosts 安装SSH 关闭防火墙 修改时区 ZK 安装，启动，验证 HDFS HA的结构图 角色分配 环境变量配置 核心文件配置 slave 启动命令 hdfs和yarn的相关命令 ...
2015-02-25 15:34 17 19644 推荐指数：
相关推荐
Hadoop高可用平台搭建
文章概览： 1、机器规划和预配置 2、软件安装 3、集群文件配置 4、启动集群 5、HA验证 6、注意事项 7、小结 机器规划和预配置 主机/进程 NN DN RM NM ...
高可用Hadoop平台－启航
1.概述 在上篇博客中，我们搭建了《配置高可用Hadoop平台》，接下来我们就可以驾着Hadoop这艘巨轮在大数据的海洋中遨游了。工欲善其事，必先利其器。是的，没错；我们开发需要有开发工具（IDE）；本篇文章，我打算讲解如何搭建和使用开发环境，以及编写和讲解WordCount这个例 ...
高可用Hadoop平台－Hue In Hadoop
1.概述 前面一篇博客《高可用Hadoop平台－Ganglia安装部署》，为大家介绍了Ganglia在Hadoop中的集成，今天为大家介绍另一款工具——Hue，该工具功能比较丰富，下面是今天为大家分享的内容目录： Hue简述 Hue In Hadoop 截图预览 ...
高可用Hadoop平台－HBase集群搭建
1.概述 今天补充一篇HBase集群的搭建，这个是高可用系列遗漏的一篇博客，今天抽时间补上，今天给大家介绍的主要内容目录如下所示： 基础软件的准备 HBase介绍 HBase集群搭建 单点问题验证 截图预览 那么，接下来我们开始今天的HBase集群搭建学习 ...
高可用Hadoop平台－集成Hive HAProxy
1.概述 这篇博客是接着《高可用Hadoop平台》系列讲，本篇博客是为后面用 Hive 来做数据统计做准备的，介绍如何在 Hadoop HA 平台下集成高可用的 Hive 工具，下面我打算分以下流程来赘述： 环境准备 集成并配置 Hive 工具 使用 Java API 开发 ...
高可用Hadoop平台－Ganglia安装部署
1.概述 最近，有朋友私密我，Hadoop有什么好的监控工具，其实，Hadoop的监控工具还是蛮多的。今天给大家分享一个老牌监控工具Ganglia，这个在企业用的也算是比较多的，Hadoop对它的兼容也很好，不过就是监控界面就不是很美观。下次给大家介绍另一款工具——Hue，这个界面官方称为 ...
高可用Hadoop平台－运行MapReduce程序
1.概述 最近有同学反应，如何在配置了HA的Hadoop平台运行MapReduce程序呢？对于刚步入Hadoop行业的同学，这个疑问却是会存在，其实仔细想想，如果你之前的语言功底不错的，应该会想到自动重连，自动重连也可以帮我我们解决运行MapReduce程序的问题。然后，今天我赘述的是利用 ...