文章目录 前言 主要步骤 安装mysql 配置hive元数据库 Hive安装 设置环境变量 设置配置文件 准备mysql-connector-java 初始化元数据 启动 ...

1、本次Hadoop源码阅读环境使用的阅读工具是idea，Hadoop版本是2.7.3。需要安装的工具包括idea、jdk、maven、protobuf等 2、jdk，使用的版本是1.8版，在jdk官网下载jdk-8u111-macosx-x64.dmg，点击安装，一路next。 3、idea ...

　　接上篇：Hadoop3集群搭建之——虚拟机安装 　　下篇：Hadoop3集群搭建之——配置ntp服务 　　　　Hadoop3集群搭建之——hive安装 　　　　Hadoop3集群搭建之——hbase安装及简单操作 上篇已经安装好了虚拟机了，现在开始配置环境，安装hadoop 注 ...

1. 下载Hadoop 1.1 官网下载Hadoop http://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-2.9.0/hadoop-2.9.0.tar.gz 打开上述链接，进入到下图，可以随意下载一个完整 ...

简介与环境准备 　　hadoop的核心是分布式文件系统HDFS以及批处理计算MapReduce。近年，随着大数据、云计算、物联网的兴起，也极大的吸引了我的兴趣，看了网上很多文章，感觉还是云里雾里，很多不必要的配置都在入门教程出现。通过思考总结与相关教程，我想通过简单的方式传递给同样想入 ...

一、 安装ssh免密登录 命令：ssh-keygen overwrite(覆盖写入)输入y 一路回车 将生成的密钥发送到本机地址 ssh-copy-id localhost （若报错命令无法找到则需要安装openssh-clients） yum –y ...

今天终于把hadoop集群环境给搭建起来了，能够运行单词统计的示例程序了。 集群信息如下： 主机名 Hadoop角色 Hadoop jps命令结果 Hadoop用户 Hadoop安装目录 ...

集群上时间同步：sudo ntpdate time.nist.gov hadoop 大数据 去IOE Cluster 1T = 1024G 1P = 1024T 1E = 1024P 1Z = 1024E 1Y = 1024Z ...