---恢复内容开始--- 一、集群规划 主机名 ip NameNode DataNode Yarn ZooKeeper JournalNode node01 192.168.1.201 ...
一系统版本及相关软件: CentOS . 位 . . .el .x ,选择安装时为mini选项,不安装图形界面 hadoop . . .tar.gz jdk u linux x .tar.gz zookeeper . . .tar.gz apache hive . . bin.tar.gz hbase . . bin.tar.gz hadoop . . 与 hbase . . 版本匹配 Hado ...
2018-09-10 16:47 0 1088 推荐指数:
---恢复内容开始--- 一、集群规划 主机名 ip NameNode DataNode Yarn ZooKeeper JournalNode node01 192.168.1.201 ...
首先需要准备的软件都有:Centos系统、SecureCRT 8.5、VMware Workstation Pro、jdk-8u172-linux-x64.tar.gz基本上这个软件就是今天的战场。 ...
迁移到:http://www.itrensheng.com//archives/cloudera_manager_install ...
本篇文章是基于Docker搭建大数据集群系列的开篇之作 主要内容 docker搭建 docker部署CentOS 容器免密钥通信 容器保存成镜像 docker镜像发布 环境 Linux 7.6 一、Docker安装 安装 ...
Docker搭建大数据集群 (1)本机系统设置 电脑设置虚拟缓存(设置为自动管理) 虚拟机设置内存和CPU 内存设置为8G(或以上) CPU稍微设置高一点(三个虚拟化能开就开) 虚拟机系统配置阿里源 虚拟机更新包 (2)安装Docker 移除 ...
1、virtualbox 1、关闭虚拟机选择第一个休眠,会记录各种进程的状态。如果直接关掉虚拟机会关闭各种进程,导致环境崩溃。 2、Centos7 1、修改网络 网卡桥接,配置主机和虚拟机相互pingtong vim /etc/sysconfig ...
基于Docker搭建大数据集群(六)Hive搭建 前言 之前搭建的都是1.x版本,这次搭建的是hive3.1.2版本的。。还是有一点细节不一样的 Hive现在解析引擎可以选择spark,我是用spark做解析引擎的,存储还是用的HDFS 我是在docker里面搭建 ...
首先我们来认识一下HDFS, HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。它其实是将一个大文件分成若干块保存在不同服务器的多个节点中。通过联网让用户感觉像是在本地一样查看文件,为了降低文件丢失造成的错误,它会为每个小文件复制多个副本(默认 ...