访问node1： 192.168.56.11:7180
Username: admin
Password: admin#进入欢迎界面
Welcome--Accept License
选免费版
Add Cluster - Installation -- Cluster Basics
填集群名称
填写各节点的ip并搜索,
也支持10.1.1.[1-4]和host[1-3].example.com批量填写
在当前管理的主机中选择要加入集群的主机
parcel仓库的设置参考:https://www.cnblogs.com/hongfeng2019/p/11345057.html
install Parcels
点击主机检查
检查结果:这里是因为笔者公司用的openstack,没有重启权限,关闭透明大页设置后需重启.
集群设置:这里选Essentials
调整服务在各节点, 如datanode 4个节点,ZK3个节点, nodemanager4个
数据库连通性检测:
遇到的坑:
连接不上,把 scm | 195.189.142.% drop掉就可以了
mysql> select user,host from mysql.user where user='scm';
+------+---------------+
| user | host |
+------+---------------+
| scm | % |
| scm | 195.189.142.% |
| scm | localhost |
+------+---------------+
3 rows in set (0.00 sec)
mysql> drop user scm@'195.189.142.%';
审核更改:
命令运行检查:
检查有时出错是网络问题,重新再运行一次就可以了.
最后,恭喜您,进入集群管理界面,修改密码
https://www.cndba.cn/dave/article/3260
测试:
先做一个1.txt文件, copy一段英文,传到htfs
hadoop jar /opt/cloudera/parcels/CDH-6.2.0-1.cdh6.2.0.p0.967373/jars/hadoop-mapreduce-examples-3.0.0-cdh6.2.0.jar wordcount /1.txt /1.output