在 hadoop1生成ca并拷贝至hadoop2,hadoop2。 （密码随便设置，大于6位即可。如adminadmin） cd /etc/https openssl req -new -x509 -keyout hdfs_ca_key -out hdfs_ca_cert -days ...

刚接触Hadoop三天，今天终于成功用三台机跑起测试，记录一下。 一、准备（所有节点都需要做）： 系统：Ubuntu12.04 java版本：JDK1.7(安装步骤看上一篇文章) SSH（ubuntu自带） 确保三台机在同一个ip段，最好设置为静态IP，重启后就不用纠结IP变化 ...

在经过几天折腾，终于将hadoop环境搭建成功，整个过程中遇到各种坑，反复了很多遍，光虚拟机就重新安装了4、5次，接下来就把搭建的过程详细叙述一下 0.相关工具： 　　 1,系统环境说明： 我这边给出我的集群环境是由一台主节点master和2台从节点slave组成 ...

1. 系统环境Oracle VM VirtualBoxUbuntu 16.04Hadoop 2.7.4Java 1.8.0_111 hadoop集群master：192.168.19.128slave1：192.168.19.129slave2：192.168.19.130 MySQL安装 ...

...

　　　　　　　　　　　　　　配置Kerberos实战案例 　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　作者：尹正杰 版权声明：原创作品，谢绝转载！否则将追究法律责任。 一.Kerberos主要配置文件概述 二.配置 ...

1、数据去重 　　 "数据去重"主要是为了掌握和利用并行化思想来对数据进行有意义的筛选。统计大数据集上的数据种类个数、从网站日志中计算访问地等这些看似庞杂的任务都会涉及数据去重。下面就进入这个实例的 ...

　　　　　　　　　　　　　　　　　　　Hadoop安全篇之Kerberos实战案例 　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　作者：尹正杰 版权声明：原创作品，谢绝转载！否则将追究法律责任。 　　由于几乎每天都在发生信用卡数据，社会保障号，医疗信息 ...