在 hadoop1生成ca並拷貝至hadoop2,hadoop2。 （密碼隨便設置，大於6位即可。如adminadmin） cd /etc/https openssl req -new -x509 -keyout hdfs_ca_key -out hdfs_ca_cert -days ...

剛接觸Hadoop三天，今天終於成功用三台機跑起測試，記錄一下。 一、准備（所有節點都需要做）： 系統：Ubuntu12.04 java版本：JDK1.7(安裝步驟看上一篇文章) SSH（ubuntu自帶） 確保三台機在同一個ip段，最好設置為靜態IP，重啟后就不用糾結IP變化 ...

在經過幾天折騰，終於將hadoop環境搭建成功，整個過程中遇到各種坑，反復了很多遍，光虛擬機就重新安裝了4、5次，接下來就把搭建的過程詳細敘述一下 0.相關工具： 　　 1,系統環境說明： 我這邊給出我的集群環境是由一台主節點master和2台從節點slave組成 ...

1. 系統環境Oracle VM VirtualBoxUbuntu 16.04Hadoop 2.7.4Java 1.8.0_111 hadoop集群master：192.168.19.128slave1：192.168.19.129slave2：192.168.19.130 MySQL安裝 ...

...

　　　　　　　　　　　　　　配置Kerberos實戰案例 　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　作者：尹正傑 版權聲明：原創作品，謝絕轉載！否則將追究法律責任。 一.Kerberos主要配置文件概述 二.配置 ...

1、數據去重 　　 "數據去重"主要是為了掌握和利用並行化思想來對數據進行有意義的篩選。統計大數據集上的數據種類個數、從網站日志中計算訪問地等這些看似龐雜的任務都會涉及數據去重。下面就進入這個實例的 ...

　　　　　　　　　　　　　　　　　　　Hadoop安全篇之Kerberos實戰案例 　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　作者：尹正傑 版權聲明：原創作品，謝絕轉載！否則將追究法律責任。 　　由於幾乎每天都在發生信用卡數據，社會保障號，醫療信息 ...