記一次CDH修改IP
因機房服務器搬遷,需要修改CDH ip ,集群中有6台服務器. 其中配置了ldap,其中卡在了ldap中的坑太深,所以記錄一下. 一、服務器IP等地址修改 1.首先在安裝cloudera-manager的主機上，停止所有的cloudera管理進程 service ...
原文：記一次CDH集群日志數據清理
背景 集群運行一段時間 大概一月多 后，cloudera manager管理界面出現爆紅，爆紅的組件有hdfs zookeeper。 發現問題 點擊詳細內容查看，報日志空間不夠的錯誤。初步判斷是各個組件的日志數據把空間占滿了。 查看各個目錄下磁盤占用情況 cdh的各組件的日志一般在 var log目錄下，因此主要關注 查看 var log下使用空間較大的文件夾，並由大到小排列 還有一個是Cloud ...
2019-09-03 19:44 3 3563 推薦指數：
相關推薦
清理CDH日志
/ts/*/partition*/* -rf # clear cdh log rm -rf /var/l ...
記一次ceph集群的嚴重故障
問題：集群狀態，壞了一個盤，pg狀態好像有點問題[root@ceph-1 ~]# ceph -s cluster 72f44b06-b8d3-44cc-bb8b-2048f5b4acfe health HEALTH_WARN 64 pgs degraded ...
記一次 Kafka 集群線上擴容
前段時間收到某個 Kafka 集群的生產客戶端反饋發送消息耗時很高，於是花了一段時間去排查這個問題，最后該集群進行擴容，由於某些主題的當前數據量實在太大，在對這些主題遷移過程中話費了很長一段時間，不過這個過程還算順利，因為在遷移過程中也做足了各方面的調研，包括分區重平衡過程中對客戶端的影響，以及對 ...
記錄一次CDH集群郵件報警功能的設置
1.通用的配置CDH郵件報警設置 進入cloudera manager service頁面，選擇配置 左側菜單Alert Publisher 勾選【啟用電子郵件警報】 郵件服務協議smtp，如果使用ssl加密的，請選擇smtps 輸入郵件服務器主機名稱或者IP 輸入郵件 ...
記一次mongoexport導出數據
: mongo運行端口 -d ：數據庫名 -c ： ...
記一次Sqoop抽數據異常
1. 環境 Hadoop Sqoop awsEMR 2.8.5 1.4.7 5.26.0 2.錯誤描述 在使用Sqoop抽取MySQL數據時，使用hdfs作為緩存，s3作為hive的存儲地址 ...
記一次mysql數據恢復
確切的說更像是一次數據遷移。 背景介紹： 操作系統：Windows Server 2008 R2 數據庫版本：MySQL 5.5 數據庫的安裝目錄與數據文件目錄不在同一個磁盤，數據文件所在的目錄磁盤損壞。而后通過數據恢復工具恢復數據 ...