問題現象 問題描述 　　公司業務程序需求每30分鍾mv 一萬多個文件，如果三十分鍾之內當前的文件內容沒有全部移動，程序報錯並且停止。 分析 　　通過分析，發現在啟動balancer和不啟動balancer的情況下，namenode的處理能力差別巨大。不啟動balancer，一萬多個文件不到 ...

昨天還好好的集群，今天早上來看又掛掉了，還好是家里的測試服務器集群。。。 首先，查看了Namenode的狀態，發現兩台Namenode只剩下一台了，趕緊到掛了的那台去查看了logs下的日志： 以上是hadoop-hadooptest-namenode ...

背景： 　　因業務要求進行了一次業務數據的全量采集，采集過程中集群namenode與journalNode通訊超時導致namenode掛掉。如下圖 Error: starting log segment 11771414 failed for required journal ...

1.使用eclipse開發mapreduce程序，發現是跑在本地（LocalRunnerJob），而不是集群。 解決方法：將程序打成jar包，然后使用hadoop命令行運行。打包用Fat jar這個 ...

最近工作中開始搭建工程，發現一個很迷惑的地方 DS Replicas。 之前接觸Eureka也只是簡單搭建。 現象描述： eureka在k8s環境起了兩台。回家后本地搭建配置文件如下：applic ...

前言 眾所周知，背包是可以掛在樹上的。 有依賴的背包問題 顧名思義，有依賴的背包里的物品的選擇是有依賴的廢話即選擇一個物品，就必須先選某個物品。這個必須先選的物品我們稱之為依賴物品。一般地，某個物品的依賴物品只有一個（如果有多個的話可以考慮把出題人掛在樹上）（但某個物品可以同時被多個物品依賴 ...

druid是什么注不再贅述了。想了解直接參見 https://github.com/alibaba/druid/wiki/%E5%B8%B8%E8%A7%81%E9%97%AE%E9%A2%98 ...

我在CentOS遇到這個問題，50070不行但8088可以，嘗試了各種方法無法解決，各個進程全都啟動，格式化namenode，各種配置正常均無法解決。后來覺得是默認訪問端口沒有生效，所以嘗試添加端口配如下mapred-site.xml 添加下面兩個<property> < ...