jenkins安裝啟動后，使用systemctl來進行進程監控 # systemctl enable jenkins 但是還是經常發生jenkins進程掛了，不會自動重啟，通過syste ...

yarn中有一個比較重要的配置yarn.nodemanager.local-dirs，如果配置的不好，在飽和狀態運行下集群會出現很多問題：1 默認配置${hadoop.tmp.dir}/nm-local-dir，系統盤通常只有幾百G，配置在這里會經常報磁盤空間不足的錯誤；2 配置到其中1個數據盤 ...

logstash一個實例運行多個配置文件，將所有配置文件放到以下目錄即可 /usr/share/logstash/pipeline 但是默認行為不是每個配置文件獨立運行，而是作為一個整體，每個input會匹配所有的filter，然后匹配所有的output，可能會導致數據被錯誤的處理以及發送到 ...

spark 2.4.3 spark讀取hive表，步驟： 1）hive-site.xml hive-site.xml放到$SPARK_HOME/conf下 2）enableHiveSuppor ...

問題：spark中如果有兩個DataFrame（或者DataSet），DataFrameA依賴DataFrameB，並且兩個DataFrame都進行了cache，將DataFrameB unpersi ...

kudu的副本數量是在表上設置，可以通過命令查看 其中RF即replication factor； 副本數量只能在創建表時指定，創建后不能修改，並且副本數量必須為奇數 By ...

docker container啟動失敗，報錯：Exited (137) *** ago，比如 Exited (137) 16 seconds ago 這時通過docker logs查不 ...

，其次通過spark.yarn.jars方式配置你會發現根本不會生效，來看為什么 查看LauncherMapper的日志 Sp ...