相關知識點 shell的循環；shell連接hive-hive語句執行、hive文件執行；傳參；輸入輸出文件，文件刪除 shell中list的循環： shell中的判斷： cat配合重定向生成文件 EOF只是一個分界符，當然也可以用abcde替換 ...

shell腳本后台運行 20191024 nohup ( no hang up) (CTRL-C)無效，但是關掉終端會終止執行 & (后天執行) (CTRL-C)有效，但是關掉終端不會終止執行 一般配合使用 參考 參考1 參考2 參考3 ...

以下腳本功能是用shell腳本登錄sqlplus連接oracle，將執行sql語句查詢的結果賦值給shell腳本中的變量 ...

錯誤一： Hive的where后不能用字段的別名， 錯誤二： hive的groupby中不能用自己定義函數，否則報錯（用嵌套select取代） 錯誤三： 運行：$ ./hive_game_operationstatis5.sh時，報錯信息例如以 ...

今天做個linux定時任務（每晚12點把表匯總）。 順便寫個博客記錄一下~~ 為什么用linux定時任務，而不是在項目加定時任務呢？原因就是防止因為各種原因項目崩潰。。所以就用了更加穩定的linu ...

def generate_csv_source(data_file): #判斷文件是否存在 if not os.path.exists(data_file): # 拉取hive表數據 cmd_sql = 'hive -e "set hive.cli.print.header=true ...

背景： 在做項目過程中不可能hive表中都是非中文字段。在最近做的項目中就遇到需要在beeline界面上執行查詢腳本，但腳本中包含中文，正常一個腳本用文本寫好后，粘貼到beeline窗口運行時，發現中文是亂碼，而且回車執行也拋出了錯誤。 解決方案： 使用"beeline -f 文件"解決問題 ...

　　crontab運行腳本存在兩大問題：環境變量和路徑，從而導致單獨運行腳本沒問題，但用crontab運行就報錯。 1、環境變量 　　描述問題：crontab: usage error: no arguments permitted after this option 　　因為crontab ...