相关知识点 shell的循环；shell连接hive-hive语句执行、hive文件执行；传参；输入输出文件，文件删除 shell中list的循环： shell中的判断： cat配合重定向生成文件 EOF只是一个分界符，当然也可以用abcde替换 ...

shell脚本后台运行 20191024 nohup ( no hang up) (CTRL-C)无效，但是关掉终端会终止执行 & (后天执行) (CTRL-C)有效，但是关掉终端不会终止执行 一般配合使用 参考 参考1 参考2 参考3 ...

以下脚本功能是用shell脚本登录sqlplus连接oracle，将执行sql语句查询的结果赋值给shell脚本中的变量 ...

错误一： Hive的where后不能用字段的别名， 错误二： hive的groupby中不能用自己定义函数，否则报错（用嵌套select取代） 错误三： 运行：$ ./hive_game_operationstatis5.sh时，报错信息例如以 ...

今天做个linux定时任务（每晚12点把表汇总）。 顺便写个博客记录一下~~ 为什么用linux定时任务，而不是在项目加定时任务呢？原因就是防止因为各种原因项目崩溃。。所以就用了更加稳定的linu ...

def generate_csv_source(data_file): #判断文件是否存在 if not os.path.exists(data_file): # 拉取hive表数据 cmd_sql = 'hive -e "set hive.cli.print.header=true ...

背景： 在做项目过程中不可能hive表中都是非中文字段。在最近做的项目中就遇到需要在beeline界面上执行查询脚本，但脚本中包含中文，正常一个脚本用文本写好后，粘贴到beeline窗口运行时，发现中文是乱码，而且回车执行也抛出了错误。 解决方案： 使用"beeline -f 文件"解决问题 ...

　　crontab运行脚本存在两大问题：环境变量和路径，从而导致单独运行脚本没问题，但用crontab运行就报错。 1、环境变量 　　描述问题：crontab: usage error: no arguments permitted after this option 　　因为crontab ...