【原创】大叔经验分享（48）oozie中通过shell执行impala
oozie中通过shell执行impala，脚本如下： 直接执行shell脚本正常，在oozie中执行报错： 按照提示修改PYTHON_EGG_CACHE即可 另外还可以通过beeline连接，则没有python的问题， 详见：https ...
原文：【原创】大叔经验分享（83）impala执行多个select distinct
impala在一个select中执行多个count distinct时会报错，比如执行 select key, count distinct column a , count distinct column b from test table group by key 会报错 Query submitted at: : : Coordinator: http: DataOne : ERROR: A ...
2019-09-28 01:13 0 1719 推荐指数：
相关推荐
【原创】大叔经验分享（33）hive select count为0
hive建表后直接将数据文件拷贝到table目录下，select * 可以查到数据，但是select count(1) 一直返回0，这个是因为hive中有个配置 hive.stats.autogather=true Enables automated gathering ...
【原创】大叔经验分享（1）在yarn上查看hive完整执行sql
hive执行sql提交到yarn上的任务名字是被处理过的，通常只能显示sql的前边一段和最后几个字符，这样就会带来一些问题： 1）相近时间提交了几个相近的sql，相互之间无法区分； 2）一个任务有问题，想看下这个任务具体执行的是什么？是谁的任务？ 通过以下方法可以查看： 1）如果任务 ...
【原创】大叔经验分享（106）Impala读取parquet时间字段时区偏移问题
parquet文件中的时间字段，在hive和spark-sql中读取正常，在impala中读取会偏移8个小时（少），经测试结果如下： 一 不修改impala配置 1 由spark或hive写入parquet spark和hive读取正常 impala读取偏移8小时（少），需要手工 ...
【原创】大叔经验分享（88）jenkins假死
jenkins安装启动后，使用systemctl来进行进程监控 # systemctl enable jenkins 但是还是经常发生jenkins进程挂了，不会自动重启，通过syste ...
大叔经验分享（127）impala3.4编译安装
准备 maven 下载 https://downloads.apache.org/impala/3.4.0/apache-impala-3.4.0.tar.gz 编译 报错处理 [ERROR] Failed to execute goal on project ...
【原创】大叔经验分享（82）logstash一个实例运行多个配置文件
logstash一个实例运行多个配置文件，将所有配置文件放到以下目录即可 /usr/share/logstash/pipeline 但是默认行为不是每个配置文件独立运行，而是作为一个整体，每个input会匹配所有的filter，然后匹配所有的output，可能会导致数据被错误的处理以及发送到 ...
【原创】大叔经验分享（2）为什么hive在大表上加条件后执行limit很慢
问题重现 select id from big_table where name = 'sdlkfjalksdjfla' limit 100; 首先看执行计划： hive> explain select * from big_table where name ...