【原创】大叔经验分享（63）kudu vs parquet
一 对比 存储空间对比： 查询性能对比： 二 设计方案 将数据拆分为：历史数据（hdfs+parquet+snappy）+ 近期数据（kudu），可以兼具各种优点： 1）整体低于10%的磁盘占用； 2）更少的查询耗时； 3）近期数据实时更新； 4）近期 ...
原文：【原创】大叔经验分享（59）kudu查看table size
kudu并没有命令可以直接查看每个table占用的空间，可以从cloudera manager上间接查看 CM is scrapping and aggregating the metrics pages from the tablet server instances for each tablet table. ...
2019-05-21 20:11 0 612 推荐指数：
相关推荐
【原创】大叔经验分享（55）spark连接kudu报错
spark-2.4.2kudu-1.7.0 开始尝试 1）自己手工将jar加到classpath spark-2.4.2-bin-hadoop2.6+kudu-spark2_2.11-1.7.0-cdh5.16.1.jar 2）采用官方的方式（将kudu版本改为1.7.0 ...
【原创】大叔经验分享（60）hive和spark读取kudu表
从impala中创建kudu表之后，如果想从hive或spark sql直接读取，会报错： 官方的解释是： You will encounter this exception when you try to access a Kudu table using ...
【原创】大叔经验分享（62）kudu副本数量
kudu的副本数量是在表上设置，可以通过命令查看 其中RF即replication factor； 副本数量只能在创建表时指定，创建后不能修改，并且副本数量必须为奇数 By default, Kudu tables created through Impala use ...
【原创】大叔经验分享（54）flume kudu sink运行一段时间kudu client报错
flume kudu sink运行一段时间报错： 此时kudu master报错如下： W0506 10:19:37.484565 24970 negotiation.cc:320] Unauthorized connection attempt: Server ...
【原创】大叔经验分享（53）kudu报错unable to find SASL plugin: PLAIN
kudu安装后运行不正常，master中找不到任何tserver，查看tserver日志发现有很多报错： Failed to heartbeat to master:7051: Invalid argument: Failed to ping master at master:7051 ...
【原创】大叔经验分享（58）kudu写入压力大时报错
kudu写入压力大时报错 19/05/18 16:53:12 INFO AsyncKuduClient: Invalidating location fd52e4f930bc45458a8f29ed118785e3(server002:7050) for tablet ...
【原创】大叔经验分享（1）在yarn上查看hive完整执行sql
hive执行sql提交到yarn上的任务名字是被处理过的，通常只能显示sql的前边一段和最后几个字符，这样就会带来一些问题： 1）相近时间提交了几个相近的sql，相互之间无法区分； 2）一个任务有问题，想看下这个任务具体执行的是什么？是谁的任务？ 通过以下方法可以查看： 1）如果任务 ...