一：将数据导入hive（六种方式） 1.从本地导入 　　load data local inpath 'file_path' into table tbname; 　　用于一般的场景。 　　 ...

1.case的用法 　　）格式1 　　　　case col 　　　　when value then '' 　　　　when value then '' 　　　　else 　　　　　　'' ...

1.查找命令 　　bin/hadoop 2.启动两个HDFS集群 　　hadoop0，hadoop1，都是伪分布式的集群 　　 3.启动hadoop3的zookeeper与hba ...

HDFS Using QJM 　　HA使用的是分布式的日志管理方式 一：概述 1.背景 　　如果namenode出现问题，整个HDFS集群将不能使用。 　　是不是可以有两个namenode呢 ...

一：GC的调优 1.jvm的内存 　　新生代：存活时间较短，一般存储刚生成的一些对象 　　老年代：存活时间较长，主要存储在应用程序中生命周期较长的对象 　　永久代：一般存储meta和class的信 ...

一：maven的安装 1.安装配置maven环境变量 　　 2.验证 　　 二：eclipse的安装 3.解压配置eclipse 　　 4.启动eclipse，必须在虚拟机的ec ...

关于shuffle的过程图。 　　 一：概述shuffle 　　Shuffle是mapreduce的核心，链接map与reduce的中间过程。 　　Mapp负责过滤分发，而reduce则 ...

1.存储格式 　　textfile 　　rcfile 　　orc 　　parquet 2.存储方式 　　按行存储 　　　　-》textfile 　　按列存储 　　　　-》par ...

一：下载安装 1.下载安装 　　 2.开启hadoop与zookeeper 　　 3.修改配置文件hbase-env　 　　export JAVA_HOME=/opt/modules ...

一：准备工作 1.新建class类 　　 2.开启HDFS服务 　　 3.将配置文件拷贝进resources路径 　　 　　方便了Configuration的读取配置。 ...