花费 67 ms
hadoop三大核心组件

Hadoop集群具体来说包含两个集群:HDFS集群和YARN集群,两者逻辑上分离,但物理上常在一起。 (1)HDFS集群:负责海量数据的存储,集群中的角色主要有 NameNode / DataNod ...

Wed Sep 26 00:59:00 CST 2018 0 11444
datax将mysql数据导入hive表

环境:CDH 5.12.1版本 ,mysql 5.7 1、mysql表结构 2、mysql表数据(user) 3、下载datax 4、在datax的job目录编写一个 ...

Thu Oct 22 01:06:00 CST 2020 1 4017
springboot和hadoop2.7.7集成开发

1、本人在腾讯云安装hadoop2.7.7,详细安装请看以前的博客 2、pom.xml文件 View Code 3、yml文件 ...

Thu Aug 15 00:33:00 CST 2019 0 1849
Hbase shell操作表

启动hbase shell 1、创建表,查看表 2、查看表信息 3、 修改表结构 4、insert数据到表中 5、获取数 ...

Tue Aug 13 21:12:00 CST 2019 0 959
hadoop生态--Kafka

分布式流处理平台,是一个分布式消息中间件系统。 一、jms 1、什么是jms java message service(java 消息服务):java程序需要异步发送消息的时候使用的服 ...

Fri May 31 09:46:00 CST 2019 0 989
Canal同步Mysql数据至Hbase

1、deployer基本不需要改动,只需要修改你需要同步的数据库的库表,例如: 2、adapter中的application.yml配置 3、hbase文件夹中的配置文 ...

Wed Jan 06 20:12:00 CST 2021 2 625
hdfs文件导入hive(ods层),格式为ORC

方式一: 1、创建库表 2、加载数据 3、修改表存储格式 4、查看表存储结构变化 方式二: 1、创建临时表并加载数据 ...

Tue Apr 06 22:18:00 CST 2021 0 449
hadoop格式化

1、hadoop启动时,namenode没有启动起来 2、hbase连接不上报一下错   a)master.HMaster: hbase:meta,,1.1588230740 is ...

Thu Aug 15 23:19:00 CST 2019 0 619
Hive的安装与启动

1、mysql的安装,目的是存放hive的元数据 2、下载hive包,并进行解压 3、配置文件hive-site.xml 4、 上传一个mysql的驱动jar包到hive的安装目录 ...

Sun Jul 05 07:18:00 CST 2020 0 822

 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM