...

Hive系列文章 Hive表的基本操作 Hive中的集合数据类型 Hive动态分区详解 hive中orc格式表的数据导入 Java通过jdbc连接hive 通过HiveServer2访问Hive SpringBoot连接Hive实现自助取数 hive关联hbase表 Hive udf ...

1. 什么是DistCp 　　DistCp(分布式拷贝)是用于大规模集群内部和集群之间拷贝的工具。它使用Map/Reduce实现文件分发，错误处理和恢复，以及报告生成。它把文件和目录的列表作为map ...

最近在做一个数据仓库迁移的项目，目前在前期阶段，所以学习一下MPP架构的概念。 目前项目组想要替换掉的是Teradata所提供的一个MPP架构的数据仓库，所以做数据仓库迁移。迁移目标为南大通用所提供的GBASE。 对于MPP架构网上的资料较少，开源的有Greenplum这几天在看。由于之前做大数据 ...

个人小站,正在持续整理中,欢迎访问:http://shitouer.cn 小站博文地址：Hadoop迁移Namenode 一.前提及方案 操作版本:社区版 Hadoop-1.0.3，其他版本不保证 之前HBase没有考虑压缩，经过一段时间的研究和测试，打算在HBase中全面采用snappy ...

增删节点 数据迁移 一、所有事情开始之前，先要备份好cloudera manager的数据库，以及hadoop集群中的一些组件带的数据库。这里保存了很多元数据，像hive这种丢了很麻烦的。 二、如果需要换nameNode的存储目录 ...

1：sqoop的概述： （1）：sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。（2）：导入数据：MySQL，Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统；（3）：导出数据：从Hadoop的文件系统中导出数据 ...

阅读目录 序 将查询的结果写入文件系统 集群数据迁移一 集群数据迁移二 系列索引 本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。 文章是哥(mephisto)写的，SourceLink ...