...

Hive系列文章 Hive表的基本操作 Hive中的集合數據類型 Hive動態分區詳解 hive中orc格式表的數據導入 Java通過jdbc連接hive 通過HiveServer2訪問Hive SpringBoot連接Hive實現自助取數 hive關聯hbase表 Hive udf ...

1. 什么是DistCp 　　DistCp(分布式拷貝)是用於大規模集群內部和集群之間拷貝的工具。它使用Map/Reduce實現文件分發，錯誤處理和恢復，以及報告生成。它把文件和目錄的列表作為map ...

最近在做一個數據倉庫遷移的項目，目前在前期階段，所以學習一下MPP架構的概念。 目前項目組想要替換掉的是Teradata所提供的一個MPP架構的數據倉庫，所以做數據倉庫遷移。遷移目標為南大通用所提供的GBASE。 對於MPP架構網上的資料較少，開源的有Greenplum這幾天在看。由於之前做大數據 ...

個人小站,正在持續整理中,歡迎訪問:http://shitouer.cn 小站博文地址：Hadoop遷移Namenode 一.前提及方案 操作版本:社區版 Hadoop-1.0.3，其他版本不保證 之前HBase沒有考慮壓縮，經過一段時間的研究和測試，打算在HBase中全面采用snappy ...

增刪節點 數據遷移 一、所有事情開始之前，先要備份好cloudera manager的數據庫，以及hadoop集群中的一些組件帶的數據庫。這里保存了很多元數據，像hive這種丟了很麻煩的。 二、如果需要換nameNode的存儲目錄 ...

1：sqoop的概述： （1）：sqoop是apache旗下一款“Hadoop和關系數據庫服務器之間傳送數據”的工具。（2）：導入數據：MySQL，Oracle導入數據到Hadoop的HDFS、HIVE、HBASE等數據存儲系統；（3）：導出數據：從Hadoop的文件系統中導出數據 ...

閱讀目錄 序 將查詢的結果寫入文件系統 集群數據遷移一 集群數據遷移二 系列索引 本文版權歸mephisto和博客園共有，歡迎轉載，但須保留此段聲明，並給出原文鏈接，謝謝合作。 文章是哥(mephisto)寫的，SourceLink ...