hdp3.1 hive 3.0的使用記錄
近來在做項目中的技術調研，使用最新版的hdp3.1,其中使用spark2.3和hive 3.1. 遇到 一些問題，記錄如下： 一，使用spark-sql client driver去訪問hive創建的數據庫，發現找不到，使用presto訪問hive,只能讀寫外部表。 經過查詢資料了解 ...
原文：基於HDP3.0的基礎測試
，TestDFSIO write和read的性能測試，測試hadoop讀寫的速度。該測試為Hadoop自帶的測試工具，位於 HADOOP HOME share hadoop mapreduce目錄中，主要用於測試DFS的IO性能。 寫入： 讀取： 清空數據： ，TeraSort是由微軟的數據庫專家Jim Gray創建的標准benchmark，輸入數據由Hadoop TeraGen產生。 生成數據 ...
2018-09-11 13:39 0 884 推薦指數：
相關推薦
基於【CentOS-7+ Ambari 2.7.0 + HDP 3.0】搭建HAWQ數據倉庫02 ——使用ambari-server安裝HDP
本文記錄使用ambari-server安裝HDP的過程，對比於使用cloudera-manager安裝CDH，不得不說ambari的易用性差的比較多~_~，需要用戶介入的過程較多，或者說可定制性更高。 首先、安裝之前，在每個主機節點上執行下面命令，已清除緩存，避免一些repo原因導致的安裝失敗 ...
『心善淵』Selenium3.0基礎 — 1、Selenium自動化測試框架介紹
應用程序測試的工具。 只要在測試用例中把預期的用戶行為與結果都描述出來，我們就得到了一個可以自動化運行 ...
基於【CentOS-7+ Ambari 2.7.0 + HDP 3.0】搭建HAWQ數據倉庫03 —— 安裝HAWQ 2.3.0.0
一、 HAWQ2.3.0環境准備【全部主機節點】： 1， vim /etc/sysctl.conf,編輯如下內容: 保存退出后，使用命令“sysctl -p” 使之生效： ...
基於【CentOS-7+ Ambari 2.7.0 + HDP 3.0】搭建HAWQ數據倉庫 —— MariaDB 安裝配置
一、安裝並使用MariaDB作為Ambari、Hive、Hue的存儲數據庫。 啟動、查看狀態，檢查mariadb是否成功安裝 二、配置mariadb 1，首先停止Ma ...
Zabbix 3.0 基礎介紹 [一]
Zabbix 3.0 基礎介紹 [一] #wmd-preview h1 { color: #0077bb; /* 將標題改為藍色 */ } Zabbix 3.0 基礎介紹 [一] zabbix 一、Zabbix介紹 zabbix 簡介 ...
『心善淵』Selenium3.0基礎 — 28、unittest中測試套件的使用
目錄 1、測試套件的作用 2、使用測試套件 （1）入門示例 （2）根據不同的條件加載測試用例（了解） （3）常用方式（推薦） 1、測試套件的作用 在我們實際工作，使用unittest框架會有兩個問題： 我們知道 ...
『心善淵』Selenium3.0基礎 — 25、unittest單元測試框架
目錄 1、unittest基本簡介 2、unittest基本概念 （1）unittest核心的四個概念 （2）如何創建一個測試類 （3）test fixture常用的四個方法 （4）unittest編寫測試方法(用例)規范 ...