本文结合Hive paper的中文版，以及google的一些资料，对Hive的基本组成进行了总结： 1、组件： 　　元存储（Metastore ）－存储“系统目录以及关于表、列、分区等的元数据”的组件。 　　驱动（Driver ）－ 控制 HiveQL 生命周期的组件，当 HiveQL 查询 ...

此文是基于上一篇文章：Hive环境搭建及测试 因为Hive默认的数据库是derby，不支持同时开启两个./hive的命令终端； 而将Hive的默认数据库修改成mysql后，可以解决该问题。 仅在安装Hive的CloudDeskTop上配置 一、root用户下：上传mysql ...

数据库锁的基本原理 为了保证数据的完事性和一致性，数据库系统采用锁来实现事务的隔离性。各种大型数据库采用的锁基本理论是一致的，但在具体实现上各有差别。 从并发事务锁定的关系上看，可以分为共享锁定和独占锁定。从锁定的对象不同，一般可以分为表锁定和行锁定。 锁 共享锁用于读取数据操作，它是 ...

一、数据库基本原理 　　数据库技术是应数据管理任务的需要而产生的。数据管理经历了三个阶段：人工管理阶段、文件管理阶段、数据库系统阶段。数据库系统与其他两个系统比，有许多优点：1）数据结构化 ；2）数据的共享性高，冗余度低，易扩充 ...

基本原理 hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一 ...

在配置和查看配置之前先弄清楚两个概念 Hive on Spark：hive默认在mr上跑，可改成在spark内存上跑 Spark on hive：不管如何运行spark sql，默认读取的hive数据库，其实spark不是直接读取hive数据库，而是读取hive元数据和hdfs，那就是要配置 ...

hive中conf/hive-site.xml文件配置（没有该文件则新建） <?xml version="1.0"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> < ...

Spark 连接hive 元数据库(mysql) 方法一： 方法二： 1）拷贝hive的hive-site.xml文件到spark的conf目录下 2）修改spark中hive-site.xml文件 3）另建窗口启动： 4）启动spark: 5）测试： ...