本文结合Hive paper的中文版，以及google的一些资料，对Hive的基本组成进行了总结： 1、组件： 　　元存储（Metastore ）－存储“系统目录以及关于表、列、分区等的元数据”的组件。 　　驱动（Driver ）－ 控制 HiveQL 生命周期的组件，当 HiveQL 查询 ...

volatile这个关键字可能很多朋友都听说过，或许也都用过。在Java 5之前，它是一个备受争议的关键字，因为在程序中使用它往往会导致出人意料的结果。在Java 5之后，volatile关键字才得以 ...

阅读目录 一 爬虫是什么 二 爬虫的基本流程 三 请求与响应 四 Request 五 Respon ...

Kafka基本原理 简介 Apache Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发，之后成为Apache项目的一部分。Kafka是一种快速、可扩展的、设计内在就是分布式的，分区的和可复制的提交日志服务。 Kafka架构 它的架构包括以下组件 ...

　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　IP基本原理 一.IP基本原理 　　IP是网络层协议，也是当今应用最广泛的网络协议之一 IP协议规定了数据的封装方式，网络节点的标识方法，用于网络上数据的端到端的传递. 1.IP及其相关协议 2.IP ...

这里以二元分类为例子，给出最基本原理的解释 GBDT 是多棵树的输出预测值的累加 GBDT的树都是 回归树 而不是分类树 分类树 分裂的时候选取使得误差下降最多的分裂 计算的技巧 最终分裂收益按照下面的方式计算，注意圆圈 ...

『反射』就是指程序在运行时能够动态的获取到一个类的类型信息的一种操作。它是现代框架的灵魂，几尽所有的框架能够提供的一些自动化机制都是靠反射实现的，这也是为什么各类框架都不允许你覆盖掉默认的无参构造器的 ...

为什么需要cache 我们应该知道程序是运行在 RAM之中，RAM 就是我们常说的DDR（例如： DDR3、DDR4等）。我们称之为main memory（主存）。当我们需要运行一个进程的时候，首先 ...