本文結合Hive paper的中文版，以及google的一些資料，對Hive的基本組成進行了總結： 1、組件： 　　元存儲（Metastore ）－存儲“系統目錄以及關於表、列、分區等的元數據”的組件。 　　驅動（Driver ）－ 控制 HiveQL 生命周期的組件，當 HiveQL 查詢 ...

volatile這個關鍵字可能很多朋友都聽說過，或許也都用過。在Java 5之前，它是一個備受爭議的關鍵字，因為在程序中使用它往往會導致出人意料的結果。在Java 5之后，volatile關鍵字才得以 ...

閱讀目錄 一 爬蟲是什么 二 爬蟲的基本流程 三 請求與響應 四 Request 五 Respon ...

Kafka基本原理 簡介 Apache Kafka是分布式發布-訂閱消息系統。它最初由LinkedIn公司開發，之后成為Apache項目的一部分。Kafka是一種快速、可擴展的、設計內在就是分布式的，分區的和可復制的提交日志服務。 Kafka架構 它的架構包括以下組件 ...

　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　IP基本原理 一.IP基本原理 　　IP是網絡層協議，也是當今應用最廣泛的網絡協議之一 IP協議規定了數據的封裝方式，網絡節點的標識方法，用於網絡上數據的端到端的傳遞. 1.IP及其相關協議 2.IP ...

這里以二元分類為例子，給出最基本原理的解釋 GBDT 是多棵樹的輸出預測值的累加 GBDT的樹都是 回歸樹 而不是分類樹 分類樹 分裂的時候選取使得誤差下降最多的分裂 計算的技巧 最終分裂收益按照下面的方式計算，注意圓圈 ...

『反射』就是指程序在運行時能夠動態的獲取到一個類的類型信息的一種操作。它是現代框架的靈魂，幾盡所有的框架能夠提供的一些自動化機制都是靠反射實現的，這也是為什么各類框架都不允許你覆蓋掉默認的無參構造器的 ...

為什么需要cache 我們應該知道程序是運行在 RAM之中，RAM 就是我們常說的DDR（例如： DDR3、DDR4等）。我們稱之為main memory（主存）。當我們需要運行一個進程的時候，首先 ...