【原創】大數據基礎之Benchmark（1）HiBench
HiBench 7官方：https://github.com/intel-hadoop/HiBench 一 簡介 HiBench is a big data benchmark suite tha ...
原文：【原創】大數據基礎之調度框架
常見調度框架實現方式 開源 Oozie 成熟穩定可靠，可直接用於生產環境 Azkaban 單點 簡單粗暴，有兩套獨立的調度實現，必須二次開發才可用 Airflow 代碼以及流程配置都是python 自己封裝 基於quartz單機 使用zk來做分布式控制 常用quartz zk做調度系統 使用db心跳來做分布式控制 比如阿里Zeus 年前不再開源，還需要做一些二次開發才能用 基於quartz分布式 ...
2018-12-12 17:52 0 1164 推薦指數：
相關推薦
【原創】大數據基礎之Logstash（5）監控
有兩種方式來監控logstash： api ui（xpack） When you run Logstash, it automatically captures runtime me ...
【原創】大數據基礎之ElasticSearch（4）es數據導入過程
1 准備analyzer 內置analyzer 參考：https://www.elastic.co/guide/en/elasticsearch/reference/current/analysi ...
【原創】大數據基礎之Hadoop（3）yarn數據收集與監控
yarn常用rest api 1 metrics # curl http://localhost:8088/ws/v1/cluster/metrics The cluster metr ...
【原創】大數據基礎之Logstash（3）應用之http（in和out）
一個logstash很容易通過http打斷成兩個logstash實現跨服務器或者跨平台間數據同步，比如原來的流程是 logstash: nginx log -> kafka 打斷成兩個是 logstash1: nginx log -> http out ...
【原創】大數據基礎之Hadoop（3）hdfs diskbalancer
hdfs單個節點內多個磁盤不均衡時（比如新加磁盤），需要手工進行diskbalancer操作，命令如下 其中thresholdPercentage的注釋有歧義，看起來是根據絕對值進行均衡的，查看 ...
【原創】大數據基礎之Drill（1）簡介、安裝及使用
https://drill.apache.org/ 一 簡介 Drill is an Apache open-source SQL query engine for Big Dat ...
【原創】大數據基礎之Kudu（3）primary key
關於kudu的primary key The primary key may not be changed after the table is created. You must drop and ...