【原創】大數據基礎之Benchmark（2）TPC-DS
tpc 官方：http://www.tpc.org/ 一 簡介 The TPC is a non-profit corporation founded to define t ...
原文：【原創】大數據基礎之Benchmark（1）HiBench
HiBench 官方：https: github.com intel hadoop HiBench 一 簡介 HiBench is a big data benchmark suite that helps evaluate different big data frameworks in terms of speed, throughput and system resource utiliza ...
2019-02-26 11:45 0 782 推薦指數：
相關推薦
【原創】大數據基礎之Benchmark（4）TPC-DS測試結果（hive/hive on spark/spark sql/impala/presto）
1 測試集群 內存：256GCPU：32Core （Intel(R) Xeon(R) CPU E5-2640 v3 @ 2.60GHz）Disk（系統盤）：300GDisk（數據盤）：1.5T*1 2 測試數據 tpcds parquet 10g tpcds orc 10g ...
【原創】大數據基礎之調度框架
常見調度框架實現方式 開源 Oozie 成熟穩定可靠，可直接用於生產環境 Azk ...
【原創】大數據基礎之Logstash（5）監控
有兩種方式來監控logstash： api ui（xpack） When you run Logstash, it automatically captures runtime me ...
【原創】大數據基礎之ElasticSearch（4）es數據導入過程
1 准備analyzer 內置analyzer 參考：https://www.elastic.co/guide/en/elasticsearch/reference/current/analysi ...
【原創】大數據基礎之Hadoop（3）yarn數據收集與監控
yarn常用rest api 1 metrics # curl http://localhost:8088/ws/v1/cluster/metrics The cluster metr ...
【原創】大數據基礎之Logstash（3）應用之http（in和out）
一個logstash很容易通過http打斷成兩個logstash實現跨服務器或者跨平台間數據同步，比如原來的流程是 logstash: nginx log -> kafka 打斷成兩個是 logstash1: nginx log -> http out ...
【原創】大數據基礎之Hadoop（3）hdfs diskbalancer
hdfs單個節點內多個磁盤不均衡時（比如新加磁盤），需要手工進行diskbalancer操作，命令如下 其中thresholdPercentage的注釋有歧義，看起來是根據絕對值進行均衡的，查看 ...