原文:mtail 提取應用日志數據到時序數據庫的工具-支持prometheus

mtail 是谷歌開源的一款很不錯的應用日志提取工具,我們可以方便的用來提取應用的數據 到常見的監控系統 prometheus,stats,collectd,gragphite。。。。 說明: demo 使用此工具轉換nginx error message 為prometheus 的metrics 環境准備 docker compose 文件 version: services: nginx lo ...

2018-12-13 20:22 0 2609 推薦指數:

查看詳情

Prometheus時序數據庫-數據的插入

Prometheus時序數據庫-數據的插入 前言 在之前的文章里,筆者詳細的闡述了Prometheus時序數據庫在內存和磁盤中的存儲結構。有了前面的鋪墊,筆者就可以在本篇文章闡述下數據的插入過程。 監控數據的插入 在這里,筆者並不會去討論Promtheus向各個Endpoint抓取數據 ...

Mon Mar 08 17:58:00 CST 2021 1 1198
Prometheus時序數據庫-數據的查詢

Prometheus時序數據庫-數據的查詢 前言 在之前的博客里,筆者詳細闡述了Prometheus數據的插入過程。但我們最常見的打交道的是數據的查詢。Prometheus提供了強大的Promql來滿足我們千變萬化的查詢需求。在這篇文章里面,筆者就以一個簡單的Promql為例,講述下 ...

Mon Mar 15 17:50:00 CST 2021 3 461
Prometheus時序數據庫-內存中的存儲結構

Prometheus時序數據庫-內存中的存儲結構 前言 筆者最近擔起了公司監控的重任,而當前監控最流行的數據庫即是Prometheus。按照筆者打破砂鍋問到底的精神,自然要把這個開源組件源碼搞明白才行。在經過一系列源碼/資料的閱讀以及各種Debug之后,對其內部機制有了一定的認識。今天,筆者 ...

Mon Feb 22 18:42:00 CST 2021 6 984
Prometheus時序數據庫-報警的計算

Prometheus時序數據庫-報警的計算 在前面的文章中,筆者詳細的闡述了Prometheus數據插入存儲查詢等過程。但作為一個監控神器,報警計算功能是必不可少的。自然的Prometheus也提供了靈活強大的報警規則可以讓我們自由去發揮。在本篇文章里,筆者就帶讀者去看下Prometheus ...

Wed Mar 31 18:42:00 CST 2021 5 279
Prometheus時序數據庫-磁盤中的存儲結構

Prometheus時序數據庫-磁盤中的存儲結構 前言 之前的文章里,筆者詳細描述了監控數據Prometheus內存中的結構。而其在磁盤中的存儲結構,也是非常有意思的,關於這部分內容,將在本篇文章進行闡述。 磁盤目錄結構 首先我們來看Prometheus運行后,所形成的文件目錄結構 ...

Mon Mar 01 17:59:00 CST 2021 2 520
EMQ X + IoTDB:存儲 MQTT 消息到時序數據庫

IoTDB 是最早由清華大學發起的開源時序數據庫項目,現已經是 Apache 的頂級項目。IoTDB 可以為用戶提供數據收集、存儲和分析等服務。由於其輕量級架構、高性能和高可用的特性,以及與 Hadoop 和 Spark 生態的無縫集成,滿足了工業 IoT 領域中海量數據存儲、高吞吐量數據寫入 ...

Sun Jan 30 01:28:00 CST 2022 1 710
Prometheus時序數據

時序數據,即按照相同時序(time series),以時間維度存儲的連續數據的集合。 Prometheus存儲的時序數據時序是由Metric以及一組key/value標簽定義的,具有相同的Metric以及key/value(例如http_requests_total{method ...

Sun Jun 20 20:13:00 CST 2021 0 168
InfluxDB時序數據庫應用場景

目前了解到的InfluxDB時序數據庫應用場景:如在數據庫中有很多條記錄,有的記錄包含了時間字段time和數值字段water_level,有的只有時間字段time SELECT MAX("water_level") FROM "h2o_feet" WHERE "location ...

Tue Dec 25 19:52:00 CST 2018 0 1469
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM