原文:时间序列数据库压缩

无损压缩 无损压缩是说被压缩的数据和解压后的数据完全一样,不存在精度的损失。对数据的压缩说到底是对数据规律性的总结。时序数据的规律可以总结为两点: timestamp 稳定递增 数值有规律性,变化稳定。下面来举个例子。 上图是一组时序数据,如果我们一行一行的看感觉压缩有点困难,但如果我们一列一列的看,压缩方案就呼之欲出了。 先看 timestamp 那一列是等差递增数列,可以用 , , 来表示。 ...

2017-06-09 18:05 0 1716 推荐指数:

查看详情

时间序列数据库概览

存储方式,极大提高了时间相关数据的处理能力,相对于关系型数据库它的存储空间减半,查询速度极大的提高。时 ...

Tue Jan 16 23:54:00 CST 2018 2 19303
时间序列数据库调研之InfluxDB

基于 Go 语言开发,社区非常活跃,项目更新速度很快,日新月异,关注度高 测试版本 1.0.0_beta2-1 安装部署 wget https://dl.influxdata.com/i ...

Mon Oct 22 23:47:00 CST 2018 0 1462
时间序列数据库的秘密(1)—— 介绍

什么是时间序列数据?最简单的定义就是数据格式里包含timestamp字段的数据。比如股票市场的价格,环境中的温度,主机的CPU使用率等。但是又有什么数据是不包含timestamp的呢?几乎所有的数据都可以打上一个timestamp字段。时间序列数据更重要的一个属性是如何去查询它。在查询 ...

Wed May 08 00:31:00 CST 2019 0 617
Prometheus - 时间序列数据库

1.Prometheus 简介   Prometheus 是一套开源的系统监控报警框架。它启发于 Google 的 borgmon 监控系统,由工作在 SoundCloud 的 google 前员工 ...

Thu Jan 28 22:23:00 CST 2021 1 476
时间序列数据库(TSDB)初识与选择

时间序列数据库(TSDB)初识与选择 本文作者由 MageByte 团队的 「借来方向」编写,关注公众号 给你更多硬核技术 背景 这两年互联网行业掀着一股新风,总是听着各种高大上的新名词。大数据、人工智能、物联网、机器学习、商业智能、智能预警啊等等。 以前的系统 ...

Tue Feb 04 03:45:00 CST 2020 0 2071
时间序列数据库概览——基于文件(RRD)、K/V数据库(influxDB)、关系型数据库

一般人们谈论时间序列数据库的时候指代的就是这一类存储。按照底层技术不同可以划分为三类。 直接基于文件的简单存储:RRD Tool,Graphite Whisper。这类工具附属于监控告警工具,底层没有一个正规的数据库引擎。只是简单的有一个二进制的文件结构。 基于K/V数据库构建 ...

Thu Feb 23 19:12:00 CST 2017 1 3876
Facebook开源时间序列内存数据库Beringei,追求极致压缩率——如果是int根据大多数时间序列中的值与相邻数据点相比并没有显著的变化,只要使用XOR将当前值与先前值进行比较,然后存储发生变化的比特。最终,该算法将整个数据集至少压缩了90%

转自:http://www.infoq.com/cn/news/2017/02/Facebook-Beringei 2017年2月3日,Facebook宣布将开源他们的高性能时序数据存储引擎Beringer。Beringei是用来解决其内部监控数据存储和查询需求的数据库,其特点是 ...

Mon Feb 13 18:32:00 CST 2017 0 1351
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM