分库： 1、数据库分库而不是分表，分表需要考虑后期的查询问题，此外还需要注意分表的算法（哈希算法）。 2、热数据只占全部数据的一部分，因此每次优先查询热库，以下情况才查询冷库 - 当查询条件未命中（结果集为空）时，查询冷库。 - 当查询条件部分命中时，查询冷库 ...

一.关于tokudb引擎 1.tokudb引擎特点 2.tokudb安装步骤 3.创建测试表 CREATE TABLE t_purchase_20180 ...

前言 随着业务的发展和持续运行，系统会产生大量的数据，数据的增长伴随而来的是对数据库的考验，在达到一定的数据量之后数据库的访问性能就会持续下降，为了系统的稳定运行，得要么提高数据库访问性能，要么把数据限定在一定的量上。前者会导致IT系统的不断投入，投入产出比不高，且早晚会达到系统 ...

前言 总体上HDFS异构存储的价值在于，根据数据热度采用不同策略从而提升集群整体资源使用效率。 对于频繁访问的数据，将其全部或部分保存在更高访问性能的存储介质（内存或SSD）上，提升其读写性能； 对于几乎不会访问的数据，保存在归档存储介质上，降低其存储成本 ...

简介： 为什么要冷热分离由于2020疫情的原因，在线教育行业提前被大家所重视，钉钉教育已经服务超过21万所学校、700万教师和1.4亿学生用户，每天大量的教育数据产生。整体数据量：随着时间的积累，数据量越来直大，庞大的数据量对稳定性与性能是一个很大的挑战。当前策略：分库分表，对于大单表的场景 ...

hdfs如何让某些数据查询快，某些数据查询慢？ hdfs冷热数据分层存储 本质： 不同路径制定不同的存储策略。 hdfs存储策略 hdfs的存储策略 依赖于底层的存储介质。 hdfs支持的存储介质： ARCHIVE：高存储密度但耗电较少的存储介质，例如磁带 ...

本文以最新的elasticsearch-6.3.0.tar.gz为例,为了节约资源,本文将副本调为0, 无client角色 https://www.elastic.co/blog/hot-warm-architecture-in-elasticsearch-5-x es架构 各节 ...

环境： 6个es节点 冷热配置 es1 master节点 es2、es3、es4 热数据节点 es5、es6 冷数据节点 思路： 创建index模板，指定"index.routing.allocation.require.box_type ...