大规模集群要求swappiness内核参数调优
swap分区 通常memory是机器的物理内存，读写速度低于cpu一个量级，但是高于磁盘不止一个量级。所以，程序和数据如果在内存的话，会有非常快的读写速度。但是，内存的造价是要高于磁 ...
原文：PB级大规模Elasticsearch集群运维与调优实践
导语 腾讯云Elasticsearch 被广泛应用于日志实时分析 结构化数据分析 全文检索等场景中，本文将以情景植入的方式，向大家介绍与腾讯云客户合作过程中遇到的各种典型问题，以及相应的解决思路与方法，希望与大家一同交流。文章作者：bellen，腾讯云大数据研发工程师。 一 背景 某中型互联网公司的游戏业务，使用了腾讯云的 Elasticsearch 产品，采用 ELK 架构存储业务日志。 因为 ...
2020-08-07 10:23 2 890 推荐指数：
相关推荐
大规模分布式系统运维实践
，只有少数几家公司拥有如此规模的自主知识产权的集群。我们非常幸运，能够运维和管理如此大规模的生产集群。但短 ...
ELK 性能(4) — 大规模 Elasticsearch 集群性能的最佳实践
ELK 性能(4) — 大规模 Elasticsearch 集群性能的最佳实践 介绍 集群规模 集群数：6 整体集群规模： 300 Elasticsearch 实例 141 物理服务器 4200 CPU 核心 38TB RAM ...
大规模Elasticsearch集群管理心得
转载：http://elasticsearch.cn/article/110 ElasticSearch目前在互联网公司主要用于两种应用场景，其一是用于构建业务的搜索功能模块且多是垂直领域的搜索，数据量级一般在千万至数十亿这个级别；其二用于大规模数据的实时OLAP，经典的如ELKStack，数据 ...
elasticsearch运维实战之2 - 系统性能调优
elasticsearch性能调优 集群规划 独立的master节点，不存储数据, 数量不少于2 数据节点(Data Node) 查询节点(Query Node)，起到负载均衡的作用 Linux系统参数配置 文件句柄 Linux中，每个进程默认打开的最大文件句柄数 ...
Elasticsearch集群调优
系统调优 禁用swap 使用swapoff命令可以暂时关闭swap。永久关闭需要编辑/etc/fstab，注释掉swap设备的挂载项。 swapoff -a 如果完全关闭swap不可行，可以试着降低swap使用的优先级，执行 sysctl ...
大厂运维必备技能：PB级数据仓库性能调优
摘要：众所周知，数据量大了之后，性能是大家关注的一点，所以我们在业务开发的时候，特别关注性能，做为一个架构师，必须对性能要了解，要懂。才能设计出高性能的业务系统。 一、GaussDB分布式架构 所谓集群是将多台物理服务器组建成一个逻辑平台，对外展现一个集群平台的形式。 所谓分布式 ...
Elasticsearch集群运维
一、索引管理 1、 创建索引 PUT test-2019-03 { "settings": { "index": { ...