原文:大规模Elasticsearch集群管理心得

转载:http: elasticsearch.cn article ElasticSearch目前在互联网公司主要用于两种应用场景,其一是用于构建业务的搜索功能模块且多是垂直领域的搜索,数据量级一般在千万至数十亿这个级别 其二用于大规模数据的实时OLAP,经典的如ELKStack,数据规模可能达到千亿或更多。 这两种场景的数据索引和应用访问模式上差异较大,在硬件选型和集群优化方面侧重点也会有所不同 ...

2017-02-28 21:34 0 2418 推荐指数:

查看详情

Rancher 和知乎超大规模集群管理联合实践

源起 知乎是中文互联网高质量的问答社区,每天有上千万用户在知乎分享知识、经验和见解,找到自己的答案。为配合不同阶段的业务发展需求,知乎容器平台也在不断演进、提升,目前几乎所有的业务都运行在容器上。 这两年知乎开始使用 Rancher 管理 Kubernetes 集群集群规模逐步达到近万节点 ...

Thu Mar 17 20:06:00 CST 2022 0 652
大规模集群管理工具Borg

Google的大规模集群管理工具Borg 概述   Google的Borg系统是一个集群管理工具,在它上面运行着成千上万的job,这些job来自许许多多不同的应用,并且跨越多个集群,而每个集群又由大量的机器构成。   Borg通过组合准入控制,高效的任务打包,超额负载以及基于进程 ...

Mon Apr 11 19:25:00 CST 2016 0 2714
阿里云上万个 Kubernetes 集群大规模管理实践

作者 | 汤志敏,阿里云容器服务高级技术专家 在 2019 年 双11 中,容器服务 ACK 支撑了阿里巴巴内部核心系统容器化和阿里云的云产品本身,也将阿里巴巴多年的大规模容器技术以产品化的能力输出给众多围绕 双11 的生态公司。通过支撑来自全球各行各业的容器云,容器服务沉淀了支持单元化 ...

Wed Dec 04 18:02:00 CST 2019 0 264
OpenPAI:大规模人工智能集群管理平台

微软亚洲研究院 2018年5月22日,在微软举办的“新一代人工智能开放科研教育平台暨中国高校人工智能科研教育高峰论坛”上,微软亚洲研究院宣布,携手北京大学、中国科学技术大学、西安交通大学和浙江大学四 ...

Sun May 27 04:53:00 CST 2018 0 842
PB级大规模Elasticsearch集群运维与调优实践

导语 | 腾讯云Elasticsearch 被广泛应用于日志实时分析、结构化数据分析、全文检索等场景中,本文将以情景植入的方式,向大家介绍与腾讯云客户合作过程中遇到的各种典型问题,以及相应的解决思路与方法,希望与大家一同交流。文章作者:bellen,腾讯云大数据研发工程师 ...

Fri Aug 07 18:23:00 CST 2020 2 890
译:Google的大规模集群管理工具Borg(一)------ 用户视角的Borg特性

概述   Google的Borg系统是一个集群管理工具,在它上面运行着成千上万的job,这些job来自许许多多不同的应用,并且跨越多个集群,而每个集群又由大量的机器构成。   Borg通过组合准入控制,高效的任务打包,超额负载以及基于进程级别性能隔离的机器共享从而实现高利用率。它支持那些高可用 ...

Fri Apr 08 23:02:00 CST 2016 0 1882
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM