原文:大規模Elasticsearch集群管理心得

轉載:http: elasticsearch.cn article ElasticSearch目前在互聯網公司主要用於兩種應用場景,其一是用於構建業務的搜索功能模塊且多是垂直領域的搜索,數據量級一般在千萬至數十億這個級別 其二用於大規模數據的實時OLAP,經典的如ELKStack,數據規模可能達到千億或更多。 這兩種場景的數據索引和應用訪問模式上差異較大,在硬件選型和集群優化方面側重點也會有所不同 ...

2017-02-28 21:34 0 2418 推薦指數:

查看詳情

Rancher 和知乎超大規模集群管理聯合實踐

源起 知乎是中文互聯網高質量的問答社區,每天有上千萬用戶在知乎分享知識、經驗和見解,找到自己的答案。為配合不同階段的業務發展需求,知乎容器平台也在不斷演進、提升,目前幾乎所有的業務都運行在容器上。 這兩年知乎開始使用 Rancher 管理 Kubernetes 集群集群規模逐步達到近萬節點 ...

Thu Mar 17 20:06:00 CST 2022 0 652
大規模集群管理工具Borg

Google的大規模集群管理工具Borg 概述   Google的Borg系統是一個集群管理工具,在它上面運行着成千上萬的job,這些job來自許許多多不同的應用,並且跨越多個集群,而每個集群又由大量的機器構成。   Borg通過組合准入控制,高效的任務打包,超額負載以及基於進程 ...

Mon Apr 11 19:25:00 CST 2016 0 2714
阿里雲上萬個 Kubernetes 集群大規模管理實踐

作者 | 湯志敏,阿里雲容器服務高級技術專家 在 2019 年 雙11 中,容器服務 ACK 支撐了阿里巴巴內部核心系統容器化和阿里雲的雲產品本身,也將阿里巴巴多年的大規模容器技術以產品化的能力輸出給眾多圍繞 雙11 的生態公司。通過支撐來自全球各行各業的容器雲,容器服務沉淀了支持單元化 ...

Wed Dec 04 18:02:00 CST 2019 0 264
OpenPAI:大規模人工智能集群管理平台

微軟亞洲研究院 2018年5月22日,在微軟舉辦的“新一代人工智能開放科研教育平台暨中國高校人工智能科研教育高峰論壇”上,微軟亞洲研究院宣布,攜手北京大學、中國科學技術大學、西安交通大學和浙江大學四 ...

Sun May 27 04:53:00 CST 2018 0 842
PB級大規模Elasticsearch集群運維與調優實踐

導語 | 騰訊雲Elasticsearch 被廣泛應用於日志實時分析、結構化數據分析、全文檢索等場景中,本文將以情景植入的方式,向大家介紹與騰訊雲客戶合作過程中遇到的各種典型問題,以及相應的解決思路與方法,希望與大家一同交流。文章作者:bellen,騰訊雲大數據研發工程師 ...

Fri Aug 07 18:23:00 CST 2020 2 890
譯:Google的大規模集群管理工具Borg(一)------ 用戶視角的Borg特性

概述   Google的Borg系統是一個集群管理工具,在它上面運行着成千上萬的job,這些job來自許許多多不同的應用,並且跨越多個集群,而每個集群又由大量的機器構成。   Borg通過組合准入控制,高效的任務打包,超額負載以及基於進程級別性能隔離的機器共享從而實現高利用率。它支持那些高可用 ...

Fri Apr 08 23:02:00 CST 2016 0 1882
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM