elasticsearch聚合操作——本質就是針對搜索后的結果使用桶bucket(允許嵌套)進行group by,統計下分組結果,包括min/max/avg


分析

最后,我們還有一個需求需要完成:允許管理者在職員目錄中進行一些分析。 Elasticsearch有一個功能叫做聚合(aggregations),它允許你在數據上生成復雜的分析統計。它很像SQL中的GROUP BY但是功能更強大。

+

 

舉個例子,讓我們找到所有職員中最大的共同點(興趣愛好)是什么:

GET /megacorp/employee/_search
{
  "aggs": { "all_interests": { "terms": { "field": "interests" } } } } 

暫時先忽略語法只看查詢結果:

{
   ...
   "hits": { ... }, "aggregations": { "all_interests": { "buckets": [ { "key": "music", "doc_count": 2 }, { "key": "forestry", "doc_count": 1 }, { "key": "sports", "doc_count": 1 } ] } } } 

我們可以看到兩個職員對音樂有興趣,一個喜歡林學,一個喜歡運動。這些數據並沒有被預先計算好,它們是實時的從匹配查詢語句的文檔中動態計算生成的。如果我們想知道所有姓"Smith"的人最大的共同點(興趣愛好),我們只需要增加合適的語句既可:

GET /megacorp/employee/_search
{
  "query": { "match": { "last_name": "smith" } }, "aggs": { "all_interests": { "terms": { "field": "interests" } } } } 

all_interests聚合已經變成只包含和查詢語句相匹配的文檔了:

  ...
  "all_interests": { "buckets": [ { "key": "music", "doc_count": 2 }, { "key": "sports", "doc_count": 1 } ] } 

聚合也允許分級匯總。例如,讓我們統計每種興趣下職員的平均年齡:

GET /megacorp/employee/_search
{
    "aggs" : { "all_interests" : { "terms" : { "field" : "interests" }, "aggs" : { "avg_age" : { "avg" : { "field" : "age" } } } } } } 

雖然這次返回的聚合結果有些復雜,但任然很容易理解:

3

 

  ...
  "all_interests": { "buckets": [ { "key": "music", "doc_count": 2, "avg_age": { "value": 28.5 } }, { "key": "forestry", "doc_count": 1, "avg_age": { "value": 35 } }, { "key": "sports", "doc_count": 1, "avg_age": { "value": 25 } } ] } 

該聚合結果比之前的聚合結果要更加豐富。我們依然得到了興趣以及數量(指具有該興趣的員工人數)的列表,但是現在每個興趣額外擁有avg_age字段來顯示具有該興趣員工的平均年齡。

2

 

即使你還不理解語法,但你也可以大概感覺到通過這個特性可以完成相當復雜的聚合工作,你可以處理任何類型的數據。

 

為了掌握聚合aggs語法,你一定要了解兩個主要概念:

Buckets(桶):

滿足某個條件的文檔集合。

Metrics(指標):

為某個桶中的文檔計算得到的統計信息。

就是這樣!每個聚合只是簡單地由一個或者多個桶,零個或者多個指標組合而成。


桶和SQL中的組(Grouping)擁有相似的概念,而指標則與COUNT(),SUM(),MAX(),MIN(), AVG()等相似。

讓我們仔細看看這些概念。

桶(Buckets)

一個桶就是滿足特定條件的一個文檔集合:

一名員工要么屬於男性桶,或者女性桶。

 

一個聚合就是一些桶和指標的組合。一個聚合可以只有一個桶,或者一個指標,或者每樣一個。在桶中甚至可以有多個嵌套的桶。比如,我們可以將文檔按照其所屬國家進行分桶,然后對每個桶計算其平均薪資(一個指標)。

因為桶是可以嵌套的,我們能夠實現一個更加復雜的聚合操作:

將文檔按照國家進行分桶。(桶)
然后將每個國家的桶再按照性別分桶。(桶)
然后將每個性別的桶按照年齡區間進行分桶。(桶)
最后,為每個年齡區間計算平均薪資。

大家一定要理解Buckets(桶)及Metrics(指標)概念,buckets多層嵌套的概念,想基於哪個桶做統計計算,只需要嵌入一層aggs就可以了。


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM