亚洲乱码中文字幕综合,中国熟女仑乱hd,亚洲精品乱拍国产一区二区三区,一本大道卡一卡二卡三乱码全集资源,又粗又黄又硬又爽的免费视频

elasticsearch bucket 之rare terms聚合使用詳解

 更新時間:2022年11月23日 15:51:58   作者:huan1993  
這篇文章主要為大家介紹了elasticsearch bucket 之rare terms聚合使用詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪

1、背景

我們知道當(dāng)我們使用 terms聚合時,當(dāng)修改默認順序為_count asc時,統(tǒng)計的結(jié)果是不準(zhǔn)備的,而且官方也不推薦我們這樣做,而是推薦使用rare terms聚合。rare terms是一個稀少的term聚合,可以一定程度的解決升序問題。

2、需求

統(tǒng)計province字段中包含上和湖的term數(shù)據(jù),并且最多只能出現(xiàn)2次。獲取到聚合后的結(jié)果。

3、前置準(zhǔn)備

3.1 準(zhǔn)備mapping

PUT /index_person
{
  "settings": {
    "number_of_shards": 1
  },
  "mappings": {
    "properties": {
      "id": {
        "type": "long"
      },
      "name": {
        "type": "keyword"
      },
      "province": {
        "type": "keyword"
      },
      "sex": {
        "type": "keyword"
      },
      "age": {
        "type": "integer"
      },
      "pipeline_province_sex":{
        "type": "keyword"
      },
      "address": {
        "type": "text",
        "analyzer": "ik_max_word",
        "fields": {
          "keyword": {
            "type": "keyword",
            "ignore_above": 256
          }
        }
      }
    }
  }
}

3.2 準(zhǔn)備數(shù)據(jù)

PUT /_bulk
{"create":{"_index":"index_person","_id":1}}
{"id":1,"name":"張三","sex":"男","age":20,"province":"湖北","address":"湖北省黃岡市羅田縣匡河鎮(zhèn)"}
{"create":{"_index":"index_person","_id":2}}
{"id":2,"name":"李四","sex":"男","age":19,"province":"江蘇","address":"江蘇省南京市"}
{"create":{"_index":"index_person","_id":3}}
{"id":3,"name":"王武","sex":"女","age":25,"province":"湖北","address":"湖北省武漢市江漢區(qū)"}
{"create":{"_index":"index_person","_id":4}}
{"id":4,"name":"趙六","sex":"女","age":30,"province":"北京","address":"北京市東城區(qū)"}
{"create":{"_index":"index_person","_id":5}}
{"id":5,"name":"錢七","sex":"女","age":16,"province":"北京","address":"北京市西城區(qū)"}
{"create":{"_index":"index_person","_id":6}}
{"id":6,"name":"王八","sex":"女","age":45,"province":"北京","address":"北京市朝陽區(qū)"}
{"create":{"_index":"index_person","_id":7}}
{"id":7,"name":"九哥","sex":"男","age":25,"province":"上海市","address":"上海市嘉定區(qū)"}

4、實現(xiàn)需求

4.1 dsl

GET /index_person/_search
{
  "size": 0,
  "aggs": {
    "agg_province": {
      "rare_terms": {
        "field": "province",
        "max_doc_count": 2,
        "precision": 0.01,
        "include": "(.*上.*|.*湖.*|.*江.*)",
        "exclude": ["江蘇"],
        "missing": "default省"
      }
    }
  }
}

4.2 java代碼

@Test
@DisplayName("稀少的term聚合,類似按照 _count asc 排序的terms聚合,但是terms聚合中按照_count asc的結(jié)果是不準(zhǔn)的,需要使用 rare terms 聚合")
public void agg01() throws IOException {
    SearchRequest searchRequest = new SearchRequest.Builder()
            .size(0)
            .index("index_person")
            .aggregations("agg_province", agg ->
                    agg.rareTerms(rare ->
                            // 稀有詞 的字段
                            rare.field("province")
                                    // 該稀有詞最多可以出現(xiàn)在幾個文檔中,最大值為100,如果要調(diào)整,需要修改search.max_buckets參數(shù)的值(嘗試修改這個值,不生效)
                                    // 在該例子中,只要是出現(xiàn)的次數(shù)<=2的聚合都會返回
                                    .maxDocCount(2L)
                                    // 內(nèi)部布谷鳥過濾器的精度,精度越小越準(zhǔn),但是相應(yīng)的消耗內(nèi)存也越多,最小值為 0.00001,默認值為 0.01
                                    .precision(0.01)
                                    // 應(yīng)該包含在聚合的term, 當(dāng)是單個字段是,可以寫正則表達式
                                    .include(include -> include.regexp("(.*上.*|.*湖.*|.*江.*)"))
                                    // 排出在聚合中的term,當(dāng)是集合時,需要寫準(zhǔn)確的值
                                    .exclude(exclude -> exclude.terms(Collections.singletonList("江蘇")))
                                    // 當(dāng)文檔中缺失province字段時,給默認值
                                    .missing("default省")
                    )
            )
            .build();
    System.out.println(searchRequest);
    SearchResponse<Object> response = client.search(searchRequest, Object.class);
    System.out.println(response);
}

一些注意事項都在注釋中。

4.3 運行結(jié)果

5、max_doc_count 和 search.max_buckets

6、注意事項

  • rare terms統(tǒng)計返回的數(shù)據(jù)沒有大小限制,而且受max_doc_count參數(shù)的限制,比如:如果復(fù)合 max_doc_count 的分組有60個,那么這60個分組會直接返回。
  • max_doc_count的值最大為100,貌似不能修改。
  • 如果一臺節(jié)點聚合收集的結(jié)果過多,那么很容易超過 search.max_buckets的值,此時就需要修改這個值。
# 臨時修改
PUT /_cluster/settings
{"transient": {"search.max_buckets": 65536}}
# 永久修改
PUT /_cluster/settings
{"persistent": {"search.max_buckets": 65536}}

完整代碼

gitee.com/huan1993/sp…

參考文檔

www.elastic.co/guide/en/el…

以上就是elasticsearch bucket 之rare terms聚合使用詳解的詳細內(nèi)容,更多關(guān)于elasticsearch bucket rare terms的資料請關(guān)注腳本之家其它相關(guān)文章!

相關(guān)文章

  • SpringBoot整合Solr實現(xiàn)文檔檢索

    SpringBoot整合Solr實現(xiàn)文檔檢索

    Solr高度可靠、可擴展和容錯,提供分布式索引、復(fù)制和負載平衡查詢、自動故障轉(zhuǎn)移和恢復(fù)、集中配置等,Solr 為世界上許多最大的 Internet 站點的搜索和導(dǎo)航功能提供支持,本文將給大家介紹SpringBoot整合Solr實現(xiàn)文檔檢索,需要的朋友可以參考下
    2023-08-08
  • MyBatis-Plus中SimpleQuery查詢實現(xiàn)

    MyBatis-Plus中SimpleQuery查詢實現(xiàn)

    本文主要介紹了MyBatis-Plus中SimpleQuery查詢實現(xiàn),文中通過示例代碼介紹的非常詳細,對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧
    2022-08-08
  • SpringBoot如何讀取war包jar包和Resource資源

    SpringBoot如何讀取war包jar包和Resource資源

    這篇文章主要介紹了SpringBoot如何讀取war包jar包和Resource資源,文中通過示例代碼介紹的非常詳細,對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下
    2020-01-01
  • Spring?Boot?整合RocketMq實現(xiàn)消息過濾功能

    Spring?Boot?整合RocketMq實現(xiàn)消息過濾功能

    這篇文章主要介紹了Spring?Boot?整合RocketMq實現(xiàn)消息過濾,本文講解了RocketMQ實現(xiàn)消息過濾,針對不同的業(yè)務(wù)場景選擇合適的方案即可,需要的朋友可以參考下
    2022-06-06
  • @Scheduled定時器原理及@RefreshScope相互影響

    @Scheduled定時器原理及@RefreshScope相互影響

    這篇文章主要為大家介紹了@Scheduled定時器原理及@RefreshScope相互影響詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪
    2023-07-07
  • SpringBoot自定義/error路徑失效的解決

    SpringBoot自定義/error路徑失效的解決

    這篇文章主要介紹了SpringBoot自定義/error路徑失效的解決方案,具有很好的參考價值,希望對大家有所幫助。如有錯誤或未考慮完全的地方,望不吝賜教
    2022-01-01
  • java實現(xiàn)基于SGIP協(xié)議開發(fā)聯(lián)通短信的方法

    java實現(xiàn)基于SGIP協(xié)議開發(fā)聯(lián)通短信的方法

    這篇文章主要介紹了java實現(xiàn)基于SGIP協(xié)議開發(fā)聯(lián)通短信的方法,涉及java短信發(fā)送的相關(guān)實現(xiàn)技巧,具有一定參考借鑒價值,需要的朋友可以參考下
    2015-07-07
  • 一文讀懂a(chǎn)va中的Volatile關(guān)鍵字使用

    一文讀懂a(chǎn)va中的Volatile關(guān)鍵字使用

    volatile關(guān)鍵字的作用保證了變量的可見性(visibility)。被volatile關(guān)鍵字修飾的變量,如果值發(fā)生了變更,其他線程立馬可見,避免出現(xiàn)臟讀的現(xiàn)象。這篇文章主要介紹了ava中的Volatile關(guān)鍵字使用,需要的朋友可以參考下
    2020-03-03
  • Java實現(xiàn)三子棋小游戲簡易版

    Java實現(xiàn)三子棋小游戲簡易版

    這篇文章主要為大家詳細介紹了Java實現(xiàn)三子棋小游戲簡易版,文中示例代碼介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們可以參考一下
    2022-05-05
  • Spring中的聲明式事務(wù)控制詳解

    Spring中的聲明式事務(wù)控制詳解

    這篇文章主要介紹了Spring中的聲明式事務(wù)控制詳解,Spring的聲明式事務(wù)顧名思義就是采用聲明的方式來處理事務(wù),這里所說的聲明,就是指在配置文件中聲明,用在Spring配置文件中聲明式的事務(wù)處理來代替代碼是的處理事務(wù),需要的朋友可以參考下
    2024-01-01

最新評論