Question

让我们假设我们正在查看相当简单的数据 - 我们索引中的每个文档都有这样的结构：

{
    "Time": "2018-01-01T19:35:00.0000000Z",
    "Country": "Germany",
    "Addr": "security.web.com",
    "FailureCount": 5,
    "SuccessCount": 50
}

我的问题基本归结为我如何做这样的事情：https://www.elastic.co/guide/en/elasticsearch/guide/current/_combining_the_two.html。具体来说，我尝试对Country和Addr的所有组合执行相同的聚合（下面的查询）。我当前的查询尝试如下。我汇总了5分钟（这是我的要求的一部分），到目前为止，我只能基于一个查询进行汇总。

{
"size":0,
"query":{
   "bool":{
      "filter":[
         {
            "range":{
               "Time":{
                  "gte":"1514835300000",
                  "lte":"1514835600000",
                  "format":"epoch_millis"
               }
            }
         },
         {
            "query_string":{
               "analyze_wildcard":true,
               "query":"Country:Germany"
            }
         }
      ]
   }
},
"aggs":{
   "2":{
      "date_histogram":{
         "interval":"5m",
         "field":"Time",
         "min_doc_count":0,
         "extended_bounds":{
            "min":"1514835300000",
            "max":"1514835600000"
         },
         "format":"epoch_millis"
      },
      "aggs":{
         "4":{
            "bucket_script":{
               "buckets_path":{
                  "success":"9",
                  "failure":"10"
               },
               "script":"( params.success + params.failure )"
            }
         },
         "9":{
            "sum":{
               "field":"SuccessCount"
            }
         }
         "10":{
            "sum":{
               "field":"FailureCount"
            }
         }
      }
   }
}

这可行，但只是聚合在与bool-filter相匹配的所有文档上（超过5分钟的存储桶）。相反，我希望汇总Country和Addr的所有组合（超过5分钟的分组）。

也就是说，对于拥有script和4的所有文档，我想要一个汇总结果/指标（如"Country": "Germany"中的"Addr": "security.web.com"所示）适用于所有"Country": "United States"和所有"Addr": "security.web.com"的{{1}}和Addr等所有文档。这可能在一个Elasticsearch请求中吗？我最好的选择是什么？

后续

这也可以不在Country和Addr的所有组合之间，而是跨Country和{{{{}的特定组合1}}（我可能会在查询中列出）？或者我是否在一个请求中超越了ES的功能？

谢谢！

Answer 1

如果您想在1个查询中使用此功能，则可以尝试将其聚合4次。

"aggs": {
    "countries": {
        "terms": {
            "field": country,
            "size": 300
         },
         "aggs": {
             "addrs": {
                "terms": {
                    "field": "Addr",
                     "size": 1000
                 },
                 "aggs": {
                     "2": {
                        "date_histogram":.....// your original query
                 }
              }
          }
     }
 }

但是，我不建议对大量数据执行此操作，因为这样的深度子聚合会非常慢。如果您确实需要在单个查询中执行此操作，请创建一个字段，该字段将country和addr组合在一个字段中，同时对其进行索引和聚合。

如果您需要特定的组合，只需将您的组合放在filters aggregation内，然后将其与您的查询进行子聚合。

Elasticsearch结合了多个存储桶和聚合

1 个答案: