lọc elasticsearch theo kích thước của một trường là một mảng

Question

Làm cách nào để lọc các tài liệu có trường là mảng và có nhiều hơn N phần tử?

Làm cách nào để lọc các tài liệu có trường là một mảng trống?

Các khía cạnh có phải là giải pháp không? Nếu vậy, làm thế nào?

Answer 1

Tôi sẽ xem xét số script filter. Bộ lọc sau chỉ trả về các tài liệu có ít nhất 10 phần tử trong trường fieldname, là một mảng. Hãy nhớ rằng điều này có thể tốn kém tùy thuộc vào số lượng tài liệu bạn có trong chỉ mục của mình.

"filter" : { 
    "script" : { 
     "script" : "doc['fieldname'].values.length > 10" 
    } 
} 

Về câu hỏi thứ hai: bạn có thực sự có một mảng trống không? Hay nó chỉ là một trường mảng không có giá trị? Bạn có thể sử dụng missing filter để có được tài liệu mà không có giá trị cho một lĩnh vực cụ thể:

"filter" : { 
    "missing" : { "field" : "user" } 
} 

Nếu tôi đoán bạn cần phải sử dụng kịch bản một lần nữa, tương tự như những gì tôi đã gợi ý ở trên, chỉ với chiều dài khác nhau như đầu vào. Nếu chiều dài là hằng số tôi muốn đặt nó trong phần params để kịch bản sẽ được lưu trữ bởi elasticsearch và tái sử dụng, vì nó luôn luôn giống nhau:

"filter" : { 
    "script" : { 
     "script" : "doc['fieldname'].values.length > param1" 
     "params" : { 
      "param1" : 10 
     } 
    } 
} 

Answer 2

IMHO cách đúng đắn về mảng lọc theo quy mô sử dụng kịch bản là:

"filter" : { 
    "script" : { 
     "script" : "_source.fieldName.size() > 1" 
    } 
} 

Nếu tôi làm điều đó như @javanna thấy nó ném ngoại lệ groovy.lang.MissingPropertyException: No such property: length for class: java.lang.String

Answer 3

Dựa trên điều này: https://code.google.com/p/guava-libraries/source/browse/guava/src/com/google/common/collect/RegularImmutableList.java?r=707f3a276d4ea8e9d53621d137febb00cd2128da

Và về câu trả lời của câu trả lời ở đây.

Có kích thước() chức năng trả về độ dài của danh sách: câu trả lời

"filter" : { 
    "script" : { 
     "script" : "doc['fieldname'].values.size() > 10" 
    } 
} 

Answer 4

javanna là đúng trên Elasticsearch 1.3.x trở về trước, kể từ 1,4 mô-đun kịch bản mặc định đã thay đổi để groovy (đã mvel) .

Để trả lời câu hỏi của OP.

On Elasticsearch 1.3.x trở về trước, sử dụng mã này:

"filter" : { 
    "script" : { 
     "script" : "doc['fieldname'].values.length > 10" 
    } 
} 

On Elasticsearch 1.4.x và sau đó, sử dụng mã này:

"filter" : { 
    "script" : { 
     "script" : "doc['fieldname'].values.size() > 10" 
    } 
} 

Ngoài ra, trên Elasticsearch 1.4.3 và sau này, bạn sẽ cần phải kích hoạt kịch bản động vì nó đã bị tắt theo mặc định, vì vấn đề bảo mật. Xem: https://www.elastic.co/guide/en/elasticsearch/reference/1.4/modules-scripting.html

Answer 5

Cách dễ nhất để thực hiện điều này là "không chuẩn hóa" dữ liệu của bạn để bạn có thuộc tính chứa số và boolean nếu nó tồn tại hay không. Sau đó, bạn chỉ có thể tìm kiếm trên các thuộc tính đó.

Ví dụ:

{ 
    "id": 31939, 
    "hasAttachments": true, 
    "attachmentCount": 2, 
    "attachments": [ 
     { 
     "type": "Attachment", 
     "name": "txt.txt", 
     "mimeType": "text/plain" 
     }, 
     { 
     "type": "Inline", 
     "name": "jpg.jpg", 
     "mimeType": "image/jpeg" 
     } 
    ] 
} 

Answer 6

Tuy gửi bài đến đây cho người bị mắc kẹt cùng hoàn cảnh với tôi. Hãy nói rằng dữ liệu của bạn trông như thế này:

{ 
    "_source": { 
     "fieldName" : [ 
      { 
       "f1": "value 11", 
       "f2": "value 21" 
      }, 
      { 
       "f1": "value 12", 
       "f2": "value 22" 
      } 
     ] 
    } 
} 

Sau đó để lọc fieldName với chiều dài> 1 ví dụ:

"query": { 
    "bool" : { 
     "must" : { 
      "script" : { 
       "script" : { 
        "inline": "doc['fieldName.f1'].values.length > 1", 
        "lang": "painless" 
       } 
      } 
     } 
    } 
} 

Cú pháp kịch bản là như ES 5.4 tài liệu https://www.elastic.co/guide/en/elasticsearch/reference/current/query-dsl-script-query.html.