ElasticSearch alle eindeutigen Werte lesen

Question

Ich weiß, dass diese Frage hier mehrmals gestellt wurde. Aber ich muss wissen, ist es Event möglich, alle eindeutige Werte von bestimmten in ES abgelegt zu erhalten.

Was ich bisher kam:

1. Anfrage Mächtigkeit eines Feldes:

 
{ 
    "size": 0, 
    "aggs": { 
     "unique_count": { 
      "cardinality": { 
       "field": "fieldName" 
      } 
     } 
    } 
} 

2. ableiten Anzahl der Partitionen von Kardinalität: total_partitions = unique_count/10.

3. Anfrage Bedingungen für jede Partition i:

 
{ 
    "size": 0, 
    "aggs": { 
     "value_terms": { 
      "terms": { 
       "field": "fieldName", 
       "include": { 
        "partition": $i, 
        "num_partitions": $total_partitions 
       } 
      } 
     } 
    } 
} 

Ist es richtig? Oder gibt es andere Möglichkeiten, das zu tun?

Answer 1

Vielleicht habe ich etwas verpasst in Frage, sondern eine einfache Aggregation sollten Sie alle den einzigartigen Wert eines bestimmten Feldes mit der entsprechenden Zählung geben:

{ 
    "aggs": { 
    "unique_values": { 
     "terms": { 
     "field": "fieldName", 
     "size": 0 
     } 
    } 
    } 
} 

Answer 2

Wir mit elasticsearch-hadoop endete. Es enthält Spark Integration. Wir führen Spark im lokalen Modus - die einfachste Lösung.