Elasticsearch/Kibana Fehler „Daten zu groß ist, Daten für [@timestamp] wäre größer als Begrenzung

Question

Auf meinem Test ELK Cluster, ich bin den folgenden Fehler stoßen bei dem Versuch, Daten aus der letzten Woche zu sehen.

Data too large, data for [@timestamp] would be larger than limit 

die Warnung über Scherben erscheint irreführend zu sein scheitern, weil die Elasticsearch Monitoring-Tools kopf und head zeigen, dass alle Scherben richtig funktionieren, und das elastische Cluster ist grün.

Ein Benutzer in der Google-Gruppe für elasticsearch schlug vor, ram zu erhöhen. Ich habe meine 3 Knoten auf jeweils 8 GB mit einem Heap 4,7 GB erhöht, aber das Problem geht weiter. Ich erzeuge etwa 5 GB bis 25 GB Daten pro Tag mit einer 30-Tage-Aufbewahrung.

Answer 1

Das Löschen des Cache mildert die Symptome vorerst.

http://www.elastic.co/guide/en/elasticsearch/reference/current/indices-clearcache.html

Löschen eines einzelnen Index

curl -XPOST 'http://localhost:9200/twitter/_cache/clear' 

Klar mehrere indicies

curl -XPOST 'http://localhost:9200/kimchy,elasticsearch/_cache/clear' 

curl -XPOST 'http://localhost:9200/_cache/clear' 

Oder wie es von einem Benutzer in IRC vorgeschlagen. Dieser scheint am besten zu funktionieren.

curl -XPOST 'http://localhost:9200/_cache/clear' -d '{ "fielddata": "true" }'