elasticsearch errori/Kibana "troppo grandi quantità di dati, i dati per [@timestamp] sarebbe più grande di limitare

Question

Sulla mia prova grappolo ELK, che sto incontrando il seguente errore quando si tenta di visualizzare i dati dall'ultima settimana.

Data too large, data for [@timestamp] would be larger than limit 

l'avvertimento circa schegge mancanza sembra essere fuorviante, perché gli strumenti di monitoraggio elasticsearch kopf e head mostrano che tutti i frammenti funzionino correttamente, e il cluster elastico è verde.

Un utente del gruppo google per elasticsearch ha suggerito di aumentare la ram. Ho aumentato i miei 3 nodi a 8 GB ciascuno con un heap da 4,7 GB, ma il problema persiste. Generico circa 5 GB a 25 GB di dati al giorno, con una conservazione di 30 giorni.

Answer 1

La pulizia della cache allevia i sintomi per ora.

http://www.elastic.co/guide/en/elasticsearch/reference/current/indices-clearcache.html

Cancella un unico indice

curl -XPOST 'http://localhost:9200/twitter/_cache/clear' 

Cancella multipli indicies

curl -XPOST 'http://localhost:9200/kimchy,elasticsearch/_cache/clear' 

curl -XPOST 'http://localhost:9200/_cache/clear' 

O come suggerito da un utente in IRC. Questo sembra funzionare al meglio.

curl -XPOST 'http://localhost:9200/_cache/clear' -d '{ "fielddata": "true" }'