Wie erkennt man, dass der federführende Prometheus keine Metriken mehr liefert?

Question

Ich habe zwei "Slave" Prometheus-Server, einen in jedem meiner kubernetes Cluster. Ich habe einen zentralisierten Prometheus für federation und alerting.

Manchmal kommt es vor, dass ein "Slave" keine Metriken mehr liefert. Wie erkennt man es? So erstellen Sie eine Warnung, die eine solche Situation erfasst.

Leider sieht Prometheus seine Partner immer als UP. Egal was.

Answer 1

Wir brauchen ein bisschen mehr Informationen hier. Wenn up 1 ist, ist alles in Ordnung. Die eigentliche Frage ist, warum Sie ein erfolgreiches Scrape ohne Daten erhalten. Haben Sie versucht, das zu debuggen?

Ich würde auch vorschlagen, so tief in den Stapel zu alarmieren, wie Sie können, siehe https://www.robustperception.io/federation-what-is-it-good-for/