Resque: keine redundanten Jobs in die Warteschlange stellen?

Question

Ich habe eine Reihe von Resque-Warteschlangen, geordnet nach Priorität. Für alle Jobs in der Warteschlange mit der niedrigsten Priorität haben sie keine Argumente, und ein späterer Lauf ersetzt alle vorherigen Läufe, z. Sie synchronisieren Daten mit einem externen Dienst. Es macht also keinen Sinn, ein Backlog mit mehreren Kopien dieser Jobs zu erstellen - wenn Sie es dreimal hintereinander ausführen, wird kein Wert hinzugefügt.

Aber in Zeiten mit hohem Arbeitsaufkommen erhalten wir einen Rückstand (nur in dieser Warteschlange), da die Mitarbeiter mit Jobs mit höherer Priorität beschäftigt sind.

Kann ich diesen Rückstand verhindern, indem Sie verhindern, dass redundante Jobs überhaupt in die Warteschlange eingereiht werden?

Answer 1

Ja, es gibt Edelsteine, die dafür verfügbar sind. (AFAICT, arbeiten sie durch die Job-Klasse mit seiner Liste von Argumenten Hashing und eine Reihe von beibehalten „Tasten bereits eine Warteschlange eingereiht“ separat in Redis.)

Siehe https://github.com/resque/resque-loner und https://github.com/neighborland/resque_solo.