Updates in Mittelwert-Feld-Inferenz

Question

Ich frage mich, ob ELBO sollte monoton wie jede Aktualisierung der Variations-Parameter q_i? Ich verstehe, dass es bei jeder Iteration zunehmen sollte, aber gilt das auch innerhalb einer Iteration für jedes q_i? Vielen Dank!

Answer 1

Ja, es ist auch wahr. Denkt, es ist eine Koordinaten Aufstieg Methode:

q_i^t = argmax_{q_i} \cal{L}(q_1^{t}, ...,q_{i-1}^{t}, q_i, q_{i+1}^{t-1}, ..., q_n^{t-1}). 

so dass Sie immer maximieren.