Wie ein Wörterbuch zwischen mehreren Prozessen in Python ohne Sperre teilen

Question

Ich muss ein großes Wörterbuch (ca. 1 GB groß) zwischen mehreren Prozessen teilen, aber alle Prozesse werden immer davon lesen. Ich brauche keine Verriegelung.

Gibt es eine Möglichkeit, ein Wörterbuch ohne Sperren zu teilen?

Das Multiprocessing-Modul in Python eine Array-Klasse bereitstellt, die durch das Setzen
Schlosses ohne Sperrfreigabe erlaubt = false
jedoch Es gibt keine solche Option für Wörterbuch von Managern bereitgestellt Modul in Multiprocessing.

Answer 1

Nun, das Diktat eines Managers hat überhaupt keine Sperren! Ich denke, das gilt auch für das andere gemeinsame Objekt, das Sie auch über den Manager erstellen können. Wie ich das weiß? Ich habe versucht:

from multiprocessing import Process, Manager 

def f(d): 
    for i in range(10000): 
     d['blah'] += 1 

if __name__ == '__main__': 
    manager = Manager() 

    d = manager.dict() 
    d['blah'] = 0 
    procs = [ Process(target=f, args=(d,)) for _ in range(10) ] 
    for p in procs: 
     p.start() 
    for p in procs: 
     p.join() 

    print d 

Wenn es Schlösser sind auf d, wäre das Ergebnis 100000 sein. Aber stattdessen ist das Ergebnis ziemlich zufällig und so ist dies nur eine schöne Illustration, warum Sperren benötigt werden, wenn Sie Sachen ändern ;-)

Also gehen Sie einfach weiter und verwenden Sie manager.dict().