Multi-Node-Parallelität in Java

Question

Ich habe ein Multithread-Java-Programm geschrieben, um ein peinlich paralleles Problem zu lösen, so dass es alle freien CPU-Zyklen einer Multi-Core-CPU nutzt. Ich möchte meine Lösung so umgestalten, dass sie auf mehreren Knoten ausgeführt werden kann, während der Großteil des Codes, den ich bereits geschrieben habe, beibehalten wird.

Ich habe MPI mit C in der Vergangenheit verwendet und mir wurde gesagt, dass es der "richtige" Weg zur Maximierung der CPU-Zyklen ist, aber ich kenne auch andere gleichzeitige Frameworks in Java wie RMI und frage mich, ob sie sind genauso gut.

Gibt es eine gute Möglichkeit, Multi-Node- und Multi-Core-Parallelität in Java zu behandeln, wo das Hauptziel darin besteht, möglichst viele CPU-Zyklen außerhalb des Clusters zu nutzen?

Bearbeiten: Ich habe den Eindruck, dass es keinen einfachen Weg gibt, mit diesem Zeug umzugehen. Ich bin nicht überrascht, aber ich hatte gehofft. :)

Answer 1

JMS ist ein guter Anfang.

Answer 2

Sie können versuchen Hazelcast. Es hat einen verteilten ExecutorService. Dies sollte Ihnen erlauben, Aufgaben zu einem Service hinzuzufügen, die über eine beliebige Anzahl von Knoten laufen.

Answer 3

Hängt davon ab, was Sie tun, und Ihr Budget, das Sie vielleicht in aussehen soll (in keiner bestimmten Reihenfolge)

• Actors besonders Akka, die gute Fern Schauspieler, STM und Supervisor Stil managment mit einem Java-API hat
• Norbert
• GridGain
• Terracotta
• Gigaspaces
• Oracle Coherence
• IBM Extreme Scale
• TIBCO ActiveSpaces

Siehe auch:

• java util concurrent und guava (Presentation slides focusing on util.concurrent) (EventBus)
• Bibliotheken wie javolution oder JSR 166
• Functional programming fähige JVM-Sprachen wie Scala und Clojure hat bessere Multi-Core-Auslastung als Java.
• RXJava (Java, Clojure, Scala ... Reactive Extentions)

Answer 4

Sehen Sie sich auch Apache Hadoop, verwendet es MapReduce und eignet sich gut für viele parallele Lösungen.