Ob die Anzahl der Tasklots genau der Anzahl der CPU-Kerne in flink entsprechen sollte? Oder es kann mehr sein als die Anzahl der CPU-Kerne

Question

Ich verwende flink eigenständige 5-Knoten-Cluster mit jedem Task-Manager von 4 CPU-Kern. Ist es in Ordnung, die Anzahl der Task-Slots höher als die Anzahl der CPU-Kern zu setzen?

Answer 1

Das Verhältnis von Steckplätzen zu Kernen ist ein arbeitslastspezifisches Problem. Eine E/A-intensive Arbeitslast erfordert möglicherweise keinen vollständigen Kern pro Steckplatz. Führen Sie einige Waagentests durch.

Ein weiterer Vorschlag ist bei Performance-Tuning-Videos zu sehen, wie bei Flink nach vorne gesehen: https://youtu.be/Sm5nHu7Mfsk