2016-04-15 12 views

Antwort

1

ALS.checkpointInterval Wert bezieht sich auf die Iterationen für wie viele Nr. von Zeiten wird der Cache überprüft.
Zum Beispiel Wenn interval auf 10 gesetzt ist, bedeutet dies, dass der Cache alle 10 Iterationen überprüft wird.

Checkpointing hilft bei der Wiederherstellung (wenn Knoten fehlschlagen) und StackOverflow-Ausnahmen, die durch lange Abstammung verursacht werden. Es hilft auch bei der Beseitigung von temporären Shuffle-Dateien auf der Festplatte, was bei vielen ALS-Iterationen wichtig sein kann.

Der Standardwert ist . Entsprechend Ihrem Systemspeicher können Sie jetzt den niedrigeren oder höheren Wert

einstellen
Verwandte Themen