0
Wie RDDs haben collectAsync(), gibt es eine Möglichkeit, ein Dataset asynchron in Spark zu sammeln?Sammeln eines Datensatzes in Spark asynchron
A
Antwort
-2
Jemand hat bereits eine Antwort hier gegeben, überprüfen Sie bitte den Link
what is the difference between spark javardd methods collect() & collectAsync()?
0
ja collectAsync() ist die Art und Weise, die einen Datensatz asynchron zu sammeln.
Im RDD-Betrieb hat collectAsync() dagegen keine Latenz collect().
val value = rdd.collect() //RDD elements will be copied to spark driver
val value = rdd.collectAsync() //no copy here
value.get() //Now, RDD elements will be copied to spark driver
+0
Danke für Ihre Antwort. Eigentlich suche ich nach einer Dataset-Funktion, nicht RDD. –
Verwandte Themen
- 1. Scala sammeln ineffizient in Spark?
- 2. Verständnis Spark-Asynchron-Aktionen
- 3. Cache und Abfrage eines Datensatzes parallel mit Spark
- 4. Erzwingen eines Datensatzes in PureScript
- 5. Kopieren eines Datensatzes in VBA
- 6. Replizieren eines Datensatzes in Orakel
- 7. Drucken eines Datensatzes in Javascript
- 8. Durchsuchen eines HDF5-Datensatzes
- 9. Altern eines Datensatzes
- 10. Erstellen eines Datensatzes
- 11. Etikettieren eines gestapelten Datensatzes
- 12. Sqlite Aktualisieren eines Datensatzes
- 13. Spark Scala println erfordert ein Sammeln()?
- 14. Was sind Best Practices zum Sammeln, Verwalten und Sicherstellen der Genauigkeit eines großen Datensatzes?
- 15. Erstellen eines Datensatzes in einem Modell beim Erstellen eines Datensatzes in einem anderen Modell in odoo
- 16. Analysieren eines gemischten Delimiter-Datensatzes
- 17. Django - Löschen eines bestimmten Datensatzes
- 18. Mehrere Instanzen eines Datensatzes auswählen
- 19. Größe eines einzelnen Datensatzes? SQL
- 20. Einfügen eines Datensatzes Entity Framework
- 21. Codierung eines Datensatzes mit Protobuff
- 22. Verständnis Shannon Entropie eines Datensatzes
- 23. Montage eines Datensatzes von AWS
- 24. Untergruppen eines Pytorch-Datensatzes nehmen
- 25. Aktualisieren eines Datensatzes mit SQL
- 26. Eloquent: Count eines bestehenden Datensatzes
- 27. zum Abrufen eines bestimmten Datensatzes
- 28. Polymorphe Assoziation, Erstellen eines Datensatzes
- 29. Exponentiellen Wert eines Datensatzes berechnen
- 30. Lineare Regression eines gegebenen Datensatzes
Haben Sie diesen Link geöffnet? Was ich gesagt habe, ist der Link – learner
Ich habe. Es gibt den Unterschied zwischen 'collect' und' collectAsync' an. Sie haben genug Ruf, um etwas zu kommentieren. Wenn Sie denken, dass es sich um ein Duplikat handelt, kommentieren Sie das in der Frage und kennzeichnen es als solches. – philantrovert