Plotten eines Apache DataFrame

Question

Gibt es eine Möglichkeit, einen APACHE Dataframe zu plotten? Ich habe es herausgefunden, während ich es in einen Pandas-Datenrahmen umwandelte, der viel Zeit in Anspruch nimmt und nicht mein Ziel ist. Ziel ist es insbesondere, eine Map aus einem Apache DataFrame ohne Konvertierung in einen Pandas DataFrame zu plotten. Mit Plotten möchte ich eine Bibliothek wie Matplotlib oder plotly für die Erstellung einer Grafik oder etwas ähnliches verwenden. Irgendwelche Ideen? Danke!

Answer 1

Meinst du Plot Spark-Dataframe?

yourDF.show(100, truncate=false) 

Dies wird zeigen, in Ihrer Anmeldung Ihre Datenrahmen Struktur und Werte (in diesem Fall zuerst 100 Zeilen) die gleichen:

In diesem Fall könnten Sie so etwas wie diese, mit yourDF als Datenrahmen tun So findest du es in Pandas. Mit der Option truncate geben Sie an, dass Sie den gesamten Datenrahmen anstelle einer reduzierten Version anzeigen möchten.

EDIT: um von einem Datenrahmen direkt plotten, überprüfen Sie bitte die plotly lib, o der

display(dataframe) 

Funktion, dokumentiert here.