konvertieren eingehende Nachricht Parkett Format

Question

Ich weiß, dass ich von nifi Funken mit lesen und zu hdfs in Parkett-Format schreiben, aber ist es eine Möglichkeit, direkt von Apache-nifi auf HDFS in Parkett-Format? .Bitte Beratung

zu schreiben

Danke Pradeep

Answer 1

Ja. Sie können den PutParquet Prozessor in NiFi verwenden. Sie müssen ein Schema für die eingehende Flussdatei im AVRO-Schema-Format angeben und das HDFS-Verzeichnis angeben, in dem die konvertierte Parkettdatei gespeichert werden soll. Sie können detailliertes Beispiel here finden.