0
Ist es möglich, einen eindeutigen Ausgabeordner (s3-Bucket) zu erstellen, indem Sie eine zufällige Nummer eingeben?Wie generiert man einen eindeutigen (zufälligen) Ausgabepfad in Pig?
Ist es möglich, einen eindeutigen Ausgabeordner (s3-Bucket) zu erstellen, indem Sie eine zufällige Nummer eingeben?Wie generiert man einen eindeutigen (zufälligen) Ausgabepfad in Pig?
Dies ist meine Abhilfe für diesen Fall ist, ist es, den aktuellen Zeitstempel verketten:
%declare cts `date +"%s"`
STORE data INTO '/path/$cts' USING PigStorage();
Im nicht vertraut mit s3, aber das obige Beispiel zeigt die Idee der verketten zufällige Zeichenfolge einen einzigartigen Weg zu bekommen.