Ich möchte das gleiche Rezept verwenden, das ich für einen Datensatz für den Rest meiner Datensätze verwende. Die Struktur/Header aller Datensätze ist gleich. Gibt es eine Möglichkeit, dasselbe Rezept zu importieren oder wiederzuverwenden, ohne alle Schritte erneut auszuführen?Das gleiche Rezept für mehrere Datensätze wiederverwenden
Ich bin nur mit dataPrep begonnen, aber in meinem Verständnis könnten Sie alle Ihre Quellen in das Rezept füttern zu Beginn, so dass sie dann die Gabel wieder heraus am Ende und Verwendung ein Zeitplan, um jeden auszuführen.
Angenommen, Sie haben fünf Eingabedateien mit identischer Struktur, die jedoch unterschiedliche Absatzmärkte repräsentieren. Importieren Sie alle fünf, und wenn es keine market Spalte gibt, verwenden Sie ein Rezept zu derive eine neue Spalte mit einem statischen Wert.
UNION alle diese in das Rezept (so das Kernrezept erhält eine Datei).
Am Ende des Rezepts, fügen Sie ein neues Rezept für jede Ausgabe, die KEEP läuft, nur die Daten für diesen Markt. Dies erzeugt fünf Ausgänge.
Planen Sie jedes dieser Rezepte, und wenn der Zeitplan läuft, erhalten Sie fünf verschiedene Ausgänge - einen für jeden Eingang.
Auf der Seite der Flussansicht können Sie die Datenquelle für ein Rezept "vertauschen". Wenn Sie verschiedene Folgeschritte für verschiedene Datenquellen verwenden möchten, können Sie das Rezept "kopieren" und dann die Datenquelle des kopierten Rezepts vertauschen.
Weitere Einzelheiten finden Sie https://cloud.google.com/dataprep/docs/html/Flow-View-Page_57344806
Vielen Dank Lars –
Vielen Dank Adam –