Dateien aus Data Lake speichern

Question

Ich habe ein Paket, das täglich eine Datei in Data Lake Store importiert. Das ist also die gleiche Datei mit unterschiedlichen Werten (gleiche Spalten usw.). Meine Idee ist es, diese Dateien für einen monatlichen Bericht in Data Lake zu vereinigen. Ich möchte U-SQL untersuchen, also ist meine Frage:
Ist das möglich mit U-SQL zu tun?
Wenn es nicht möglich ist, gibt es irgendwelche anderen Möglichkeiten, das zu tun?

Answer 1

Es ist sehr einfach möglich, Datensätze aus zwei Dateien zusammenzuführen und eine neue Datei zu schreiben. Hier sind die Schritte

1. alle der neuen Datei lesen EXTRACT mit
2. Lesen Sie alle Datensätze der aktuellen Master-Datei EXTRACT mit
3. Verwenden UNION alle Datensätze zu verschmelzen: https://msdn.microsoft.com/en-us/library/azure/mt621340.aspx
4. schreiben Ausgang Master-Datei mit OUTPUT-Anweisung

Für ein schnelles U-SQL-Tutorial geht hier: https://docs.microsoft.com/en-us/azure/data-lake-analytics/data-lake-analytics-u-sql-get-started

Answer 2

Ich bin noch nicht in der Azure-Datenbank eingebunden, aber ich kann mir vorstellen, dass die Datentools von Microsoft dafür eine Anwendung erstellen könnten. Kann es versuchen?