Ich habe zwei DynamoDB-Tabellen, eine mit einem Map-Datentyp (JSON) und eine mit einem List-Datentyp (JSON-Liste).Wie transformieren Sie DynamoDB Map/List-Typen über AWS Pipeline zu Redshift?
Unsere aktuelle Pipeline nach Redshift behauptet, dass dies nicht unterstützte Datentypen sind.
Wie kann ich diese Spalten in Redshift als varchar (MAX) transformieren?
Können Sie Ihre AWS DataPipeline-Pipeline-ID angeben?
Sehen Sie sich auch dieses Beispiel an, das HiveActivity und RedshiftCopyActivity von DataPipeline zum Kopieren von Daten aus einer DynamoDB-Tabelle in eine Redshift-Tabelle verwendet, während Datenkonvertierung mit Hive (für Datenumwandlung) und S3 (für Staging) durchgeführt wird. Dieses Beispiel wurde durch einen Anwendungsfall motiviert, bei dem der Datentyp einer Spalte in einen anderen Datentyp konvertiert werden soll. In diesem Beispiel wird das Konvertieren einer Spalte von einer binären in eine Base64-Zeichenfolge veranschaulicht.
Wird dies erlauben Sie mir, Listen und Karten in neue Spalten in Redshift auseinander zu ziehen? –