Sqoop "Create-Hive-Tabelle" funktioniert nicht für Teradata in Hortonworks

Question

Wir verwenden Apache Sqoop, um Daten aus Teradata-System zu Hive-Tabellen in Hortonworks-Plattform mit Hortonworks Connector für Teradata zu entladen.

Wir versuchen, Hive-Tabelle in Teradata von Sqoop mit dem Sqoop-Befehl create-hive-table zu erstellen. Der Prozess funktioniert ordnungsgemäß, wenn in Teradata kein Interval/Period-Datentyp angegeben ist, aber ein Fehler auftritt (Fehler: nicht unterstützter Datentyp), wenn die Tabelle einen Intervall-/Periodendaten-Datentyp enthält. Ich habe auch versucht, die "hive-import" -Option zu verwenden, aber es funktioniert nicht, wenn die Tabelle nicht zuvor erstellt wurde. Hat jemand dieses Problem bei der Verwendung der Hortonworks Connector für Teradata konfrontiert. Bitte beachten Sie, ich nur ein solches Problem konfrontiert bin, wenn es ein Intervall/Periodenart in Tabelle ist ..

Answer 1

@Sathiyan S

Hier können Sie

Sqoop Befehl gehen

Sqoop create-hive- Tabelle --connection-manager org.apache.sqoop.teradata.TeradataConnManager --connect jdbc: CONNECSTRING - Benutzername Dummy - Kennwortdummypd --map-column-hive Employee_Duration_Interval = STRING, Employee_work_period = STRING - Tabelle TEST_TABLE_TD --hive -Tabelle HIVE_TEST_TABLE

TEST_TABLE_TD ( employee_id INTEGER, EMPLOYEE_NAME VARCHAR (200), Employee_Duration_Interval INTERVAL YEAR (4) ZUM MONAT, Employee_work_period ZEIT (Zeitstempel (6)) )

Bitte lassen Sie mich wissen, wenn Sie weitere Informationen benötigen . Grüße, Indranil Roy

Answer 2

Versuchen mit --map-column-java, Coz kein Datentyp kann mit Intervall/Periode in Java angepasst werden,

so die Abfrage ähnlich der folgenden sein würde,

sqoop create-hive-table --connection-manager org.apache.sqoop.teradata.TeradataConnManager --connect jdbc:CONNECSTRING --username dummy --password dummypd --map-column-hive Employee_Duration_Interval=STRING,Employee_work_period=STRING --map-column-java Employee_Duration_Interval=String,Employee_work_period=String --table TEST_TABLE_TD --hive-table HIVE_TEST_TABLE