Wie fügen Sie Daten in komplexen Datentyp "Struct" in Hive

Question

Ich bin völlig neu in Hive und Stack Overflow. Ich versuche, eine Tabelle mit dem komplexen Datentyp "STRUCT" zu erstellen und sie dann unter Verwendung INSERT INTO TABLE in Hive aufzufüllen.

Ich verwende den folgenden Code:

CREATE TABLE struct_test 
(
address STRUCT< 
       houseno: STRING 
       ,streetname: STRING 
       ,town:  STRING 
       ,postcode: STRING 
       > 
); 

INSERT INTO TABLE struct_test 
SELECT NAMED_STRUCT('123', 'GoldStreet', London', W1a9JF') AS address 
FROM dummy_table 
LIMIT 1; 

ich die folgende Fehlermeldung erhalten:

Error while compiling statement: FAILED: semanticException [Error 10044]: Cannot insert into target because column number type are different 'struct_test': Cannot convert column 0 from struct to array>.

konnte ich mit Erfolg einen ähnlichen Code verwenden, zu erstellen und einen Datentyp Array bevölkern aber habe Schwierigkeiten mit Struct. Ich habe viele Codebeispiele ausprobiert, die ich online gefunden habe, aber keine von ihnen scheint für mich zu funktionieren ... Ich würde wirklich etwas Hilfe bei dieser Sache zu schätzen wissen, da ich schon eine ganze Weile daran festhalte! Vielen Dank.

Answer 1

Ihr SQL-Fehler. Sie Funktion named_struct

INSERT INTO TABLE struct_test 
     SELECT NAMED_STRUCT('houseno','123','streetname','GoldStreet', 'town','London', 'postcode','W1a9JF') AS address 
      FROM dummy_table LIMIT 1; 

Answer 2

Hive unterstützt keine Literale für komplexe Typen (array, Karte, struct, union), so ist es nicht möglich, sie in INSERT INTO zu verwenden ... VALUES-Klauseln. Dies bedeutet, dass der Benutzer mit der INSERT INTO ... VALUES-Klausel keine Daten in eine komplexe Datentypspalte einfügen kann. link

Answer 3

Sie keine komplexen Datentyp einfügen können direkt in Hive.For Einfügen structs haben: Sie sollten SQL verwenden. Sie müssen eine Dummy-Tabelle mit Daten erstellen, die Sie in die Structs-Spalte der gewünschten Tabelle einfügen möchten. wie in Ihrem Fall eine Dummy-Tabelle erstellen

CREATE TABLE DUMMY (houseno: STRING 
      ,streetname: STRING 
      ,town:  STRING 
      ,postcode: STRING); 

dann in gewünschter Tabelle einzufügen tun

INSERT INTO struct_test SELECT named_struct('houseno',houseno,'streetname' 
        ,streetname,'town',town,'postcode',postcode) from dummy; 

Answer 4

ist möglich:

Sie müssen den Spaltennamen in Satz von Dummy oder anderer Tabelle geben .

INSERT INTO TABLE struct_test 
SELECT NAMED_STRUCT('houseno','123','streetname','GoldStreet', 'town','London', 'postcode','W1a9JF') AS address 
FROM dummy 

Oder

INSERT INTO TABLE struct_test 
SELECT NAMED_STRUCT('houseno',tb.col1,'streetname',tb.col2, 'town',tb.col3, 'postcode',tb.col4) AS address 
FROM table1 as tb 

Answer 5

müssen keine Dummy-Tabelle erstellen: nur Befehl:

insert into struct_test 
select named_struct("houseno","house_number","streetname","xxxy","town","town_name","postcode","postcode_name");