Hive Aufreißen/Seitenansicht mehrere Arrays

Question

ich einen Bienenstock-Tabelle mit dem folgenden Schema haben:

COOKIE | PRODUKT_ID | CAT_ID | MENGE
1.234.123 [1,2,3] [r, t, null] [2,1, null]

Wie kann ich normalisieren die Arrays so dass ich das folgende Ergebnis

PLÄTZCHEN erhalten | PRODUKT_ID | CAT_ID | STCK

1234123 [1] [R] [2]

1234123 [2] [t] [1]

1234123 [3] null null

habe ich versucht, die folgenden :

aber das Ergebnis kommt als ein kartesisches Produkt heraus.

Answer 1

Zur Lösung dieses Problems können Sie die UDFs numeric_range und array_index von Brickhouse (http://github.com/klout/brickhouse) verwenden. Es ist ein informatives im Detail beschreibt, Blog-Posting über bei http://brickhouseconfessions.wordpress.com/2013/03/07/exploding-multiple-arrays-at-the-same-time-with-numeric_range/

diese UDF verwenden, würde die Abfrage so etwas wie

select cookie, 
    array_index(product_id_arr, n) as product_id, 
    array_index(catalog_id_arr, n) as catalog_id, 
    array_index(qty_id_arr, n) as qty 
from table 
lateral view numeric_range(size(product_id_arr)) n1 as n; 

Answer 2

ich sein, eine sehr gute Lösung für dieses Problem gefunden, ohne eine UDF zu verwenden, posexplode ist eine sehr gute Lösung:

SELECT COOKIE , 
ePRODUCT_ID, 
eCAT_ID, 
eQTY 
FROM TABLE 
LATERAL VIEW posexplode(PRODUCT_ID) ePRODUCT_IDAS seqp, ePRODUCT_ID 
LATERAL VIEW posexplode(CAT_ID) eCAT_ID AS seqc, eCAT_ID 
LATERAL VIEW posexplode(QTY) eQTY AS seqq, eDateReported 
WHERE seqp = seqc AND seqc = seqq;