Ich benutze HCatalog Version 0.4. Ich habe eine Tabelle im Hive 'abc', die eine Spalte mit dem Datentyp 'timestamp' hat. Wenn ich versuche, ein Schwein Skript wie folgt zu starten "raw_data = load 'abc' mit org.apache.hcatalog.pig.HCatLoader();" Ich erhalte den Fehler "java.lang.TypeNotPresentException: Type timestamp not present".Art Umwandlung Schwein hcatalog
Das Problem ist, dass hcatalog Timestamp-Typ nicht unterstützt. Es wird unterstützt unter Bienenstock 0.13, sie haben ein Problem zu diesem Problem, das bereits gelöst wurde, können Sie das Problem in https://issues.apache.org/jira/browse/HIVE-5814
Hive 0.13 hat Timestamp Datentyp. Bei Verwendung von HCatLoader tritt jedoch ein Datenverlust auf.
Aber Hive -> Schwein wird HCat Loader verwenden, die Nanosekunden werden vom Zeitstempel verloren.
Schwein -> Hive mit HCat Storer. Übersetzt basierend auf dem Zeitstempel mit Millisekunden.
Referenz:
Wenn Sie Hive-Hcatalog 0.13.0 Kontrollpfad zu HCatLoader verwenden, müssen Sie org.apache.hive.hcatalog.pig.HCatLoader() anstelle org.apache.hcatalog.pig.HCatLoader()