6
Wenn man den Befehl DESCRIBE EXTENDED in einer beliebigen Hive-Tabelle ausführt, zeigt das Ergebnis totalSize- und rawDataSize-Werte nahe dem Ende der Ausgabe an.Was bedeuten die folgenden Felder: 'totalSize' und 'rawDataSize' bedeuten in DESCRIBE EXTENDED Query-Ausgabe in Hive?
Was bedeuten diese Felder?
Ex:
hive > DESCRIBE EXTENDED <TableName>
Output Results:
Table(tableName:TablenameXXXXX, dbName:XXxXXX,
.......... .......................
numRows=116429472, totalSize=3835205544, rawDataSize=35040221600})
Reflektiert die totalSize den verwendeten Speicherplatz nur in Bezug auf den verwendeten Datenteil oder enthält er den verwendeten Datenteil und einen nicht verwendeten Teil eines HDFS-Blocks? –
Ist die totalSize ein Vielfaches der HDFS-Blockgröße? –
Es muss nicht mehrere Blockgröße sein. HDFS verschwendet keinen Speicher im letzten Block der Datei. Wenn die Dateigröße 200 MB beträgt und die Blockgröße 128 MB beträgt, hat der erste Block eine Größe von 128 MB und der zweite Block eine Größe von 72 MB. –