Granska Delta Lake-tabellinformation med beskrivande information

  • Artikel

Du kan hämta detaljerad information om en Delta-tabell (till exempel antal filer, datastorlek) med hjälp av DESCRIBE DETAIL.

DESCRIBE DETAIL '/data/events/'

DESCRIBE DETAIL eventsTable

Information om Spark SQL-syntax finns i BESKRIVA DETALJER.

Se Delta Lake API-dokumentationen för Scala/Java/Python-syntaxinformation.

Informationsschema

Utdata för den här åtgärden har bara en rad med följande schema.

Kolumn Typ Beskrivning
Format Sträng Format för tabellen, dvs delta. .
Id Sträng Unikt ID för tabellen.
Namn Sträng Namnet på tabellen enligt definitionen i metaarkivet.
Beskrivning Sträng Beskrivning av tabellen.
Plats Sträng Plats för tabellen.
createdAt Tidsstämpel När tabellen skapades.
lastModified Tidsstämpel När tabellen senast ändrades.
partitionColumns matris med strängar Namn på partitionskolumnerna om tabellen är partitionerad.
numFiles Lång Antal filer i den senaste versionen av tabellen.
sizeInBytes Int Storleken på den senaste ögonblicksbilden av tabellen i byte.
Egenskaper strängsträngskarta Alla egenskaper som angetts för den här tabellen.
minReaderVersion Int Lägsta version av läsare (enligt loggprotokollet) som kan läsa tabellen.
minWriterVersion Int Lägsta version av skrivare (enligt loggprotokollet) som kan skriva till tabellen.

Nedan visas ett exempel på hur utdata ser ut:

+------+--------------------+------------------+-----------+--------------------+--------------------+-------------------+----------------+--------+-----------+----------+----------------+----------------+
|format|                  id|              name|description|            location|           createdAt|       lastModified|partitionColumns|numFiles|sizeInBytes|properties|minReaderVersion|minWriterVersion|
+------+--------------------+------------------+-----------+--------------------+--------------------+-------------------+----------------+--------+-----------+----------+----------------+----------------+
| delta|d31f82d2-a69f-42e...|default.deltatable|       null|file:/Users/tuor/...|2020-06-05 12:20:...|2020-06-05 12:20:20|              []|      10|      12345|        []|               1|               2|
+------+--------------------+------------------+-----------+--------------------+--------------------+-------------------+----------------+--------+-----------+----------+----------------+----------------+