File terkompresi LZO
Karena pembatasan lisensi, codec pemadatan LZO tidak tersedia secara default di kluster Azure Databricks. Untuk membaca file terkompresi LZO, Anda harus menggunakan skrip init untuk memasang codec pada kluster Anda pada waktu peluncuran.
Contoh buku catatan: File terkompresi Init LZO
Buku catatan berikut ini:
- Membangun codec LZO.
- Membuat skrip init yang:
- Memasang pustaka kompresi LZO dan perintah
lzop, dan menyalin codec LZO ke jalur kelas yang tepat. - Mengonfigurasi Spark untuk menggunakan codec kompresi LZO.
- Memasang pustaka kompresi LZO dan perintah
Init LZO file terkompresi notebook
Contoh buku catatan: Membaca file terkompresi LZO
Notebook berikut membaca file terkompresi LZO menggunakan codec yang diinstal oleh skrip init: