Membuat pekerjaan impor dari Blob Storage ke sistem file

Azure Managed Lustre terintegrasi dengan Azure Blob Storage untuk menyederhanakan proses impor data dari kontainer blob ke sistem file. Anda dapat mengonfigurasi integrasi ini selama pembuatan kluster, dan Anda dapat membuat pekerjaan impor kapan saja setelah kluster dibuat.

Dalam artikel ini, Anda mempelajari cara menggunakan portal Microsoft Azure untuk membuat pekerjaan impor untuk mengimpor data dari kontainer blob ke dalam sistem file Azure Managed Lustre yang ada.

Catatan

Saat Anda mengimpor data dari kontainer blob ke sistem file Azure Managed Lustre, hanya nama file (namespace) dan metadata yang diimpor ke namespace Lustre. Konten aktual blob diimpor saat diakses oleh klien untuk pertama kalinya. Saat pertama kali mengakses data, ada sedikit penundaan sementara fitur Lustre Hierarchical Storage Management (HSM) menarik konten blob ke file yang sesuai dalam sistem file. Penundaan ini hanya terjadi saat pertama kali file diakses.

Anda dapat memilih untuk mengambil konten blob sebelumnya menggunakan perintah Lustre lfs hsm_restore dari klien yang dipasang dengan kemampuan sudo. Untuk mempelajari selengkapnya, lihat Memulihkan data dari Blob Storage.

Prasyarat

• Sistem file Azure Managed Lustre yang ada - buat menggunakan portal Microsoft Azure, Azure Resource Manager, atau Terraform. Untuk mempelajari selengkapnya tentang integrasi blob, lihat Prasyarat integrasi Blob.

Membuat tugas impor

Mengimpor data dari kontainer blob ke dalam sistem file Azure Managed Lustre dimulai dengan membuat pekerjaan impor. Di bagian ini, Anda mempelajari cara membuat, mengonfigurasi, dan memulai pekerjaan impor di portal Microsoft Azure.

Catatan

Hanya satu pekerjaan impor atau ekspor yang dapat berjalan pada satu waktu. Misalnya, jika pekerjaan impor sedang berlangsung, mencoba memulai pekerjaan impor atau ekspor lain mengembalikan kesalahan.

Mengonfigurasi opsi impor dan memulai pekerjaan

Untuk mengonfigurasi opsi impor dan memulai pekerjaan, ikuti langkah-langkah berikut:

1. Di portal Microsoft Azure, buka sistem file Azure Managed Lustre Anda dan navigasikan ke panel integrasi Blob di bawah Pengaturan.
2. Pilih + Buat pekerjaan baru.
3. Pilih Impor dari menu dropdown Jenis pekerjaan .
4. Masukkan nama untuk pekerjaan impor di bidang Nama Pekerjaan .
5. Pilih nilai untuk bidang Mode resolusi konflik . Pengaturan ini menentukan bagaimana pekerjaan impor menangani konflik antara file yang ada dalam sistem file dan file yang sedang diimpor. Dalam contoh ini, kami memilih Lewati. Untuk mempelajari selengkapnya, lihat Mode resolusi konflik.
6. Pilih nilai untuk Toleransi kesalahan. Pengaturan ini menentukan bagaimana pekerjaan impor menangani kesalahan yang terjadi selama proses impor. Dalam contoh ini, kami memilih Izinkan kesalahan. Untuk mempelajari lebih lanjut, lihat Toleransi kesalahan.
7. Masukkan awalan impor untuk memfilter data yang diimpor dari Blob Storage. Portal Microsoft Azure memungkinkan Anda memasukkan hingga 10 awalan. Dalam contoh ini, kami menentukan awalan /data dan /logs. Untuk mempelajari selengkapnya, lihat Mengimpor awalan.
8. Setelah pekerjaan dikonfigurasi, pilih Mulai untuk memulai proses impor.

Cuplikan layar berikut menunjukkan pengaturan konfigurasi pekerjaan impor di portal Microsoft Azure:

Memantau pekerjaan impor

Setelah pekerjaan impor dibuat, Anda dapat memantau kemajuannya untuk memastikannya berhasil diselesaikan. Di bagian ini, Anda mempelajari cara memantau pekerjaan impor di portal Microsoft Azure.

Untuk melihat detail pekerjaan, ikuti langkah-langkah berikut:

1. Di portal Microsoft Azure, buka sistem file Azure Managed Lustre Anda dan navigasikan ke panel integrasi Blob di bawah Pengaturan.
2. Pilih pekerjaan impor yang ingin Anda pantau dari daftar pekerjaan terbaru.
3. Panel Detail pekerjaan menampilkan informasi tentang pekerjaan, termasuk status pekerjaan, waktu mulai, blob yang diimpor, dan kesalahan atau konflik apa pun yang terjadi selama proses impor.

Cuplikan layar berikut menunjukkan detail pekerjaan untuk pekerjaan impor di portal Microsoft Azure:

Setelah pekerjaan selesai, Anda dapat melihat kontainer pengelogan untuk melihat informasi terperinci tentang proses impor, termasuk kesalahan atau konflik yang terjadi. Informasi ini hanya tersedia setelah pekerjaan selesai.

Langkah berikutnya

Untuk informasi selengkapnya tentang menggunakan Azure Blob Storage dengan Azure Managed Lustre, lihat Menggunakan penyimpanan Azure Blob dengan sistem file Azure Managed Lustre.