Bagikan melalui

Apa itu Azure Managed Lustre?

  • Artikel

Layanan Azure Managed Lustre memberi Anda kemampuan untuk membuat sistem file Lustre berbasis Azure dengan cepat untuk pekerjaan komputasi performa tinggi berbasis cloud.

Lustre adalah sistem file paralel sumber terbuka yang dapat menskalakan ke ukuran penyimpanan besar sekaligus memberikan throughput performa tinggi. Lustre digunakan oleh superkomputer tercepat di dunia dan dalam alur kerja yang berpusat pada data untuk banyak jenis industri. Untuk informasi selengkapnya, lihat https://www.lustre.org .

Azure Managed Lustre menghemat pekerjaan provisi, konfigurasi, dan pengelolaan sistem file Lustre Anda sendiri. Dengan menggunakan perintah Buat di portal Azure, Anda dapat dengan cepat menyebarkan sistem file Lustre dalam ukuran yang Anda butuhkan, menghubungkan klien Anda, dan siap menggunakan sistem.

Microsoft Azure Blob Storage terintegrasi dengan Azure Managed Lustre, yang memungkinkan Anda menentukan file untuk diimpor dari kontainer blob untuk penggunaan sistem file. Setelah pekerjaan komputasi berperforma tinggi selesai, Anda dapat mengekspor data yang diubah ke Azure Blob Storage, dan menghapus sistem Azure Managed Lustre. Untuk informasi selengkapnya, lihat Integrasi Azure Blob Storage, nanti di artikel ini.

Anda juga dapat menggunakan sistem file Azure Managed Lustre dengan kontainer Azure Kubernetes Service (AKS). Untuk informasi selengkapnya, lihat Menggunakan Azure Managed Lustre dengan Kubernetes.

Keamanan data di Azure Managed Lustre

Semua data yang disimpan di Azure dienkripsi saat tidak aktif menggunakan kunci terkelola Azure secara default. Jika Anda ingin mengelola kunci yang digunakan untuk mengenkripsi data yang disimpan di kluster Azure Managed Lustre Anda, ikuti instruksi di Enkripsi sisi server penyimpanan disk Azure.

Semua informasi dalam sistem file Azure Managed Lustre juga dilindungi oleh enkripsi host VM pada disk terkelola yang menyimpan data Anda, bahkan jika Anda menambahkan kunci yang dikelola pelanggan untuk disk Lustre. Menambahkan kunci yang dikelola pelanggan memberikan tingkat keamanan ekstra bagi pelanggan dengan kebutuhan keamanan yang tinggi. Untuk informasi selengkapnya, lihat Enkripsi sisi server penyimpanan disk Azure.

Catatan

Azure Managed Lustre tidak menyimpan data pelanggan di luar wilayah tempat Anda menyebarkan instans layanan.

Ketahanan data di Azure Managed Lustre

Sistem file Azure Managed Lustre Anda menggunakan disk terkelola Azure sebagai disk data target penyimpanan objek (OST).

Semua sistem file Azure Managed Lustre yang dibuat sebagai jenis sistem file "tahan lama" menggunakan disk Azure Premium SSD (solid state drive) yang dikonfigurasi sebagai penyimpanan redundan lokal (LRS). Konten disk LRS direplikasi tiga kali dalam pusat data lokal untuk melindungi dari kegagalan drive dan rak server.

Sistem file Azure Managed Lustre itu sendiri juga berkontribusi pada ketahanan data melalui proses penyimpanan objek yang digunakannya untuk menyimpan data pada disk ini.

Jika Anda memerlukan redundansi data regional atau global, Anda dapat mengintegrasikan sistem file Anda dengan Azure Blob Storage. Setelah terintegrasi, Anda dapat memulai pekerjaan ekspor untuk mengekspor file ke kontainer Azure Blob Storage dengan kebijakan redundansi yang berbeda untuk penyimpanan jangka panjang. Konfigurasikan redundansi Azure Blob Storage untuk akun penyimpanan. Anda dapat memilih redundansi data zonal (ZRS) atau redundansi data global (GRS) saat membuat akun penyimpanan. Untuk mempelajari selengkapnya tentang opsi redundansi data untuk file Azure Managed Lustre Anda, lihat Jenis akun penyimpanan yang didukung.

Integrasi Azure Blob Storage

Microsoft Azure Blob Storage terintegrasi dengan Azure Managed Lustre, yang memungkinkan Anda menentukan file untuk diimpor dari kontainer blob untuk penggunaan sistem file. Integrasi Azure Blob Storage adalah aplikasi manajemen penyimpanan hierarkis Lustre (HSM). Tidak perlu mengimpor seluruh himpunan data Anda untuk setiap pekerjaan. Sebagai gantinya, Anda dapat membuat sistem file yang berbeda untuk pekerjaan yang berbeda dan menyimpan data dalam kontainer blob Azure berbiaya rendah di antara penggunaan. Setelah pekerjaan komputasi berperforma tinggi selesai, Anda dapat mengekspor data yang diubah ke Azure Blob Storage, dan menghapus sistem Azure Managed Lustre.

Azure Managed Lustre disesuaikan untuk bekerja dengan mulus dengan Azure Blob Storage. Anda dapat menentukan kontainer blob yang ada untuk membuat data yang ada dapat diakses dari sistem file Azure Managed Lustre Anda, atau menentukan kontainer kosong yang Anda isi dengan data atau gunakan untuk menyimpan output Anda. Penyiapan dan pemeliharaan dilakukan untuk Anda. Anda cukup menentukan kontainer blob mana yang akan digunakan.

Jika mengintegrasikan Azure Blob Storage saat membuat sistem file Lustre, Anda dapat menggunakan fitur Lustre HSM. Jika Anda tidak menginginkan manfaat Lustre HSM, Anda dapat mengimpor dan mengekspor data untuk sistem file Azure Managed Lustre dengan menggunakan perintah klien secara langsung.

Menggunakan Azure Managed Lustre dengan Kubernetes

Jika Anda ingin menggunakan sistem penyimpanan Azure Managed Lustre dengan kontainer Kubernetes, Anda dapat menggunakan driver antarmuka dukungan kontainer (CSI) Azure Lustre untuk Kubernetes, yang kompatibel dengan Azure Kubernetes Service (AKS). Jenis penginstalan Kubernetes lainnya saat ini tidak didukung.

Kubernetes dapat menyederhanakan konfigurasi dan penyebaran titik akhir klien virtual untuk beban kerja Azure Managed Lustre Anda, mengotomatiskan tugas penyiapan seperti:

  • Membuat Azure Virtual Machine Scale Sets yang digunakan oleh Azure Kubernetes Service (AKS) untuk menjalankan pod.
  • Memuat perangkat lunak klien Lustre yang benar pada instans VM.
  • Menentukan titik pemasangan Azure Managed Lustre, dan menyebarkan informasi tersebut ke pod klien.

Driver Azure Lustre CSI untuk Kubernetes dapat mengotomatiskan penginstalan perangkat lunak klien dan memasang drive. Driver menyediakan plugin pengontrol CSI sebagai penyebaran dengan dua replika secara default, dan plugin node CSI, sebagai DaemonSet. Anda dapat mengubah jumlah replika.

Untuk mengetahui versi driver mana yang akan digunakan, lihat Versi Kubernetes yang kompatibel.

Langkah berikutnya