Bagikan melalui

Rilis Tabel Langsung Delta 2022.49

  • Artikel

6 Desember - 9, 2022

Fitur dan peningkatan ini dirilis dengan rilis Delta Live Tables 2022.49.

Versi Runtime Databricks yang digunakan oleh rilis ini

Channel:

  • CURRENT (default): Databricks Runtime 11.0.11
  • PRATINJAU: Databricks Runtime 11.3.2

Fitur dan peningkatan baru dalam rilis ini

  • Anda sekarang dapat mengimpor file dari folder Databricks Git sebagai modul Python. Anda dapat mengimpor file dari jalur repositori saat ini atau jalur repositori tertentu menggunakan sys.path.append().

  • Autoscaling yang Ditingkatkan sekarang tersedia secara umum. Dengan rilis ini, Penskalaan Otomatis yang Ditingkatkan adalah mode penskalaan otomatis default untuk alur baru yang dibuat di UI. Databricks merekomendasikan pembaruan alur yang menggunakan autoscaling kluster yang ada untuk menggunakan Autoscaling yang Ditingkatkan.

  • Untuk alur yang berjalan dalam mode berkelanjutan, batas coba lagi default sekarang adalah 2 ketika kegagalan yang dapat diulang terjadi. Termasuk upaya asli, semua alur memiliki tiga upaya (dengan backoff eksponensial) untuk dijalankan ketika kegagalan non-fatal terjadi. Sebelumnya, default adalah percobaan ulang yang tidak terbatas untuk alur batch, dan lima percobaan ulang untuk alur streaming.

  • Parameter pipelines.maxFlowRetryAttempts konfigurasi sekarang berlaku untuk batas coba lagi untuk semua alur, termasuk alur batch dan streaming, dan alur berkelanjutan atau terpicu. Sebelumnya, pipelines.maxFlowRetryAttempts diterapkan ke semua batas coba lagi dalam mode yang dipicu tetapi hanya alur batch dalam mode berkelanjutan; percobaan ulang untuk alur streaming dalam mode berkelanjutan dikendalikan oleh pipelines.numStreamRetryAttempts. Untuk alur yang ada, pipelines.numStreamRetryAttempts terus didukung untuk aliran streaming dalam mode berkelanjutan. Jika keduanya pipelines.numStreamRetryAttempts dan pipelines.maxFlowRetryAttempts diatur, pipelines.numStreamRetryAttempts prioritaskan untuk aliran streaming dalam mode berkelanjutan. Jika tidak, nilai yang dikonfigurasi untuk pipelines.maxFlowRetryAttempts digunakan. Lihat Referensi properti Delta Live Tables.

Perbaikan bug dalam rilis ini

  • Rilis ini memperbaiki bug yang menyebabkan tampilan perhitungan DBU per jam yang salah untuk kluster yang diaktifkan Photon.

  • Rilis ini memperbaiki bug yang menyebabkan tugas pemeliharaan Tabel Langsung Delta gagal di ruang kerja yang diaktifkan Katalog Unity.

  • Rilis ini memperbaiki bug di mana menghentikan atau memulai ulang alur berkelanjutan yang menyerap data dengan Auto Loader menyebabkan alur macet selama beberapa menit.