Juli 2021

Fitur-fitur ini dan peningkatan platform Azure Databricks dirilis pada Juli 2021.

Catatan

Rilis dilakukan bertahap. Akun Azure Databricks Anda mungkin tidak diperbarui hingga seminggu atau lebih setelah tanggal rilis awal.

Kelola izin eksperimen MLflow dengan REST API Databricks

29 Juli - 2 Agustus 2021: Versi 3.51

Anda sekarang dapat menggunakan API Izin REST API Databricks untuk mengelola pengguna mana yang dapat membaca, mengedit, atau mengelola eksperimen MLflow. Lihat Permissions API.

Antarmuka web Azure Databricks dilokalkan dalam bahasa Portugis dan Prancis (Pratinjau Umum)

29 Juli, 2021

Anda sekarang dapat menggunakan Azure Databricks dalam bahasa Prancis dan Portugis, dan lebih banyak bahasa direncanakan untuk kuartal berikutnya. Buka Pengaturan di menu kanan atas di UI web dan klik tab Preferensi untuk mengubah bahasa Anda.

Databricks Runtime 5.5 LTS untuk dukungan Pembelajaran Mesin berakhir, digantikan oleh versi Dukungan Perpanjangan

27 Juli, 2021

Dukungan Databricks Runtime 5.5 ML LTS berakhir pada 27 Juli 2021, tetapi Dukungan Databricks Runtime 5.5 ML Extended yang baru akan didukung hingga akhir 2021. Databricks Runtime 5.5 ML Extended Support menggunakan Ubuntu 18.04.5 LTS alih-alih distribusi Ubuntu 16.04.6 LTS yang tidak digunakan lagi yang digunakan dalam Databricks Runtime 5.5 ML LTS yang asli. Dukungan Ubuntu 16.04.6 LTS berhenti pada 1 April 2021.

Dukungan Databricks Light 2.4 berakhir pada 5 September, digantikan oleh versi Dukungan Perpanjangan

27 Juli, 2021

Dukungan untuk Databricks Light 2.4 asli berakhir pada 5 September. 2021, tetapi Dukungan Diperpanjang Databricks Light 2.4 baru akan didukung hingga 27 Juli 2022. Databricks Light 2.4 Dukungan Perpanjangan menggunakan Ubuntu 18.04.5 LTS alih-alih distribusi Ubuntu 16.04.6 LTS yang tidak digunakan lagi yang digunakan dalam Databricks Light 2.4 asli. Dukungan Ubuntu 16.04.6 LTS berhenti pada 1 April 2021. Databricks menyarankan agar Anda memigrasikan beban kerja Light Anda ke versi dukungan yang diperluas sesegera mungkin.

Wilayah Azure baru: Jerman Barat Tengah

27 Juli, 2021

Azure Databricks sekarang tersedia di wilayah Jerman Barat Tengah.

Informasi kesegaran fitur tersedia di UI Toko Fitur Databricks (Pratinjau Umum)

26 Juli - 2 Agustus 2021: Versi 3.51

UI Penyimpanan Fitur Databricks sekarang menunjukkan terakhir kali data ditulis ke tabel fitur. Ini juga menunjukkan apakah tabel fitur diperbarui oleh pekerjaan terjadwal, dan jika demikian, jadwal dan status pekerjaan.

Tampilkan hingga 10.000 baris hasil

26 Juli - 2 Agustus 2021: Versi 3.51

Sebelumnya maksimal 1000 baris ditampilkan di notebook. Sekarang, jika tabel mengembalikan lebih dari 1000 baris, Anda dapat memilih untuk menjalankan ulang kueri dan menampilkan hingga 10.000 baris. Membutuhkan Databricks Runtime 8.4 atau lebih tinggi. Untuk informasi selengkapnya, lihat Mengunduh hasil.

Impor dan ekspor notebook secara massal dalam folder sebagai file sumber

26 Juli - 2 Agustus 2021: Versi 3.51

Anda sekarang dapat mengekspor sumber untuk semua notebook di folder ruang kerja sebagai arsip ZIP. Anda dapat mengimpor arsip ZIP ke ruang kerja lain atau folder lain di ruang kerja yang sama untuk membuat ulang semua notebook yang diekspor di sana. File sumber buku catatan berada dalam bahasa default buku catatan. Misalnya, sumber buku catatan Python adalah file Python.

File sumber notebook tidak menyertakan hasil perintah notebook dan sesuai untuk digunakan dalam alur CI/CD. Sebelumnya, Anda dapat mengekspor sumber hanya untuk satu notebook pada satu waktu, dari dalam editor notebook, atau Anda dapat mengekspor semua notebook dalam folder sebagai file HTML atau sebagai arsip Databricks (dengan ekstensi .dbc), yang akan menyertakan hasil perintah notebook kecuali jika notebook telah dihapus sebelum mengekspor.

Untuk informasi selengkapnya tentang mengimpor dan mengekspor notebook, lihat Mengelola notebook.

Pelengkapan otomatis di notebook SQL sekarang menggunakan huruf besar untuk kata kunci SQL.

26 Juli - 2 Agustus 2021: Versi 3.51

Saat Anda menggunakan TAB untuk melengkapi otomatis kata kunci SQL di notebook, hasil pelengkapan otomatis sekarang menjadi huruf kapital. Misalnya, SELECT ditampilkan, bukan select. Ini tidak akan mempengaruhi kueri karena kata kunci SQL tidak peka huruf besar-kecil.

Widget yang dapat disusun ulang dan diubah ukurannya di notebook

26 Juli - 2 Agustus 2021: Versi 3.51

Sekarang Anda dapat mengubah urutan dan ukuran widget Databricks di buku catatan dengan mengklik di bilah widget buku catatan. Lihat Mengonfigurasi pengaturan widget.

Perbaikan kegunaan antarmuka pengguna Azure Databricks

26 Juli - 2 Agustus 2021: Versi 3.51

Rilis ini mengatasi masalah yang mencegah penggunaan kunci ESC untuk menutup beberapa dialog di Antarmuka pengguna Azure Databricks, termasuk:

• Dialog Lihat JSON di antarmuka pengguna tugas.
• Dialog Edit Jadwal di UI Tugas.
• Dialog Konfigurasi Keluar Tunggal di antarmuka pengguna admin.
• Kotak dialog Buat Notebook.

Menentukan pengaturan alur dengan cepat saat Anda membuat alur DLT baru

26 Juli - 2 Agustus 2021: Versi 3.51

Saat membuat alur baru, Anda sekarang dapat menentukan pengaturan langsung dalam dialog Buat Alur di antarmuka pengguna DLT.

Databricks Runtime 8.4 dan 8.4 ML tersedia secara umum; 8.4 Photon adalah Pratinjau Umum

20 Juli 2021

Databricks Runtime 8.4 dan 8.4 ML sekarang tersedia secara umum. Photon 8.4 sedang dalam Pratinjau Umum.

Menggunakan Spark SQL dengan DLT Python API

12-19 Juli 2021: Versi 3.50

Sekarang Anda dapat menggunakan fungsi berikut dengan DLT Python API:

• Fungsi spark.table untuk melakukan pembacaan batch pada himpunan data yang ditentukan dalam saluran.
• Fungsi spark.sql untuk menggunakan kueri SQL untuk menentukan himpunan data. Kueri SQL dapat menggunakan fitur khusus DLT, termasuk referensi ke himpunan data internal menggunakan kata kunci LIVE dan bacaan bertahap menggunakan kata kunci STREAM.

Untuk detail selengkapnya, lihat referensi bahasa Python.

Peningkatan pemrosesan dan analisis data dengan tugas Azure Databricks (Pratinjau Umum)

12-19 Juli 2021: Versi 3.50

Databricks dengan senang hati mengumumkan pembaruan untuk pekerjaan Azure Databricks yang memungkinkan Anda mengatur dan menjalankan pekerjaan dengan beberapa tugas. Anda dapat menggunakan ini untuk menentukan grafik asiklik terarah (DAG) dari dependensi tugas, membuatnya lebih mudah untuk membangun dan memantau data yang andal dan alur kerja pembelajaran mesin. Fitur ini dalam pratinjau umum dan dinonaktifkan secara default.

Penting

Setelah Anda mengaktifkan fitur ini, Anda tidak dapat menonaktifkannya.

Lihat Pekerjaan Lakeflow untuk detailnya.

Pengurangan biaya untuk kluster default DLT (Pratinjau Publik)

12-19 Juli 2021: Versi 3.50

Untuk mengontrol biaya, perubahan berikut telah dilakukan pada kluster default DLT:

• Ubah tipe instans default menjadi Standard_F8s.
• Aktifkan penskalaan otomatis secara default dengan pekerja minimum sama dengan 1 dan pekerja maksimum sama dengan 5.

Mengurutkan alur menurut nama di antarmuka pengguna DLT (Pratinjau Umum)

12-19 Juli 2021: Versi 3.50

Sekarang Anda dapat mengklik header kolom Nama di antarmuka pengguna DLT untuk mengurutkan alur berdasarkan nama dalam urutan naik (A -> Z) atau urutan menurun (Z -> A).

Perubahan pada halaman Komputasi

12-19 Juli 2021: Versi 3.50

Tautan Libraries, Job Run, Spark UI, dan Logs dari laman Komputasi telah dihapus. Untuk melihat informasi tentang pustaka, atau untuk melihat antarmuka pengguna Spark dan log, gunakan tab yang sesuai di halaman detail kluster. Untuk melihat informasi tentang pelaksanaan pekerjaan, klik Buka Pelaksanaan Pekerjaan di halaman itu.

Dukungan Databricks Runtime 5.5 LTS berakhir, digantikan oleh Databricks Runtime 5.5 Dukungan Perpanjangan hingga akhir 2021

9 Juli 2021

Dukungan untuk Databricks Runtime 5.5 LTS dan Databricks Runtime 5.5 LTS untuk Pembelajaran Mesin berakhir pada 10 Juli. Lihat Siklus hidup dukungan Databricks.

Databricks Runtime 5.5 Dukungan Perpanjangan akan didukung hingga akhir tahun 2021. Databricks Runtime 5.5 Dukungan Perpanjangan menggunakan Ubuntu 18.04.5 LTS alih-alih distribusi Ubuntu 16.04.6 LTS yang tidak digunakan lagi di Databricks Runtime 5.5 LTS. Dukungan Ubuntu 16.04.6 LTS berhenti pada 1 April 2021.

Repos API (Pratinjau Umum)

6 Juli 2021

Anda sekarang dapat memperbarui repositori Azure Databricks secara terprogram ke versi terbaru cabang Git tertentu atau ke tag menggunakan REPOS API baru. Untuk detailnya, lihat REPOS API.

Databricks Runtime 8.4 (Beta)

1 Juli 2021

Databricks Runtime 8.4 dan Databricks Runtime 8.4 ML kini tersedia sebagai rilis Beta.