Agustus 2021

Fitur ini serta peningkatan platform Azure Databricks dirilis pada Agustus 2021.

Catatan

Rilis dilakukan bertahap. Akun Azure Databricks Anda mungkin tidak diperbarui hingga seminggu atau lebih setelah tanggal rilis awal.

GA Repos Databricks

31 Agustus 2021

Repos dari Databricks kini sudah tersedia untuk umum. Dengan Repos, Anda dapat membuat repositori Git baru atau mengkloning yang ada di Azure Databricks, bekerja dengan notebook di repositori ini, mengikuti praktik terbaik pengembangan dan kolaborasi berbasis Git, serta mengintegrasikan alur kerja CI/CD Anda dengan API Repos. Databricks Repos terintegrasi dengan GitHub, Bitbucket, GitLab, dan Azure DevOps. Untuk detailnya, lihat Folder Git Azure Databricks dan REPOS API.

Peningkatan batas waktu habis untuk tugas notebook yang durasinya lama

23-30 Agustus 2021: Versi 3.53

Anda sekarang dapat menjalankan pekerjaan alur kerja notebook yang memakan waktu hingga 30 hari untuk diselesaikan. Sebelumnya, hanya penyelesaian pekerjaan alur kerja notebook yang membutuhkan waktu hingga 48 jam yang didukung. Lihat Mengatur buku catatan dan memodulasi kode di buku catatan untuk informasi selengkapnya.

Peningkatan stabilitas dan skalabilitas layanan pekerjaan

23-30 Agustus 2021: Versi 3.53

Perubahan berikut meningkatkan stabilitas dan skalabilitas layanan Pekerjaan:

• Setiap pekerjaan dan proses baru diberi pengidentifikasi yang lebih panjang, unik, numerik, dan tidak berurutan. Klien-klien yang menggunakan Jobs API dan bergantung pada panjang pengidentifikasi tetap atau pengidentifikasi yang meningkat secara berurutan atau monoton harus dimodifikasi untuk menerima pengidentifikasi yang lebih panjang, tidak berurutan, dan tidak teratur. Jenis pengidentifikasi int64 tetap tidak berubah, dan kompatibilitas dipertahankan untuk klien yang menggunakan angka floating-point IEEE 754 64-bit, misalnya, klien JavaScript.
• Nilai bidang number_in_job, yang disertakan dalam respons terhadap beberapa permintaan Jobs API, sekarang diatur ke nilai yang sama dengan run_id.

Catatan

Fitur ini ditunda hingga Februari 2022.

Hak pengguna yang diberikan dari keanggotaan grup ditampilkan di konsol administrator

23-30 Agustus 2021: Versi 3.53

Hak pengguna yang diberikan oleh keanggotaan grup sekarang ditampilkan untuk setiap pengguna pada tab Pengguna di konsol admin.

Mengelola izin percobaan MLflow (Pratinjau Umum)

23-30 Agustus 2021: Versi 3.53

Anda sekarang dapat mengelola izin eksperimen MLflow dari halaman eksperimen. Untuk detailnya, lihat Mengubah izin untuk eksperimen.

Peningkatan kualitas pembuatan pekerjaan dari notebook

23-30 Agustus 2021: Versi 3.53

Anda sekarang dapat mengedit dan mengkloning pekerjaan yang terkait dengan notebook. Untuk detailnya, lihat Membuat dan mengelola pekerjaan buku catatan terjadwal.

Seri VM Ddsv4 (Pratinjau Publik)

23-30 Agustus 2021: Versi 3.53

Azure Databricks sekarang mendukung VM seri Ddsv4. Untuk informasi selengkapnya tentang VM ini, lihat Seri Ddv4 dan Ddsv4.

Peningkatan dukungan untuk menyusutkan judul buku catatan

23-30 Agustus 2021: Versi 3.53

Anda sekarang dapat menciutkan atau memperluas semua judul yang bisa diciutkan di notebook. Sebelumnya, Anda hanya dapat menciutkan atau memperluas satu judul pada satu waktu. Untuk detailnya, lihat Judul yang dapat diciutkan.

Runtime Databricks 9.0 dan 9.0 ML tersedia secara umum; 9.0 Photon adalah Pratinjau Umum

17 Agustus 2021

Databricks Runtime 9.0 dan 9.0 ML sekarang tersedia secara umum. Photon 9.0 saat ini dalam Pratinjau Publik.

Lingkungan Runtime Databricks 9.0 (Beta)

10 Agustus 2021

Databricks Runtime 9.0 dan Databricks Runtime 9.0 ML sekarang tersedia sebagai rilis Beta.

Mengelola repos secara terprogram dengan Databricks CLI (Pratinjau Umum)

9-16 Agustus 2021: Versi 3.52

Anda sekarang dapat mengelola repos Git jarak jauh dengan menggunakan Databricks Command Line Interface (CLI). Lihat Legacy Databricks CLI.

Mengelola repos secara terprogram dengan REST API Databricks (Pratinjau Umum)

9-16 Agustus 2021: Versi 3.52

Anda sekarang dapat mengelola repos Git jarak jauh dengan menggunakan REST API Databricks. Lihat REPOS API.

Dukungan untuk Databricks Runtime 7.6 berakhir

8 Agustus 2021

Dukungan untuk Databricks Runtime 7.6, Databricks Runtime 7.6 untuk Pembelajaran Mesin, dan Databricks Runtime 7.6 untuk Genomika berakhir pada 8 Agustus. Lihat Siklus hidup dukungan Databricks.

Peristiwa audit dicatat saat Anda berinteraksi dengan repositori Databricks

9-13 Agustus 2021: Versi 3.52

Saat pengelogan audit diaktifkan, peristiwa audit sekarang dicatat saat Anda membuat, memperbarui, atau menghapus Repo Databricks, saat Anda mencantumkan semua Databricks Repos yang terkait dengan ruang kerja, dan saat Anda menyinkronkan perubahan antara Repositori Databricks dan repositori jarak jauh. Untuk informasi selengkapnya, lihat Peristiwa folder Git.

Peningkatan penciptaan pekerjaan dan manajemen alur kerja

9-13 Agustus 2021: Versi 3.52

Anda sekarang dapat melihat dan mengelola pekerjaan yang terkait dengan notebook. Secara khusus, Anda dapat memulai penjadwalan pekerjaan, melihat pelaksanaan aktif dan terbaru, menjeda atau melanjutkan pelaksanaan pekerjaan, dan menghapus pekerjaan.

UI pembuatan pekerjaan notebook telah direvisi dan opsi konfigurasi baru ditambahkan. Untuk detailnya, lihat Membuat dan mengelola pekerjaan buku catatan terjadwal.

Runtime Photon sekarang tersedia (Pratinjau Publik)

9-13 Agustus 2021: Versi 3.52

Photon adalah mesin vektor asli baru pada Azure Databricks, yang secara langsung kompatibel dengan API Apache Spark. Untuk menyediakan kluster dengan Foton, Anda harus menggunakan Gambar Photon.

Instruksi yang disederhanakan untuk mengatur kredensial Git (Pratinjau Umum)

9-13 Agustus 2021: Versi 3.52

Instruksi pada tab integrasi Git dari halaman Pengaturan Pengguna telah disederhanakan.

Mengimpor beberapa notebook dalam format .html

9-13 Agustus 2021: Versi 3.52

Anda sekarang dapat mengimpor beberapa notebook dalam format .html dalam file .zip. Sebelumnya, Anda hanya dapat mengimpor satu notebook dalam format .html sekaligus.

File .zip dapat berisi folder dan notebook dalam format .html atau format file sumber (Python, Scala, SQL, atau R). File .zip tidak dapat menyertakan kedua format tersebut.

Peningkatan kegunaan untuk DLT

9-13 Agustus 2021: Versi 3.52

Rilis ini mencakup penyempurnaan berikut pada runtime dan UI DLT:

• Saat membuat alur, Anda sekarang dapat menentukan database target untuk menerbitkan tabel dan metadata DLT Anda. Lihat Gunakan Alur Deklaratif Lakeflow Spark dengan metastore Hive warisan untuk informasi lebih lanjut tentang penerbitan himpunan data.
• Notebook sekarang mendukung penyorotan sintaksis untuk kata kunci dalam SQL definisi himpunan data. Anda dapat menggunakan penyorotan sintaks ini untuk memastikan kebenaran pernyataan DLT SQL Anda. Silakan lihat referensi bahasa SQL untuk detail tentang sintaks DLT SQL.
• Runtime DLT sekarang menghasilkan grafik alur Anda sebelum alur dijalankan, memungkinkan Anda melihat grafik di antarmuka pengguna lebih awal.
• Semua pustaka Python yang dikonfigurasi di notebook Anda sekarang diinstal sebelum menjalankan kode Python apa pun, memastikan bahwa pustaka dapat diakses secara global ke notebook Python apa pun di alur Anda. Lihat Mengelola dependensi Python untuk alur.