November 2021

Fitur-fitur ini dan peningkatan platform Azure Databricks dirilis pada November 2021.

Catatan

Rilis dilakukan bertahap. Akun Azure Databricks Anda mungkin tidak diperbarui hingga seminggu atau lebih setelah tanggal rilis awal.

Membuat tag untuk tabel fitur (Pratinjau Umum)

30 November - 6 Desember 2021: Versi 3.60

Anda sekarang dapat membuat tag untuk tabel fitur dan menggunakannya untuk pencarian.

Penyorotan dan pelengkapan otomatis sintaks untuk perintah SQL dalam sel Python

30 November - 6 Desember 2021: Versi 3.60

Penyorotan sintaks dan pelengkapan otomatis SQL tersedia saat Anda menggunakan SQL di dalam perintah Python, seperti dalam spark.sql perintah.

Mengganti nama, menghapus, dan mengubah izin untuk percobaan MLflow dari halaman percobaan (Pratinjau Umum)

30 November - 6 Desember 2021: Versi 3.60

Anda sekarang dapat mengganti nama, menghapus, dan mengubah izin untuk percobaan MLflow dari halaman percobaannya. Untuk mengetahui detailnya, lihat Mengelola percobaan.

Profil data baru di notebook: ringkasan tabular dan grafik data Anda (Pratinjau Umum)

30 November - 6 Desember 2021: Versi 3.60

Saat Anda menggunakan display(<dataframe>) di Scala atau Python, atau menjalankan kueri SQL, panel hasil menampilkan tab baru Data Profile yang menyajikan ringkasan tabular dan grafik interaktif dari DataFrame atau tabel. Untuk detailnya, lihat Membuat profil data dan Membuat visualisasi baru.

Anda juga dapat menggunakan perintah utilitas Databricks dbutils.data.ringkasan.

Pencatatan log yang ditingkatkan saat skema berkembang ketika menjalankan pipeline DLT

30 November - 6 Desember 2021: Versi 3.60

Jika alur DLT Anda membaca data dengan Auto Loader dan skema data input berubah saat pembaruan berjalan, pembaruan dicatat sebagai CANCELED dan dicoba kembali secara otomatis. Pembaruan baru dicatat dengan status SCHEMA_CHANGE. Sebelumnya, ketika skema input berubah, pembaruan akan dicatat sebagai FAILED meskipun DLT secara otomatis mencoba kembali pembaruan.

Ketersediaan Umum Sambungan Mitra Databricks

18 November 2021

Sambungan Mitra Databricks sekarang tersedia secara umum. Anda dapat menggunakan Partner Connect untuk dengan cepat dan mudah menemukan dan menghubungkan alat data dan AI populer ke lakehouse Azure Databricks Anda. Lihat Apa itu Databricks Partner Connect?.

Perubahan terbaru: menghapus escape dan kuotasi dari $ di nilai variabel lingkungan untuk pembuatan kluster

15-30 November 2021: Versi 3.59

Catatan

Perubahan ini akan dikembalikan pada 3 Desember 2021 mulai pukul 01:00-03:00 UTC.

Saat Anda membuat kluster, Anda dapat menentukan variabel lingkungan. Sebelum perubahan ini, untuk menggunakan $ nilai variabel dalam lingkungan, Anda harus menghindarinya atau mengelilinginya dengan kuotasi. Dengan perubahan ini, karakter pelolosan atau tanda kutip tidak lagi diperlukan. Perubahan ini memperkenalkan perilaku yang mengganggu, karena karakter $ yang di-escape atau diapit tanda kutip dalam nilai variabel lingkungan sekarang tidak lagi ditafsirkan sebagai $. Misalnya, sekarang, mengingat deklarasi variabel lingkungan berikut:

WITH_ESCAPING=\\$123
WITH_DOUBLE_QUOTING="$123"
NO_ESCAPING=$123
WITH_SINGLE_QUOTING='$123'
NO_QUOTING=$123

Mencetak nilai-nilai ini dari buku catatan, misalnya:

%sh
echo ${WITH_ESCAPING}
echo ${WITH_DOUBLE_QUOTING}
echo ${NO_ESCAPING}
echo ${WITH_SINGLE_QUOTING}
echo ${NO_QUOTING}

Mengembalikan nilai-nilai berikut:

\\$123
"$123"
$123
driver23
$123

Catatan

Perubahan ini hanya berlaku untuk variabel lingkungan. Itu tidak berlaku untuk rahasia.

Peningkatan kemudahan penggunaan untuk File di Repos

15-30 November 2021: Versi 3.59

Kemampuan baru telah ditambahkan ke editor teks file:

• Tag penutup dibuat secara otomatis saat Anda membuat tag.
• Penselipan kode sekarang didukung.

Selain itu, untuk file teks, Anda sekarang dapat menyalin jalur repositori penuh selain jalur dari root repositori. Untuk detailnya, lihat Berinteraksi melalui program dengan file-file di ruang kerja.

Dukungan untuk widget SQL yang lama berakhir pada 15 Januari 2022

15 November 2021

Databricks akan mengakhiri dukungan untuk widget SQL lama pada 15 Januari 2022. Setelah tanggal tersebut, buku catatan tidak akan lagi merender widget SQL lama di antarmuka pengguna, tetapi parameter yang dilewati%runmasih akan berfungsi dengan API widget SQL lama. Untuk memastikan bahwa widget Anda terus dirender di antarmuka pengguna, perbarui kode Anda untuk menggunakan widget SQL.

Peningkatan kualitas antarmuka pengguna untuk pekerjaan Azure Databricks

15-30 November 2021: Versi 3.59

Rilis ini mencakup peningkatan berikut pada antarmuka pengguna pekerjaan:

• Anda sekarang dapat mengkloning satu tugas, sehingga lebih mudah untuk menambahkan tugas baru ke pekerjaan yang ada. Lihat Mengganti nama, mengkloning, atau menghapus pekerjaan.
• Saat melihat detail pelaksanaan pekerjaan atau tugas, ID Pekerjaan dan ID Pelaksanaan Pekerjaan sekarang menjadi tautan, memungkinkan Anda untuk dengan mudah beralih antara tampilan detail pelaksanaan pekerjaan. Lihat detail pelaksanaan pekerjaan.
• Anda sekarang dapat menyalin jalur ke tugas, misalnya jalur buku catatan, saat melihat atau mengedit tugas. Lihat Salin jalur tugas.

Konektor Delta Sharing untuk Power BI

15 November 2021

Kami telah merilis Konektor Bersama Delta Power BI yang memungkinkan pengguna untuk menemukan, menganalisis, dan memvisualisasikan himpunan data bersama Delta Sharing melalui protokol terbuka. Protokol ini memungkinkan pertukaran dataset yang aman di seluruh produk dan platform dengan memanfaatkan REST dan penyimpanan cloud. Untuk detailnya, lihat konektor Power BI Delta Sharing.

Driver ODBC Databricks 2.6.19

12 November 2021

Kami telah merilis versi 2.6.19 dari driver ODBC Databricks (unduh). Driver baru menyebarkan kondisi kesalahan SQL (SQLState) yang dikembalikan oleh Databricks ke klien.

Databricks Runtime 10.1 dan 10.1 ML tersedia umum; 10.1 Photon adalah pratinjau publik

10 November 2021

Runtime Databricks 10.1 dan 10.1 ML sekarang tersedia secara umum. Photon 10.1 saat ini dalam Pratinjau Umum.

Databricks Runtime 10.1 (Beta)

4 November 2021

Runtime Databricks 10.1, 10.1 Photon, dan 10.1 ML sekarang tersedia sebagai rilis Beta.

Mengganti nama dan menghapus percobaan MLflow (Pratinjau Umum)

2-8 November, 2021: Versi 3.58

Anda sekarang dapat mengganti nama, menghapus, dan mengubah izin untuk percobaan MLflow dari halaman Percobaan.

Anda sekarang dapat membuat kebijakan kluster dengan mengkloning kebijakan yang ada

2-8 November, 2021: Versi 3.58

Dukungan telah ditambahkan untuk membuat kebijakan kluster baru dengan mengkloning kebijakan yang ada. Lihat Membuat dan mengelola kebijakan komputasi.

Mengubah bahasa default notebook dan sel notebook dengan lebih mudah

2-8 November, 2021: Versi 3.58

Tombol bahasa baru muncul di bagian atas buku catatan dan di setiap sel. Anda dapat menggunakan tombol ini untuk memilih bahasa default untuk buku catatan, dan memilih bahasa untuk sel tertentu. Untuk informasi selengkapnya, lihat Mengatur bahasa default dan Bahasa campuran.

Menggunakan file di repositori melalui terminal web

2-8 November, 2021: Versi 3.58

Anda sekarang dapat mengakses File di Repositori dari terminal web dengan menggunakan jalur /Workspace.