Share via

Januari 2024

  • Artikel

Fitur-fitur ini dan peningkatan platform Azure Databricks dirilis pada Januari 2024.

Catatan

Rilis dilakukan bertahap. Akun Azure Databricks Anda mungkin tidak diperbarui hingga seminggu atau lebih setelah tanggal rilis awal.

Dukungan format file XML asli (Pratinjau Umum)

31 Januari 2024

Dukungan format file XML asli sekarang ada di Pratinjau Umum. Dukungan format file XML memungkinkan penyerapan, kueri, dan penguraian data XML untuk pemrosesan atau streaming batch. Ini dapat secara otomatis menyimpulkan dan mengembangkan skema dan jenis data, mendukung ekspresi SQL seperti from_xml, dan dapat menghasilkan dokumen XML. Ini tidak memerlukan jar eksternal dan berfungsi dengan mulus dengan Auto Loader, read_files, COPY INTO, dan Delta Live Tables. Untuk informasi selengkapnya, lihat Membaca dan menulis file XML.

Bagikan model AI menggunakan Databricks Marketplace (Pratinjau Umum)

31 Januari 2024

Anda sekarang dapat menggunakan Marketplace untuk berbagi model yang terdaftar di Unity Catalog. Ruang kerja penyedia dan konsumen harus diaktifkan agar Unity Catalog dapat berpartisipasi dalam berbagi model.

Lihat Apa itu Databricks Marketplace? dan Menambahkan model ke berbagi.

Pembaruan untuk aturan grup keamanan jaringan

31 Januari 2023

Untuk meningkatkan skalabilitas platform, sarana kontrol Azure Databricks sekarang memerlukan titik akhir baru agar bidang data klasik tersambung. Untuk ruang kerja yang disebarkan di jaringan virtual Azure Anda sendiri, port jaringan 3306 dan 8443-8451 sekarang ditambahkan ke aturan keamanan yang ada ke AzureDatabricks tujuan, memberlakukan lalu lintas keluar pada port 443.

Untuk informasi selengkapnya, lihat Aturan grup keamanan jaringan.

Pembaruan jalur ruang kerja

Secara historis, pengguna diharuskan untuk menyertakan /Workspace awalan jalur untuk beberapa API Databricks (%sh) tetapi tidak untuk yang lain (%run, input REST API). Sekarang, pengguna dapat menyediakan jalur ruang kerja dengan awalan /Workspace di mana saja di Databricks. Referensi lama ke jalur tanpa awalan /Workspace dialihkan dan akan terus berfungsi. Databricks merekomendasikan agar semua jalur ruang kerja menggunakan /Workspace awalan untuk membedakannya dari jalur Volume dan DBFS.

Dukungan untuk firewall Azure Storage dari komputasi tanpa server adalah GA

30 Januari 2024

Dukungan untuk firewall Azure Storage dari komputasi tanpa server Azure Databricks adalah GA. Anda dapat memberlakukan bahwa gudang SQL tanpa server menggunakan ID subnet yang stabil untuk menyambungkan ke Azure Storage dan mengizinkan pengidentifikasi tersebut di firewall sumber daya Azure Anda. Lihat Mengonfigurasi firewall untuk akses komputasi tanpa server.

Pembuatan pekerjaan Azure Databricks yang efisien

29 Januari 2024

Pekerjaan kosong sekarang dibuat segera setelah Anda mengklik tombol untuk membuat pekerjaan, memungkinkan Anda mengedit pengaturan tingkat pekerjaan seperti tag, jadwal, atau pengaturan pemberitahuan sebelum menambahkan tugas pertama. Sebelumnya, Anda harus membuat tugas pertama sebelum mendapatkan akses ke pengaturan tingkat pekerjaan. Lihat Membuat dan menjalankan Pekerjaan Azure Databricks.

Memantau model GPU yang melayani beban kerja menggunakan tabel inferensi

29 Januari 2024

Anda sekarang dapat memantau model GPU yang melayani beban kerja menggunakan tabel inferensi. Lihat Tabel inferensi untuk model pemantauan dan penelusuran kesalahan.

Akses berbasis jalur URI ke volume eksternal Unity Catalog

25 Januari 2024

Anda sekarang dapat menggunakan URI penyimpanan cloud untuk akses berbasis jalur ke data yang diatur oleh Katalog Unity yang disimpan dalam volume eksternal. Lihat Jalur apa yang digunakan untuk mengakses file dalam volume?.

Daftar kontrol akses dapat diaktifkan pada ruang kerja yang ditingkatkan

24 Januari 2024

Pengaturan kontrol akses diaktifkan di semua ruang kerja paket Premium pada November 2023.

Untuk ruang kerja yang meningkatkan dari paket Standar ke paket Premium, pengaturan kontrol akses dinonaktifkan secara default. Admin ruang kerja sekarang dapat mengaktifkan pengaturan kontrol akses berikut pada ruang kerja yang ditingkatkan:

  • Kontrol akses ruang kerja: Memungkinkan pengguna mengonfigurasi izin ke objek ruang kerja.
  • Kluster, kumpulan, kontrol akses pekerjaan: Memungkinkan pengguna untuk mengonfigurasi izin ke kluster, kumpulan, dan pekerjaan.
  • Kontrol visibilitas kluster: Mencegah kluster terlihat oleh pengguna yang tidak memiliki izin padanya.
  • Kontrol visibilitas pekerjaan: Mencegah pekerjaan terlihat oleh pengguna yang tidak memiliki izin pada pekerjaan tersebut.
  • Pengaturan kontrol visibilitas ruang kerja: Mencegah buku catatan dan folder terlihat oleh pengguna yang tidak memiliki izin.

Setelah pengaturan kontrol akses diaktifkan, pengaturan tidak dapat dinonaktifkan. Untuk informasi selengkapnya, lihat Daftar kontrol akses.

Tabel sistem peristiwa daftar marketplace sekarang tersedia (Pratinjau Umum)

24 Januari 2024>

Skema sistem Marketplace sekarang menyertakan tabel peristiwa corong daftar (system.marketplace.listing_funnel_events) tempat Anda dapat memantau tindakan konsumen pada daftar Anda. Lihat Mencantumkan tabel peristiwa corong.

UI yang diperbarui untuk sel buku catatan (Pratinjau Umum)

24 Januari 2024

Desain sel buku catatan yang diperbarui tersedia. Untuk mengaktifkan desain sel baru, buka halaman pengaturan editor di ruang kerja. Di bar samping, klik Pengembang. Di bawah Fitur eksperimental, alihkan UI sel baru. Untuk detail tentang bekerja dengan sel buku catatan di UI asli dan baru, lihat Buku catatan Databricks: orientasi ke UI sel baru.

Bantuan Perbaikan Cepat dengan kesalahan sintaks di buku catatan

24 Januari 2024

Anda bisa mendapatkan bantuan dari Asisten Databricks untuk kesalahan sintaks dengan menggunakan Perbaikan Cepat. Untuk detailnya, lihat Kemungkinan tindakan pada kesalahan sintaksis dan peringatan.

Databricks Runtime 14.3 LTS (Beta)

22 Januari 2024

Databricks Runtime 14.3 LTS dan Databricks Runtime 14.3 LTS ML sekarang tersedia sebagai rilis Beta.

Lihat Databricks Runtime 14.3 LTS dan Databricks Runtime 14.3 LTS untuk Pembelajaran Mesin.

Berbagi model AI menggunakan Berbagi Delta (Pratinjau Umum)

19 Januari 2024

Sekarang Anda dapat menggunakan Berbagi Delta untuk berbagi model yang terdaftar di Katalog Unity. Ruang kerja penyedia dan penerima harus diaktifkan agar Katalog Unity berbagi model.

Lihat Menambahkan model ke berbagi.

Databricks Marketplace mendukung berbagi volume

18 Januari 2023

Databricks Marketplace sekarang memberi Anda akses ke volume (data non-tabular) selama Anda memiliki ruang kerja Databricks yang mendukung Katalog Unity. Volume adalah objek Katalog Unity yang mewakili volume penyimpanan logis di lokasi penyimpanan objek cloud, dan mereka menyediakan cara untuk mengelola tata kelola dan berbagi aset data non-tabular.

Lihat Mengakses produk data di Databricks Marketplace (ruang kerja yang mendukung Unity Catalog).

Membuat widget dari antarmuka pengguna Databricks

18 Januari 2024

Anda sekarang dapat membuat Widget Databricks menggunakan UI Databricks. Untuk detailnya, lihat Membuat widget menggunakan UI.

Tabel sistem peristiwa gudang sekarang tersedia (Pratinjau Umum)

18 Januari 2024

Tabel system.compute.warehouse_events mencatat ketika gudang SQL memulai, menghentikan, meningkatkan dan menurunkan skala. Anda dapat menggunakan tabel untuk memantau dan mengelola gudang SQL di ruang kerja Anda. Lihat Referensi tabel sistem peristiwa gudang.

Batas ukuran file ruang kerja sekarang 500MB

15 Januari 2023

File ruang kerja individual sekarang dibatasi hingga 500 MB. Sebelumnya, batasnya adalah 200 MB. Untuk detail selengkapnya, baca Batasan.

Pemberitahuan penghapusan fitur untuk integrasi Git warisan di Databricks

12 Januari 2024

Setelah 31 Januari 2024, Databricks akan menghapus integrasi Git notebook warisan. Fitur ini telah berada dalam status warisan selama lebih dari dua tahun, dan pemberitahuan penghentian telah ditampilkan di UI produk sejak November 2023.

Untuk detail tentang migrasi ke folder Databricks Git (Repos), baca Beralih ke Repositori Databricks dari integrasi Git Warisan. Jika penghapusan ini berdampak pada Anda dan Anda memerlukan ekstensi, hubungi Eksekutif Akun Databricks Anda.

Driver ODBC Databricks 2.7.7

9 Januari 2024

Kami telah merilis versi 2.7.7 dari driver ODBC Databricks (unduh). Rilis ini menambahkan fitur dan penyempurnaan baru berikut:

  • Autentikasi Identitas Terkelola Azure.
  • Dukungan untuk operasi metadata asinkron. Server perlu mendukung SPARK_CLI_SERVICE_PROTOCOL_V9 dan di atasnya.
  • Dukungan untuk Kueri Berparameter dalam Mode Kueri Asli. Server perlu mendukung SPARK_CLI_SERVICE_PROTOCOL_V8 dan di atasnya.
  • Peningkatan OAuth: Konektor sekarang dapat menonaktifkan cache token untuk alur autentikasi berbasis browser.

Rilis ini juga menyelesaikan masalah berikut di 2.7.7:

  • Konektor mengabaikan CA akar privat saat menggunakan Windows Trust Store.
  • Ketika operasi gagal, konektor tidak menutup utas heartbeat.
  • Konektor tidak mendukung token refresh opsional.
  • Saat mengkueri tabel dengan nama asing, konektor gagal membacanya.
  • Saat menggunakan autentikasi OAuth, jika panjang string HOST kurang dari 20, konektor berakhir secara tak terduga.

Dukungan seri Databricks Runtime 13.2 berakhir

6 Januari 2024

Dukungan untuk Databricks Runtime 13.2 dan Databricks Runtime 13.2 untuk Pembelajaran Mesin berakhir pada 6 Januari. Lihat Siklus hidup dukungan runtime Databricks.

Fitur bantuan AI diaktifkan secara default

2-8 Januari 2024

Fitur bantuan AI sekarang diaktifkan secara default untuk ruang kerja tanpa mengaktifkan profil keamanan kepatuhan. Ini termasuk:

Admin dapat menolak fitur bantuan AI untuk semua ruang kerja di akun mereka atau subset ruang kerja. Lihat Mengaktifkan atau menonaktifkan Asisten Databricks.