Bagikan melalui


Catatan rilis Databricks SQL 2021

Berikut ini menguraikan peningkatan dan pembaruan di Databricks SQL dari Januari hingga Desember 2021.

15 Desember 2021

  • Databricks SQL Tersedia Secara Umum. Ini menandai pencapaian penting dalam memberi Anda platform lakehouse pertama yang menyatukan beban kerja data, AI, dan BI di satu tempat. Dengan GA, Anda dapat mengharapkan tingkat stabilitas, dukungan, dan kesiapan perusahaan tertinggi dari Databricks untuk beban kerja misi penting. Baca blog pengumuman GA untuk informasi lebih lanjut.
  • Notifikasi sekarang dijadwalkan secara mandiri dari kueri. Saat Anda membuat pemberitahuan baru dan membuat kueri, Anda juga diminta untuk membuat jadwal pemberitahuan. Jika Anda memiliki peringatan yang sudah ada, kami telah menduplikasi jadwal dari pencarian asli. Perubahan ini juga memungkinkan Anda mengatur pemberitahuan untuk kueri Jalankan sebagai Pemilik dan Jalankan sebagai Penampil. Jalankan sebagai Pemilik kueri berjalan pada jadwal peringatan yang ditunjuk dengan kredensial pemilik. Jalankan sebagai Penampil kueri berjalan pada jadwal peringatan yang ditetapkan dengan kredensial pembuat peringatan. Lihat Peringatan SQL Databricks dan Jadwalkan kueri.
  • Anda sekarang dapat mengurutkan ulang parameter di editor SQL dan di dasbor .
  • Dokumentasi untuk membuat visualisasi peta panas telah diperluas. Lihat opsi Heatmap.

9 Desember 2021

  • Saat Membuat visualisasi tabel, Anda sekarang dapat mengatur warna font untuk kolom ke nilai statis atau rentang nilai berdasarkan nilai bidang kolom. Nilai harfiah dibandingkan dengan ambang batas. Misalnya, untuk mewarnai hasil yang nilainya melebihi 500000, buat ambang batas > 500000, bukan > 500,000. Lihat Format kondisional warna kolom.
  • Ikon di browser skema editor SQL bertab sekarang memungkinkan Anda membedakan antara tabel dan tampilan.

Desember 1,2021

  • Anda sekarang dapat menerapkan parameter konfigurasi SQL di tingkat ruang kerja. Parameter tersebut secara otomatis berlaku untuk semua titik akhir SQL yang ada dan baru di ruang kerja. Lihat Mengonfigurasi parameter SQL.

18 November 2021

  • Saat Anda melihat riwayat kueri, Anda sekarang dapat memfilter kueri berdasarkan service principal yang menjalankannya. Lihat Lihat riwayat kueri.

4 November 2021

  • Dalam visualisasi Map (Choropleth), jumlah maksimum langkah gradien warna pada legenda telah ditingkatkan dari 11 menjadi 20. Defaultnya adalah 5 langkah gradien yang termasuk Warna Min dan Warna Maks dan.
  • Editor SQL bertab sekarang mendukung manajemen tab massal. Jika Anda mengklik kanan pada tab, Anda akan melihat opsi untuk Menutup orang lain, Tutup kiri, Tutup kanan, dan Tutup semua. Perhatikan bahwa jika Anda mengklik kanan pada tab pertama atau terakhir, Anda tidak akan melihat opsi untuk Menutup kiri atau Menutup kanan.

28 Oktober 2021

  • Saat Anda melihat tabel di Catalog Explorer, Anda memiliki dua opsi untuk menyederhanakan interaksi dengan tabel:
  • Klik Buat kueri > untuk membuat kueri yang memilih semua kolom dan mengembalikan 1000 baris pertama.
  • Klik Buat > Dasbor Cepat untuk membuka halaman konfigurasi tempat Anda dapat memilih kolom yang menarik dan membuat dasbor dan kueri pendukung yang menyediakan beberapa informasi dasar menggunakan kolom tersebut dan menampilkan parameter tingkat dasbor dan kemampuan lainnya.

19 Oktober 2021

  • Pintasan keyboard baru sekarang tersedia di editor bertab:
  • Buka tab baru:
    • Windows: Cmd+Alt+T
    • Mac: Cmd+Option+T
  • Tutup tab saat ini
    • Windows: Cmd+Alt+W
    • Mac: Cmd+Option+W
  • Membuka dialog kueri
    • Windows: Cmd+Alt+O
    • Mac: Cmd+Option+O

23 September 2021

  • Anda sekarang dapat membuat dasbor baru dengan mengkloning dasbor yang ada, selama Anda memiliki izin CAN RUN, CAN EDIT, dan CAN MANAGE pada dasbor tersebut dan semua kueri hilir. Lihat Menduplikasi dasbor lama.
  • Sekarang Anda dapat menggunakan GROUP BY dalam visualisasi dengan beberapa kolom sumbu Y. Lihatbagan sebar .
  • Sekarang Anda dapat menggunakan {{ @@yPercent}} untuk memformat label data dalam bagan batang bertumpuk yang tidak dinormalisasi. Lihat bagan Batang.
  • Jika Anda menggunakan autentikasi SAML dan kredensial SAML Anda akan kedaluwarsa dalam beberapa menit, Anda sekarang secara proaktif diminta untuk masuk lagi sebelum menjalankan kueri atau menyegarkan dasbor. Ini membantu mencegah gangguan karena kredensial yang berakhir saat menjalankan kueri.

20 September 2021

  • Anda sekarang dapat mentransfer kepemilikan dasbor, kueri, dan peringatan menggunakan REST API Izin. Lihat Query ACLs.

16 September 2021

  • Dalam hasil kueri, hasil BIGINT sekarang diserialisasikan sebagai string saat lebih besar dari 9007199254740991. Ini memperbaiki masalah di mana hasil BIGINT dapat terpotong pada hasil kueri. Hasil bilangan bulat lainnya masih diserialisasikan sebagai angka. Pemformatan angka pada label sumbu dan tooltip tidak berlaku untuk hasil BIGINT yang diserialisasikan sebagai string. Untuk informasi selengkapnya tentang jenis data di Databricks SQL, lihat BIGINT jenis.

7 September 2021

Databricks meluncurkan perubahan yang akan diterapkan selama seminggu ke depan. Ruang kerja Anda mungkin tidak diaktifkan untuk perubahan ini hingga setelah 7 September.

  • SQL Databricks sekarang tersedia dalam Pratinjau Umum dan diaktifkan untuk semua pengguna di ruang kerja baru.

Nota

Jika ruang kerja Anda diaktifkan untuk Databricks SQL selama Public Preview, yang berarti sebelum minggu mulai tanggal 7 September 2021, pengguna mempertahankan hak akses yang ditetapkan sebelum tanggal tersebut, kecuali Anda mengubahnya. Dengan kata lain, jika pengguna tidak memiliki akses ke Databricks SQL selama Pratinjau Umum, mereka tidak akan memilikinya sekarang kecuali administrator memberikannya kepada mereka.

  • Para administrator dapat mengelola pengguna mana yang memiliki akses ke Databricks SQL dengan menetapkan hak akses Databricks SQL (databricks-sql-access di API) kepada pengguna atau grup. Secara bawaan, pengguna baru memiliki hak ini.

Administrator dapat membatasi pengguna atau grup untuk hanya mengakses Databricks SQL dan mencegah mereka mengakses Data Science & Engineering atau Databricks Mosaic AI dengan menghapus hak Akses Ruang Kerja (workspace-access di API) dari pengguna atau grup. Secara bawaan, pengguna baru memiliki hak ini.

Penting

Untuk masuk dan mengakses Azure Databricks, pengguna harus memiliki hak akses Databricks SQL atau hak akses Ruang Kerja (atau keduanya).

  • Titik akhir kecil SQL klasik yang disebut Starter Endpoint sudah dipra-konfigurasi di semua ruang kerja, sehingga Anda bisa langsung mulai membuat dashboard, visualisasi, dan kueri. Untuk menangani beban kerja yang lebih kompleks, Anda dapat dengan mudah meningkatkan ukurannya (untuk mengurangi latensi) atau jumlah kluster yang mendasar (untuk menangani lebih banyak pengguna bersamaan). Untuk mengelola biaya, titik akhir awal dikonfigurasi untuk mengakhiri setelah diam selama 120 menit.

2 September 2021

  • Pengguna dengan izin DAPAT MENGEDIT di dasbor sekarang dapat mengelola jadwal refresh dan daftar langganan dasbor. Sebelumnya, izin CAN MANAGE diperlukan. Untuk informasi selengkapnya, lihat Menyegarkan dasbor secara otomatis.
  • Secara default, visualisasi tidak lagi mengubah ukuran secara dinamis berdasarkan jumlah hasil yang dikembalikan, tetapi mempertahankan tinggi yang sama terlepas dari jumlah hasilnya. Untuk kembali ke perilaku sebelumnya dan mengonfigurasi visualisasi untuk mengubah ukuran secara dinamis, aktifkan Mengubah ukuran tinggi panel secara dinamis dalam pengaturan visualisasi di dasbor. Untuk informasi selengkapnya, lihat opsi Tabel .
  • Jika Anda memiliki akses ke lebih dari satu ruang kerja di akun yang sama, Anda dapat beralih ruang kerja dari dalam Databricks SQL. Klik Ikon Akun di sudut kiri bawah ruang kerja Azure Databricks Anda, lalu pilih ruang kerja untuk beralih ke ruang kerja tersebut.

Juli 01, 2021

  • Penjelajah Katalog baru memungkinkan Anda untuk dengan mudah menjelajahi dan mengelola izin pada database dan tabel. Pengguna dapat melihat detail skema, mempratinjau data sampel, dan melihat detail dan properti tabel. Administrator dapat melihat dan mengubah pemilik objek data, dan pemilik objek data dapat memberikan dan mencabut izin. Untuk detailnya, lihat Apa itu Catalog Explorer?.
  • Sumbu Y dalam bagan horizontal telah diperbarui untuk mencerminkan pengurutan yang sama seperti dalam tabel. Jika sebelumnya Anda telah memilih urutan terbalik, Anda dapat menggunakan tombol Urutan Terbalik pada tab sumbu Y untuk membalikkan urutan baru.

23 Juni 2021

  • Konfigurasikan titik akhir SQL dengan mudah dengan perwakilan layanan. Sekarang ada kontrol yang membantu Anda mengonfigurasi perwakilan layanan di pengaturan titik akhir SQL global. Lihat Mengonfigurasi prinsipal layanan.
  • Tampilan sementara sekarang didukung.

17 Juni 2021

  • Photon, mesin eksekusi vektorisasi baru Databricks, sekarang aktif secara default untuk titik akhir SQL yang baru dibuat (UI dan REST API). Foton secara transparan mempercepat
    • Menulis ke tabel Parquet dan Delta.
    • Banyak kueri SQL. Lihat Batasan.
  • Kelola pengguna dan grup dengan mudah dengan perintah CREATE GROUP, DROP GROUP, ALTER GROUP, SHOW GROUPS, dan SHOW USERS. Untuk detailnya, lihat Pernyataan keamanan dan pernyataan SHOW.
  • Editor kueri browser skema lebih responsif dan cepat untuk skema dengan lebih dari 100 tabel. Pada skema tersebut, browser skema tidak akan memuat semua kolom secara otomatis; daftar tabel masih ditampilkan seperti biasa, tetapi kolom hanya dimuat saat Anda mengklik tabel. Perubahan ini memengaruhi pelengkapan otomatis kueri di editor kueri, karena bergantung pada informasi ini untuk menampilkan saran. Hingga Anda memperluas tabel dan memuat kolomnya, saran tersebut tidak tersedia.

03 Juni 2021

  • Admin ruang kerja Azure Databricks yang baru diaktifkan sekarang menerima hak Databricks SQL secara default dan tidak lagi diperlukan untuk memberi diri mereka hak akses Databricks SQL menggunakan konsol admin.
  • Photon sekarang dalam pratinjau publik dan diaktifkan secara default untuk titik akhir SQL baru.
  • Penyeimbangan beban multi-kluster sekarang dalam pratinjau publik.
  • Sekarang Anda dapat mengaktifkan kolaborasi di dasbor dan kueri dengan anggota organisasi Anda lainnya menggunakan izin DAPAT MENGEDIT. Lihat Daftar kontrol akses.

Mei 26, 2021

  • SQL Analytics diganti namanya menjadi Databricks SQL. Perubahan ini memiliki dampak yang dihadapi pelanggan berikut:

    • Referensi di UI web telah diperbarui.

    • Hak untuk memberikan akses ke Databricks SQL telah diganti namanya:

      • UI : akses Databricks SQL (sebelumnya akses SQL Analytics )
      • SCIM API: databricks-sql-access (sebelumnya sql-analytics-access)

      Pengguna, grup, dan perwakilan layanan dengan hak sebelumnya telah dimigrasikan ke hak baru.

    • Tag untuk peristiwa log audit yang terkait dengan Databricks SQL telah berubah:

      • Awalan untuk peristiwa Databricks SQL sekarang adalah databrickssql.
      • changeSqlAnalyticsAcl sekarang changeDatabricksSqlAcl.
  • Pembaruan Dasbor

    • Nama file ekspor dasbor telah diperbarui menjadi nama dasbor + tanda waktu, bukan UUID.
    • Batas catatan ekspor telah dinaikkan dari 22k menjadi 64k.

13 Mei 2021

  • Databricks SQL tidak lagi mencoba menebak jenis kolom. Sebelumnya, kolom dengan format xxxx-yy-dd secara otomatis diperlakukan sebagai tanggal, bahkan jika itu adalah kode identifikasi. Sekarang kolom tersebut tidak lagi diperlakukan secara otomatis sebagai tanggal. Anda harus menentukannya dalam kueri jika diinginkan. Perubahan ini dapat menyebabkan beberapa visualisasi yang bergantung pada perilaku sebelumnya tidak lagi berfungsi. Dalam rilis ini, Anda dapat mengubah ikon Pengaturan Pengguna >dengan opsi Kompatibilitas Mundur> untuk kembali ke perilaku sebelumnya. Dalam rilis mendatang, kami akan menghapus kemampuan tersebut.

  • Editor kueri sekarang memiliki indikator kemajuan kueri. Perubahan status sekarang terlihat di bilah status yang terus diperbarui.

    bilah Kemajuan

Memperbaiki masalah

  • Editor untuk SQL Editor SQL sekarang akan mempertahankan teks yang dipilih dan posisi gulir saat beralih di antara tab kueri.
  • Editor untuk SQL Jika Anda mengklik 'Jalankan' pada kueri di editor SQL, lalu navigasikan ke halaman lain dan kembali saat kueri masih dijalankan, editor akan menampilkan status kueri yang benar. Jika kueri selesai saat Anda berada di halaman lain, hasil kueri akan tersedia saat kembali ke halaman editor SQL.
  • Anda sekarang dapat menggunakan MySQL 8.0 sebagai metastore eksternal.
  • DESCRIBE DETAIL perintah pada tabel Delta tidak lagi mengalami kegagalan karena java.lang.ClassCastException: java.sql.Timestamp cannot be cast to java.time.Instant.
  • Proses membaca file Parquet dengan cap waktu INT96 tidak lagi mengalami kegagalan.
  • Saat pengguna memiliki izin untuk menjalankan pada kueri dan menjalankannya, jika kueri dibuat oleh pengguna lain, riwayat kueri menampilkan pengguna yang menjalankan sebagai pengguna tersebut.
  • Nilai null sekarang diabaikan saat merender bagan, meningkatkan kegunaan bagan. Misalnya, sebelumnya, batang dalam bagan batang akan terlihat sangat kecil ketika ada nilai null. Sekarang sumbu diatur berdasarkan nilai non-null saja.