Bagikan melalui

Databricks Runtime 17.2

Catatan rilis berikut memberikan informasi tentang Databricks Runtime 17.2, didukung oleh Apache Spark 4.0.0.

Azure Databricks merilis versi ini pada Bulan September 2025.

Fitur dan peningkatan baru

LIKE mendukung penyusunan UTF8_LCASE

Operator LIKE sekarang mendukung UTF8_LCASE kolasi, memungkinkan pencocokan yang tidak sensitif terhadap huruf besar/kecil.

st_exteriorring fungsi sekarang didukung

Anda sekarang dapat menggunakan st_exteriorring fungsi untuk mengekstrak batas luar poligon dan mengembalikannya sebagai linestring. Silakan lihat fungsi st_exteriorring.

Tampilkan detail pushdown di EXPLAIN dan Spark UI untuk pemindaian jarak jauh

EXPLAIN Perintah dan Spark UI untuk RemoteSparkConnectScan pada komputasi khusus sekarang menampilkan predikat, agregasi, kelompokkan menurut klausul, batas, dan sampel yang didorong ke dalam pemindaian jarak jauh.

Mendeklarasikan beberapa sesi atau variabel lokal dalam satu DECLARE pernyataan

Dalam Databricks Runtime 17.2 ke atas, Anda dapat mendeklarasikan beberapa sesi atau variabel lokal dengan jenis yang sama dan nilai default dalam satu DECLARE pernyataan. Lihat DECLARE VARIABLE dan MULAI pernyataan gabungan END.

Kata kunci dukungan TEMPORARY untuk pembuatan tampilan metrik

Sekarang Anda dapat menggunakan TEMPORARY kata kunci saat membuat tampilan metrik. Tampilan metrik sementara hanya terlihat dalam sesi yang membuatnya dan dihilangkan saat sesi berakhir. Lihat CREATE VIEW.

Mendukung perintah tambahan dengan kontrol akses halus

Kontrol akses terperintah pada komputasi khusus sekarang mendukung FSCK REPAIR TABLE perintah dan DESCRIBE DETAIL .

Secara selektif dan atomik mengganti data dengan INSERT REPLACE USING dan INSERT REPLACE ON (GA)

INSERT REPLACE USING dan INSERT REPLACE ON sekarang umumnya tersedia untuk Databricks Runtime 17.2. Kedua perintah SQL menggantikan bagian tabel dengan hasil kueri.

INSERT REPLACE USING menggantikan baris saat USING kolom dibandingkan sama di bawah kesetaraan. INSERT REPLACE ON menggantikan baris saat cocok dengan kondisi yang ditentukan pengguna.

Lihat INSERT dalam referensi bahasa SQL dan Menggantikan data secara selektif dengan Delta Lake.

Gunakan I/O asli untuk LokiFileSystem.getFileStatus pada S3

LokiFileSystem.getFileStatus sekarang menggunakan tumpukan I/O asli untuk lalu lintas Amazon S3 dan mengembalikan org.apache.hadoop.fs.FileStatus objek alih-alih shaded.databricks.org.apache.hadoop.fs.s3a.S3AFileStatus.

Mode ANSI diaktifkan secara default untuk Pandas API di Spark

ANSI_MODE sekarang diaktifkan secara default untuk Pandas API di Spark dengan compute.ansi_mode_support=True, yang memastikan paritas kepatuhan ANSI dengan panda asli. Opsi compute.fail_on_ansi_mode masih berlaku jika compute.ansi_mode_support diatur ke False.

Auto Loader menyimpulkan partisi kolom dalam mode singleVariantColumn

Auto Loader sekarang menyimpulkan kolom partisi dari jalur file saat menyerap data sebagai tipe varian semi-terstruktur menggunakan opsi singleVariantColumn. Sebelumnya, kolom partisi tidak terdeteksi secara otomatis. Lihat Opsi Auto Loader.

Perubahan perilaku

DESCRIBE CONNECTION memperlihatkan pengaturan lingkungan untuk koneksi JDBC

Azure Databricks sekarang menyertakan pengaturan lingkungan yang ditentukan pengguna dalam DESCRIBE CONNECTION output untuk koneksi JDBC yang mendukung driver kustom dan berjalan dalam isolasi. Jenis koneksi lainnya tetap tidak berubah.

Opsi untuk memotong riwayat seragam selama migrasi tabel terkelola

Anda sekarang dapat memotong riwayat seragam saat memigrasikan tabel dengan Uniform/Iceberg diaktifkan menggunakan ALTER TABLE...SET MANAGED. Ini menyederhanakan migrasi dan mengurangi waktu henti dibandingkan dengan menonaktifkan dan mengaktifkan kembali Uniform secara manual.

Sintaks SQL untuk opsi baca Delta dalam kueri streaming

Anda sekarang dapat menentukan opsi baca Delta untuk kueri streaming berbasis SQL menggunakan WITH klausa . Contohnya:

SELECT * FROM STREAM tbl WITH (SKIPCHANGECOMMITS=true, STARTINGVERSION=X);

Hasil yang benar untuk split dengan regex kosong dan batas positif

Azure Databricks sekarang mengembalikan hasil yang benar saat menggunakan split function dengan regex kosong dan batas positif. Sebelumnya, fungsi salah memotong string yang tersisa alih-alih menyertakannya di elemen terakhir.

Memperbaiki url_decode dan try_url_decode menangani kesalahan di Photon

Di Photon, try_url_decode() dan url_decode() dengan failOnError = false sekarang kembali NULL untuk string yang dikodekan URL yang tidak valid alih-alih gagal kueri.

Lingkungan eksekusi bersama untuk Unity Catalog Python UDTFs

Azure Databricks sekarang berbagi lingkungan eksekusi untuk fungsi tabel yang ditentukan pengguna (UDTF) Python dari pemilik dan sesi Spark yang sama. Klausa opsional STRICT ISOLATION tersedia untuk menonaktifkan berbagi untuk UDTF dengan efek samping, seperti memodifikasi variabel lingkungan atau menjalankan kode arbitrer.

Pelacakan baris diaktifkan secara default untuk tabel baru

Azure Databricks sekarang mengaktifkan pelacakan baris secara default untuk semua tabel terkelola Unity Catalog yang baru dibuat. Tabel yang ada tidak terpengaruh dan pengaturan pelacakan barisnya saat ini tidak berubah.

TABLE dukungan argumen untuk Unity Catalog Python UDTFs

Unity Catalog Python UDTFs mendukung TABLE argumen, memungkinkan fungsi untuk menerima seluruh tabel sebagai parameter input, memungkinkan transformasi dan agregasi data yang lebih kompleks pada himpunan data terstruktur. Lihat Fungsi tabel yang ditentukan pengguna (UDTF) Python di Unity Catalog. (Didukung dari 17.3 LTS).

Peningkatan pustaka

Pustaka Python yang ditingkatkan:

Tidak ada pustaka Python yang ditingkatkan dalam versi ini.

Pustaka R yang ditingkatkan:

Tidak ada pustaka R yang dimutakhirkan dalam versi ini.

Pustaka Java yang ditingkatkan:

  • io.delta.delta-sharing-client_2.13 dari 1.3.3 hingga 1.3.5

Apache Spark

Databricks Runtime 17.2 mencakup Apache Spark 4.0.0. Rilis ini mencakup semua perbaikan dan peningkatan Spark yang disertakan dalam versi sebelumnya, serta yang berikut ini:

  • SPARK-53183 Gunakan Java Files.readString alih-alih o.a.s.sql.catalyst.util.fileToString
  • SPARK-51817 Memperkenalkan kembali bidang ansiConfig di messageParameters dari CAST_INVALID_INPUT dan CAST_OVERFLOW
  • SPARK-53124 Pangkas bidang yang tidak perlu dari JsonTuple
  • SPARK-53106 Menambahkan uji evolusi skema untuk suite TWS Scala spark connect
  • SPARK-53201 Gunakan SparkFileUtils.contentEquals alih-alih Files.equal
  • SPARK-53308 Jangan hapus alias di RemoveRedundantAliases yang akan menyebabkan duplikat
  • SPARK-53241 Dukungan createArray di SparkCollectionUtils
  • SPARK-53239 Meningkatkan MapSort dan SortArray performa melalui parallelSort
  • SPARK-53184 Memperbaiki melt() saat kolom nilai mencampur string dan angka
  • SPARK-53144 Membuat CreateViewCommand di efek samping SparkConnectPlanner gratis
  • SPARK-53303 Gunakan encoder status kosong saat status awal tidak disediakan dalam TWS
  • SPARK-52917 Membaca dukungan untuk mengaktifkan round-trip untuk biner dalam format xml
  • SPARK-53110 Menerapkan fungsi time_trunc di PySpark
  • SPARK-53107 Menerapkan fungsi time_trunc di Scala
  • SPARK-52146 Mendeteksi referensi fungsi siklik di UDF SQL
  • SPARK-52469 Menggunakan JEP 223 API untuk memproses versi Java
  • SPARK-53094 Perbaiki CUBE dengan agregat yang berisi HAVING klausul
  • SPARK-51874 Menambahkan TypedConfigBuilder untuk Enumerasi Scala
  • SPARK-53287 Menambahkan Panduan Migrasi ANSI
  • SPARK-43100 Metrik Acak Berbasis Dorong harus dideserialisasi dengan benar
  • SPARK-53045 DESCRIBE EXTENDED harus tahan terhadap metadata yang rusak
  • SPARK-53114 Dukungan join di JavaUtils
  • SPARK-53297 Memperbaiki docstring API Alur Deklaratif StreamingTable
  • SPARK-53181 Mengaktifkan pengujian dokumen di bawah ANSI
  • SPARK-52482 Meningkatkan penanganan pengecualian untuk membaca file zstd tertentu yang rusak
  • SPARK-52990 Dukung StringSubstitutor
  • SPARK-51874 Menambahkan TypedConfigBuilder untuk Enumerasi Scala
  • SPARK-53169 Hapus komentar yang terkait dengan "Set the logger level of File Appender to" dari log4j2.properties
  • SPARK-53080 Dukungan cleanDirectory di SparkFileUtils dan JavaUtils
  • SPARK-53045 DESCRIBE EXTENDED harus tahan terhadap metadata yang rusak
  • SPARK-53000 Ganti nama StringUtils.scala menjadi StringConcat.scala dalam sql/api modul
  • SPARK-52952 Menambahkan Skrip Dev Koersi Jenis PySpark UDF
  • SPARK-52998 Beberapa variabel di dalam deklarasikan
  • SPARK-51817 Memperkenalkan kembali bidang ansiConfig di messageParameters dari CAST_INVALID_INPUT dan CAST_OVERFLOW
  • SPARK-52820 Mengambil paket lengkap dalam file emas
  • SPARK-53274 Mendukung pushdown gabungan kiri dan kanan di JDBCScanBuilder
  • SPARK-52110 Menerapkan dukungan sintaks SQL untuk alur
  • SPARK-52950 Mengaktifkan mode ANSI di DataSourceV2StrategySuite
  • SPARK-52947 Memperbaiki jalur gambar dalam panduan pemrograman alur deklaratif
  • SPARK-52592 Mendukung pembuatan ps. Seri dari ps. Seri
  • SPARK-53301 Membedakan jenis petunjuk Pandas UDF dan Arrow UDF
  • SPARK-53146 Bebaskan efek samping MergeIntoTable di SparkConnectPlanner
  • SPARK-53166 Gunakan SparkExitCode.EXIT_FAILURE dalam SparkPipelines objek
  • SPARK-53288 Memperbaiki kesalahan pernyataan dengan batas global streaming
  • SPARK-52394 Memperbaiki kesalahan divide-by-zero autocorr di bawah mode ANSI
  • SPARK-51555 Menambahkan fungsi time_diff()
  • SPARK-52948 Mengaktifkan test_np_spark_compat_frame di bawah ANSI
  • SPARK-53134 Membersihkan impor ANSI yang tidak digunakan dalam pengujian
  • SPARK-52593 Hindari CAST_INVALID_INPUT , MultiIndex.to_seriesSeries.dot dan DataFrame.dot dalam mode ANSI
  • SPARK-53291 Memperbaiki nullability untuk kolom nilai
  • SPARK-53097 Membuat WriteOperationV2 di SparkConnectPlanner efek samping gratis
  • SPARK-53305 Mendukung TimeType di createDataFrame
  • SPARK-52914 Dukungan On-Demand Log Loading untuk log bergulir masuk History Server
  • SPARK-33538 Langsung dorong predikat IN/NOT ke Apache Hive Metastore
  • SPARK-52849 Tambahkan stringifyException ke o.a.s.util.Utils
  • SPARK-52771 Perbaiki pelesiran jenis float32 di truediv/floordiv
  • SPARK-52502 Gambaran umum jumlah utas
  • SPARK-52788 Memperbaiki kesalahan mengonversi nilai biner di BinaryType ke XML
  • SPARK-53123 Dukungan getRootCause di SparkErrorUtils
  • SPARK-53129 Tingkatkan SparkShell untuk mengimpor java.net._ secara default
  • SPARK-53061 Dukungan copyFileToDirectory di SparkFileUtils
  • SPARK-52683 Mendukung ExternalCatalog alterTableSchema
  • SPARK-52871 Gabungkan o.a.s.sql.catalyst.util.SparkStringUtils ke o.a.s.util.SparkStringUtils
  • SPARK-52817 Perbaiki Like performa Ekspresi
  • SPARK-52545 Menstandarkan pelepasan kuotasi ganda untuk mengikuti spesifikasi SQL
  • SPARK-52711 Perbaiki pelesiran jenis float32 di mul/rmul bawah ANSI
  • SPARK-52615 Ganti File.mkdirs dengan Utils.createDirectory
  • SPARK-52381 JsonProtocol: Hanya menerima subkelas SparkListenerEvent
  • SPARK-52613 Memulihkan pencetakan tumpukan penuh ketika HBase/Apache Hive DelegationTokenProvider menekan pengecualian
  • SPARK-52651 Menangani Jenis yang Ditentukan Pengguna di ColumnVector Berlapis
  • SPARK-52611 Perbaiki versi SQLConf untuk excludeSubqueryRefsFromRemoveRedundantAliases...
  • SPARK-52552 Lewati pemberlakuan batasan CHECK untuk penghapusan vektor penghapusan
  • Parameter dukungan -i-I spark-shell 2.13
  • SPARK-52492 Membuat InMemoryRelation.convertToColumnarIfPossible dapat disesuaikan
  • SPARK-52451 Membuat WriteOperation di efek samping SparkConnectPlanner bebas
  • SPARK-53272 Refaktor logika pushdown SPJ keluar dari BatchScanExec
  • SPARK-53071 Dukungan copyFile di SparkFileUtils
  • SPARK-51415 Mendukung jenis waktu menurut make_timestamp()
  • SPARK-51554 Menambahkan fungsi time_trunc()
  • SPARK-52426 Mendukung pengalihan stdout/stderr ke sistem pengelogan
  • SPARK-51834 Mendukung manajemen batasan tabel end-to-end
  • SPARK-53063 Menerapkan dan memanggil API baru di FileCommitProtocol alih-alih tidak digunakan lagi
  • SPARK-52546 periksa sparkContext jika telah berhenti saat menjalankan blok kode tangkap dalam execute(), jika tidak, itu akan mengembalikan status yang salah.
  • SPARK-53023 Menghapus commons-io dependensi dari sql/api modul
  • SPARK-52396 Direktori Akar Artefak harus menggunakan tmpdir
  • SPARK-53131 Tingkatkan SparkShell untuk mengimpor java.nio.file._ secara default
  • SPARK-42322 Tetapkan nama to_LEGACY_ERROR_TEMP_2235
  • SPARK-51834 Mendukung manajemen batasan tabel end-to-end
  • SPARK-52484 Lewati pernyataan child.supportsColumnar dari sisi driver di ColumnarToRowExec
  • SPARK-52384 Memperbaiki bug Connect harus tidak sensitif untuk opsi JDBC
  • SPARK-52034 Menambahkan metode umum dalam sifat SparkOperation untuk operasi thriftserver
  • SPARK-53031 Dukungan getFile di SparkFileUtils
  • SPARK-52976 Perbaiki UDF Python tidak menerima string kolase sebagai jenis param/return input (17.x)
  • SPARK-52943 Aktifkan arrow_cast untuk semua jenis evaluasi UDF panda
  • SPARK-53263 Mendukung TimeType di df.toArrow
  • SPARK-53141 Menambahkan API untuk mendapatkan ukuran memori overhead dan melepas ukuran memori dari profil sumber daya
  • SPARK-53259 Memperbaiki pesan untuk INVALID_UDF_EVAL_TYPE
  • SPARK-53167 Peluncur Spark isRemote juga menghormati file properti
  • SPARK-53165 Tambah SparkExitCode.CLASS_NOT_FOUND
  • SPARK-53171 Peningkatan pengulangan UTF8String
  • SPARK-53170 Tingkatkan SparkUserAppException untuk memiliki cause parameter
  • SPARK-52989 Menambahkan API close() eksplisit ke iterator Penyimpanan Status
  • SPARK-53074 Hindari pengklusteran parsial di SPJ untuk memenuhi distribusi anak yang diperlukan
  • SPARK-52252 Encoder ScalaUDF dalam subkueri harus diselesaikan
  • SPARK-53244 Jangan simpan confs yang diaktifkan mode dual-run dan tentatif selama pembuatan tampilan
  • SPARK-53192 Selalu cache DataSource di Spark Connect Plan Cache
  • SPARK-51813 Tambahkan DefaultCachedBatchKryoSerializer yang tidak dapat diulang untuk menghindari penyebaran null di serde DefaultCachedBatch
  • SPARK-52904 Terapkan kembali "[SC-202233][python] Aktifkan convertToArrowArrayS...
  • SPARK-53253 Perbaiki register UDF jenis SQL_SCALAR_ARROW_ITER_UDF
  • SPARK-53243 Mencantumkan jenis evaluasi yang didukung dalam simpul panah
  • SPARK-53130 Memperbaiki toJson perilaku jenis string yang disatukan
  • SPARK-53003 Dukungan strip di SparkStringUtils
  • SPARK-51902 Sinkronkan OSS: Memberlakukan batasan pemeriksaan pada penyisipan tabel
  • SPARK-52047 Naikkan PySparkValueError untuk jenis plot yang tidak didukung
  • SPARK-53004 Dukungan abbreviate di SparkStringUtils
  • SPARK-53066 Meningkatkan EXPLAIN output untuk pushdown Gabungan DSv2
  • SPARK-30848 Menghapus productHash dari TreeNode
  • SPARK-53046 Gunakan Java readAllBytes alih-alih IOUtils.toByteArray
  • SPARK-53206 Gunakan SparkFileUtils.move alih-alih com.google.common.io.Files.move
  • SPARK-53066 Meningkatkan EXPLAIN output untuk pushdown Gabungan DSv2
  • SPARK-53069 Memperbaiki metrik penyimpanan status yang salah dengan keluarga kolom virtual
  • SPARK-52904 Aktifkan convertToArrowArraySafely secara default [17.x]
  • SPARK-52821 tambahkan koersi tipe pengembalian pyspark pyspark udf int-DecimalType>
  • SPARK-51562 Tambahkan time fungsi
  • SPARK-52971 Batasi ukuran antrean pekerja Python diam
  • SPARK-53057 Dukungan sizeOf di SparkFileUtils dan JavaUtils
  • SPARK-53040 Melarang referensi mandiri di dalam CTE paling atas dalam CTE Rekursif
  • SPARK-53104 Memperkenalkan ansi_mode_context untuk menghindari beberapa pemeriksaan konfigurasi per panggilan API
  • SPARK-47547 Tambahkan BloomFilter V2 dan gunakan sebagai default
  • SPARK-53098DeduplicateRelations tidak boleh memetakan ulang ekspresi jika lama ExprId masih ada dalam output
  • SPARK-53049 Dukungan toString di SparkStreamUtils
  • SPARK-53062 Dukungan deleteQuietly di SparkFileUtils dan JavaUtils
  • SPARK-53070 Dukungan is(Not)?Empty di SparkCollectionUtils
  • SPARK-53020 Arg JPMS juga harus berlaku untuk proses non-SparkSubmit
  • SPARK-52968 Memancarkan metrik penyimpanan status tambahan
  • SPARK-52975 Menyederhanakan nama bidang dalam sql gabungan pushdown
  • SPARK-52926 Menambahkan SQLMetric untuk durasi waktu pengambilan skema jarak jauh.
  • SPARK-53059 Panah UDF tidak perlu bergantung pada panda
  • SPARK-52646 Hindari CAST_INVALID_INPUT __eq__ dalam mode ANSI
  • SPARK-52622 Hindari CAST_INVALID_INPUT DataFrame.melt dalam mode ANSI
  • SPARK-52985 Naikkan TypeError untuk operand numpy panda di operator perbandingan
  • SPARK-52580 Hindari CAST_INVALID_INPUT replace dalam mode ANSI
  • SPARK-52549 Menonaktifkan referensi mandiri CTE rekursif dari fungsi jendela dan pengurutan di dalam
  • SPARK-52895 Jangan tambahkan elemen duplikat di resolveExprsWithAggregate
  • SPARK-50748 Memperbaiki masalah kondisi balapan yang terjadi ketika operasi terganggu
  • SPARK-52737 Predikat pushdown dan jumlah aplikasi ke FsHistoryProvider saat mencantumkan aplikasi
  • SPARK-53018 ArrowStreamArrowUDFSerializer harus menghormati argumen arrow_cast
  • SPARK-53013 Perbaiki Python UDTF yang dioptimalkan panah yang tidak mengembalikan baris pada gabungan lateral
  • SPARK-51834 Sinkronkan OSS: mendukung batasan tabel end-to-end mengubah batasan tambahkan/letakkan
  • SPARK-52921 Tentukan outputPartitioning untuk UnionExec untuk partitoning output yang sama dengan operator anak
  • SPARK-52908 Mencegah nama variabel iterator berbenturan dengan nama label di jalur ke akar AST
  • SPARK-52954 Koersi jenis pengembalian dukungan UDF panah
  • SPARK-52925 Mengembalikan pesan kesalahan yang benar untuk referensi mandiri jangkar dalam rCTEs
  • SPARK-52889 Menerapkan fungsi current_time di PySpark
  • SPARK-52675 Mengganggu penghandel ML yang menggantung dalam pengujian
  • SPARK-52959 Mendukung UDT dalam UDTF Python yang dioptimalkan Panah
  • SPARK-52962 BroadcastExchangeExec tidak boleh mengatur ulang metrik
  • SPARK-52956 Mempertahankan metadata alias saat menciutkan proyek
  • SPARK-52890 Menerapkan fungsi to_time dan try_to_time di PySpark
  • SPARK-52888 Menerapkan fungsi make_time di PySpark
  • SPARK-52892 Mendukung TIME dalam fungsi jam, menit, dan kedua di PySpark
  • SPARK-52837 Mendukung TimeType di pyspark
  • SPARK-52023 Memperbaiki kerusakan data/segfault menampilkan Opsi[Produk] dari udaf
  • SPARK-52955 Ubah jenis pengembalian WindowResolution.resolveOrder dan WindowResolution.resolveFrame ke WindowExpression
  • SPARK-52166 Menambahkan dukungan untuk PipelineEvents
  • SPARK-51834 Perbaikan: hapus valid dari toDDL
  • SPARK-52735 Memperbaiki kondisi kesalahan yang hilang untuk UDF SQL
  • SPARK-51834 Menyinkronkan tabel buat/ganti dukungan OSS end-to-end dengan batasan
  • SPARK-51834 Menyinkronkan pembaruan OSS ResolvedIdentifier panggilan tidak terapkan
  • SPARK-52929 Mendukung konektor MySQL dan SQLServer untuk pushdown Gabungan DSv2
  • SPARK-52448 Menambahkan Struct Expression.Literal yang disederhanakan
  • SPARK-52882 Menerapkan fungsi current_time di Scala
  • SPARK-52905 Panah UDF untuk jendela
  • SPARK-52876 Perbaiki kesalahan ketik buffer ke body dalam ChunkFetchSuccess.toString
  • SPARK-52883 Menerapkan fungsi to_time dan try_to_time di Scala
  • SPARK-52751 Jangan dengan bersemangat memvalidasi nama kolom di dataframe['col_name']
  • SPARK-52791 Memperbaiki kesalahan saat menyimpulkan UDT dengan elemen pertama null
  • SPARK-52686Union harus diselesaikan hanya jika tidak ada duplikat
  • SPARK-52881 Menerapkan fungsi make_time di Scala
  • SPARK-52919 Memperbaiki pushdown Gabungan DSv2 untuk menggunakan kolom alias sebelumnya
  • SPARK-52866 Menambahkan dukungan untuk try_to_date
  • SPARK-52846 Menambahkan metrik di JDBCRDD untuk berapa lama waktu yang dibutuhkan untuk mengambil hasil
  • SPARK-52859 Menambahkan sifat SparkSystemUtils
  • SPARK-52823 Mendukung pushdown DSv2 Join untuk konektor Oracle
  • SPARK-52165 Menyiapkan perancah build untuk proyek alur
  • SPARK-52869 Menambahkan validasi FrameLessOffsetWindowFunction ke validateResolvedWindowExpression untuk digunakan kembali di penganalisis akses menyeluruh
  • SPARK-52885 Menerapkan fungsi jam, menit, dan kedua di Scala untuk jenis TIME
  • SPARK-52903 Memangkas alias tingkat non-atas sebelum resolusi LCA
  • SPARK-52832 Memperbaiki kutipan pengidentifikasi dialek JDBC
  • SPARK-52870 Mengutip nama variabel dengan benar dalam FOR pernyataan
  • SPARK-52859 Menambahkan SparkSystemUtils sifat
  • SPARK-52900 Gunakan SparkStringUtils.stringToSeq di FsHistoryProvider
  • SPARK-52809 Jangan menyimpan referensi pembaca dan iterator untuk semua partisi dalam pendengar penyelesaian tugas untuk pembaruan metrik
  • SPARK-52815 Tingkatkan SparkClassUtils untuk mendukung getAllInterfaces
  • SPARK-52795 Sertakan runId dalam log penyimpanan status
  • SPARK-52779 Mendukung TimeType literal di Connect
  • SPARK-52899 Memperbaiki pengujian QueryExecutionErrorsSuite untuk mendaftarkan kembali H2Dialect
  • SPARK-52862 Perbaiki pemeriksaan nullability dari Decimal('NaN')
  • SPARK-52214 Panah UDF untuk agregasi
  • SPARK-52787 Mengatur ulang dir eksekusi streaming di sekitar area runtime dan titik pemeriksaan
  • SPARK-51564 Penguraian WAKTU dalam format jam 12 jam
  • SPARK-52859 Menambahkan SparkSystemUtils sifat
  • SPARK-51562 Tambahkan time fungsi
  • SPARK-52850 Lewati konversi panggilan jika fungsi identitas
  • SPARK-52863 Membersihkan jalur kode untuk versi panda lama
  • SPARK-52516 Jangan tahan referensi iterator sebelumnya setelah maju ke file berikutnya di ParquetPartitionReaderFactory
  • SPARK-52848 Hindari transmisi dalam Double transmisi TIME/TIMESTAMP ke DECIMAL
  • SPARK-52770 Jenis dukungan TIME dalam proto sambungkan
  • SPARK-52842 Fungsionalitas baru dan bugfixes untuk penganalisis akses menyeluruh
  • SPARK-52620 Mendukung transmisi TIME ke DECIMAL
  • SPARK-52783 Refaktor jendela Logika validasi fungsionalitas dari checkAnalysis untuk digunakan kembali di penganalisis akses tunggal
  • SPARK-51695 Menyinkronkan tabel create/replace/alter OSS untuk batasan unik melalui DSv2
  • SPARK-51695 Menyinkronkan batasan penurunan OSS melalui DSv2
  • SPARK-52824 Klasifikasi kesalahan CheckpointFileManager
  • SPARK-52829 Perbaiki LocalDataToArrowConversion.convert untuk menangani baris kosong dengan benar
  • SPARK-52811 Optimalkan ArrowTableToRowsConversion.convert untuk meningkatkan performanya
  • SPARK-52796 Optimalkan LocalDataToArrowConversion.convert untuk meningkatkan performanya
  • SPARK-51695 Sinkronkan Perubahan Tabel Perubahan OSS Tambahkan perubahan pengurai Batasan
  • SPARK-52619 Cast TimeType ke IntegralType
  • SPARK-52187 Memperkenalkan pushdown Gabungan untuk DSv2
  • SPARK-52782 Mengembalikan NULL dari +/- pada tanggalwaktu dengan NULL
  • SPARK-51695 Memperkenalkan Perubahan Pengurai untuk Batasan Tabel (CHECK, PK, FK)
  • SPARK-52808spark.history.retainedApplications harus positif
  • SPARK-52776 Jangan pisahkan bidang comm di ProcfsMetricsGetter
  • SPARK-52793 Dukungan isUnix di o.a.s.util.Utils
  • SPARK-52792 Hapus commons-lang3 dependensi dari network-common
  • SPARK-52797 Gunakan Utils.isWindows alih-alih mengevaluasi ulang di PythonWorkerFactory
  • SPARK-52784 Menambahkan transmisi TimeZoneAware di WindowFrameTypeCoercion.createBoundaryCast
  • SPARK-52725 Tunda inisialisasi manajer profil sumber daya hingga plugin dimuat
  • SPARK-52565 Menerapkan resolusi ordinal sebelum ekspresi urutan pengurutan lainnya
  • SPARK-52740 Perbaiki NPE di HDFSBackedStateStoreProvider yang mengakses StateStoreConf.sqlConf saat versi format titik pemeriksaan adalah >=2
  • SPARK-52673 Menambahkan penanganan grpc RetryInfo ke kebijakan coba lagi Spark Connect
  • SPARK-52724 Meningkatkan penanganan kesalahan OOM gabungan siaran dengan dukungan petunjuk SHUFFLE_MERGE
  • SPARK-52781 Memperbaiki kesalahan ketik dtyep di internal.py
  • SPARK-52730 Menyimpan driver dan versi database yang mendasarinya di JDBCRDD
  • SPARK-52727 Refaktor resolusi Jendela untuk menggunakannya kembali di penganalisis akses tunggal
  • SPARK-52695 Dukungan tulis Jenis yang Ditentukan Pengguna untuk format file xml
  • SPARK-52722 Menghentikan kelas JdbcRDD
  • SPARK-51695 Memperkenalkan Perubahan Pengurai untuk Batasan Tabel (CHECK, PK, FK)
  • SPARK-52763 Pengurangan WAKTU Dukungan
  • SPARK-52768 Perbaiki kesalahan ketik "pemindahan" di panda/series.py
  • SPARK-52730 Menyimpan driver dan versi database yang mendasarinya di JDBCRDD
  • SPARK-52694 Tambahkan o.a.s.sql.Encoders#udtAPI
  • SPARK-52720 Perbaiki pelesiran jenis float32 di add/radd bawah ANSI
  • SPARK-52723 Validasi nama kolom sisi server
  • SPARK-52760 Perbaiki pelesiran jenis float32 di sub/rsub bawah ANSI
  • SPARK-52738 Dukungan mengagregasi jenis TIME dengan UDAF ketika buffer yang mendasar adalah UnsafeRow
  • SPARK-52704 Menyederhanakan interoperasi antara opsi SQLConf dan format file di TextBasedFileFormats
  • SPARK-52706 Memperbaiki inkonsistensi dan jenis primitif refaktor di parser
  • SPARK-52718 Perbaiki pelesiran jenis float32 di rmod/mod bawah ANSI
  • SPARK-52736 Memperbaiki kesalahan ketik 'memindahkan' di pyspark/pandas/generic.py

Driver ODBC/JDBC Azure Databricks yang didukung

Databricks mendukung driver ODBC/JDBC yang dirilis dalam 2 tahun terakhir. Unduh driver dan peningkatan yang baru dirilis (unduh ODBC, unduh JDBC).

Lingkungan sistem

  • Sistem Operasi: Ubuntu 24.04.3 LTS
  • Java: Zulu17.58+21-CA
  • Scala: 2.13.16
  • Python: 3.12.3
  • R: 4.4.2
  • Danau Delta: 4.0.0

Pustaka Python yang diinstal

Perpustakaan Versi Perpustakaan Versi Perpustakaan Versi
tipe beranotasi 0.7.0 anyio 4.6.2 argon2-cffi 21.3.0
Pengikatan Argon2-cffi 21.2.0 anak panah 1.3.0 asttoken 2.0.5
astunparse 1.6.3 asinkron-lru 2.0.4 atribut 24.3.0
perintah otomatis 2.2.2 azure-common 1.1.28 azure-core 1.34.0
azure-identity 1.20.0 azure-mgmt-core 1.5.0 azure-mgmt-web 8.0.0
Azure Storage Blob 12.23.0 Azure Storage File Data Lake 12.17.0 babel 2.16.0
backports.tarfile 1.2.0 beautifulsoup4 4.12.3 hitam 24.10.0
pemutih 6.2.0 blinker 1.7.0 boto3 1.36.2
botocore 1.36.3 cachetools (perangkat untuk caching) 5.5.1 sertifikat 31 Januari 2025
cffi 1.17.1 chardet 4.0.0 charset-normalizer 3.3.2
klik 8.1.7 cloudpickle (perpustakaan Python untuk serialisasi objek) 3.0.0 Komunikasi 0.2.1
Contourpy 1.3.1 Kriptografi 43.0.3 pengendara sepeda 0.11.0
Cython 3.0.12 databricks-sdk 0.49.0 dbus-python 1.3.2
debugpy 1.8.11 penghias 5.1.1 defusedxml 0.7.1
Deprecated 1.2.13 distlib 0.3.9 konversi docstring ke markdown 0.11
Mengeksekusi 0.8.3 gambaran umum aspek 1.1.1 fastapi 0.115.12
fastjsonschema 2.21.1 filelock 3.18.0 alat pengelola font 4.55.3
Fqdn 1.5.1 fsspec 2023.5.0 gitdb 4.0.11
GitPython 3.1.43 google-api-core 2.20.0 google-auth (autentikasi Google) 2.40.0
google-cloud-core 2.4.3 penyimpanan awan Google 3.1.0 google-crc32c 1.7.1
google-resumable-media (layanan media berkelanjutan dari Google) 2.7.2 googleapis-common-protos 1.65.0 grpcio 1.67.0
grpcio-status 1.67.0 h11 0.14.0 httpcore 1.0.2
httplib2 0.20.4 httpx 0.27.0 IDNA 3.7
importlib-metadata 6.6.0 importlib_resources 6.4.0 memfleksi 7.3.1
iniconfig 1.1.1 ipyflow-core 0.0.209 ipykernel 6.29.5
ipython 8.30.0 ipython-genutils 0.2.0 ipywidgets 7.8.1
isodate 0.6.1 isodurasi 20.11.0 jaraco.context 5.3.0
jaraco.functools 4.0.1 jaraco.teks 3.12.1 Jedi 0.19.2
Jinja2 3.1.5 jmespath 1.0.1 joblib 1.4.2
json5 0.9.25 jsonpointer 3.0.0 jsonschema 4.23.0
Spesifikasi JSON Schema 2023.7.1 peristiwa Jupyter 0.10.0 jupyter-lsp 2.2.0
jupyter_client 8.6.3 jupyter_core 5.7.2 jupyter_server 2.14.1
Terminal Jupyter Server 0.4.4 jupyterlab 4.3.4 jupyterlab-pygments 0.1.2
jupyterlab-widgets 1.0.0 jupyterlab_server 2.27.3 kiwisolver 1.4.8
launchpadlib 1.11.0 lazr.restfulclient (klien layanan web yang menggunakan RESTful) 0.14.6 lazr.uri 1.0.6
markdown-it-py 2.2.0 MarkupSafe 3.0.2 matplotlib 3.10.0
matplotlib-inline (modul untuk menampilkan grafik secara inline) 0.1.7 Mccabe 0.7.0 mdurl 0.1.0
penyetelan salah 2.0.4 mlflow-skinny (versi ringan) 3.0.1 mmh3 5.1.0
more-itertools 10.3.0 msal 1.32.3 msal-extensions 1.3.1
mypy-extensions 1.0.0 nbclient 0.8.0 nbconvert 7.16.4
nbformat 5.10.4 nest-asyncio 1.6.0 nodeenv 1.9.1
notebook 7.3.2 buku_catatan_shim 0.2.3 numpy (perpustakaan Python untuk operasi numerik) 2.1.3
oauthlib 3.2.2 opentelemetry-api 1.32.1 opentelemetry-sdk 1.32.1
opentelemetry-konvensi-semantik 0.53b1 Mengabaikan 7.4.0 pengemasan 24,2
Panda 2.2.3 Pandocfilters 1.5.0 pengurai 0.8.4
spesifikasi jalur 0.10.3 kambing hitam 1.0.1 pexpect 4.8.0
bantal 11.1.0 pipa 25.0.1 platformdirs 3.10.0
plotly 5.24.1 pengaya 1.5.0 prometheus_client 0.21.0
prompt-toolkit 3.0.43 proto-plus 1.26.1 protobuf 5.29.4
psutil 5.9.0 psycopg2 2.9.3 ptyprocess 0.7.0
pure-eval 0.2.2 pyarrow 19.0.1 pyasn1 0.4.8
pyasn1-modules 0.2.8 pyccolo 0.0.71 pycparser 2.21
pydantic (perpustakaan Python untuk validasi data) 2.10.6 pydantic_core 2.27.2 pyflakes 3.2.0
Pygments 2.15.1 PyGObject 3.48.2 pyiceberg 0.9.0
PyJWT 2.10.1 pyodbc 5.2.0 pyparsing 3.2.0
pyright 1.1.394 pytest 8.3.5 python-dateutil 2.9.0.post0
python-json-logger 3.2.1 python-lsp-jsonrpc 1.1.2 python-lsp-server 1.12.0
pytoolconfig 1.2.6 pytz 2024.1 PyYAML (paket untuk memproses bahasa YAML dalam Python) 6.0.2
pyzmq 26.2.0 Merujuk 0.30.2 requests 2.32.3
rfc3339-validator 0.1.4 rfc3986-validator 0.1.1 kaya 13.9.4
tali 1.12.0 rpds-py 0.22.3 rsa 4.9.1
s3transfer 0.11.3 scikit-learn 1.6.1 scipy (perpustakaan Python untuk komputasi ilmiah) 1.15.1
Seaborn (perpustakaan Python untuk visualisasi data) 0.13.2 Send2Trash 1.8.2 setuptools 74.0.0
Enam 1.16.0 smmap 5.0.0 Sniffio 1.3.0
sortedcontainers 2.4.0 alat penyaring sup 2.5 sqlparse 0.5.3
ssh-import-id 5.11 stack-data 0.2.0 starlette 0.46.2
statsmodels (paket Python untuk pemodelan statistik) 0.14.4 strictyaml 1.7.3 kegigihan 9.0.0
selesai 0.17.1 threadpoolctl 3.5.0 tinycss2 1.4.0
tokenize_rt 6.1.0 tomli 2.0.1 Tornado 6.4.2
traitlets 5.14.3 typeguard (penjaga tipe) 4.3.0 type-python-dateutil 2.9.0.20241206
ekstensi pengetikan (typing_extensions) 4.12.2 tzdata 2024.1 ujson 5.10.0
pembaruan otomatis tanpa pengawasan 0.1 templat URI 1.3.0 urllib3 2.3.0
uvicorn 0.34.2 virtualenv 20.29.3 wadllib 1.3.6
wcwidth 0.2.5 warna web 24.11.1 pengkodean web 0.5.1
websocket-klien 1.8.0 apa itu patch 1.0.2 wheel 0.45.1
widgetsnbextension 3.6.6 terbungkus 1.17.0 yapf 0.40.2
zipp 3.21.0

Perpustakaan R yang terinstal

Pustaka R diinstal dari cuplikan CRAN Pengelola Paket Posit pada 20-03-2025.

Perpustakaan Versi Perpustakaan Versi Perpustakaan Versi
anak panah 19.0.1 askpass 1.2.1 pastikanbahwa 0.2.1
pemindahan fitur ke versi lama (backports) 1.5.0 dasar 4.4.2 base64enc 0.1-3
bigD 0.3.0 sedikit 4.6.0 bit-64 4.6.0-1
bitops 1.0-9 blob 1.2.4 sepatu bot 1.3-30
menyeduh 1.0-10 Brio 1.1.5 sapu 1.0.7
bslib 0.9.0 cashmere 1.1.0 layanan panggilan 3.7.6
caret 7.0-1 cellranger 1.1.0 kronogram 2.3-62
kelas 7.3-22 CLI 3.6.5 pemangkas 0.8.0
jam dinding 0.7.2 kluster 2.1.6 codetools 0.2-20
ruang warna 2.1-1 commonmark 1.9.5 pengkompilasi 4.4.2
config 0.3.2 Bimbang 1.2.0 cpp11 0.5.2
kriyon 1.5.3 kredensial 2.0.2 melengkung 6.4.0
data.table (sebuah paket untuk pengolahan data table) 1.17.0 kumpulan data 4.4.2 DBI 1.2.3
dbplyr 2.5.0 deskripsi 1.4.3 devtools 2.4.5
bagan 1.6.5 diffobj 0.3.5 digest 0.6.37
pencahayaan turun 0.4.4 dplyr 1.1.4 dtplyr 1.3.1
e1071 1.7-16 elipsis 0.3.2 menilai 1.0.3
penggemar 1.0.6 warna-warna 2.1.2 pemetaan cepat 1.2.0
fontawesome 0.5.3 untuk kucing 1.0.0 foreach (pengulangan untuk setiap elemen) 1.5.2
asing 0.8-86 bengkel pandai besi 0.2.0 fs 1.6.5
masa depan 1.34.0 menerapkan di masa depan 1.11.3 kumur 1.5.2
obat generik 0.1.4 Gert 2.1.4 ggplot2 3.5.1
gh 1.4.1 git2r 0.35.0 gitcreds 0.1.2
glmnet 4.1-8 variabel global 0.18.0 lem 1.8.0
googledrive 2.1.1 googlesheets4 1.1.1 Gower 1.0.2
Grafik 4.4.2 grDevices 4.4.2 kisi 4.4.2
gridExtra 2.3 gsubfn 0.7 gt 0.11.1
gtabel 0.3.6 topi keras 1.4.1 tempat aman 2.5.4
lebih tinggi 0.11 HMS 1.1.3 htmltools 0.5.8.1
htmlwidgets 1.6.4 httpuv 1.6.15 httr 1.4.7
httr2 1.1.1 ids 1.0.1 ini 0.3.1
ipred 0.9-15 isoband 0.2.7 Pengiterasi 1.0.14
jquerylib 0.1.4 jsonlite 1.9.1 JuicyJuice 0.1.0
KernSmooth 2.23-22 knitr 1,50 Pelabelan 0.4.3
nanti 1.4.1 rangka 0.22-5 lahar 1.8.1
siklus hidup 1.0.4 listenv 0.9.1 lubridate 1.9.4
magrittr 2.0.3 Markdown 1.13 Massa 7.3-60.0.1
Matrix 1.6-5 memosankan 2.0.1 Metode 4.4.2
mgcv 1.9-1 pantomim 0,13 miniUI 0.1.1.1
mlflow 2.20.4 ModelMetrics 1.2.2.2 modelr 0.1.11
munsell 0.5.1 nlme 3.1-164 nnet 7.3-19
numDeriv Agustus 2016 - Januari 2017 openssl 2.3.3 paralel 4.4.2
secara paralel 1.42.0 pilar 1.11.0 pkgbuild 1.4.6
pkgconfig 2.0.3 pkgdown 2.1.1 pkgload 1.4.0
plogr 0.2.0 plyr 1.8.9 pujian 1.0.0
prettyunits 1.2.0 pROC 1.18.5 ProsesX 3.8.6
prodlim 2024.06.25 profvis 0.4.0 Kemajuan 1.2.3
progresr 0.15.1 janji 1.3.2 proto 1.0.0
proksi 0,4-27 P.S. 1.9.0 menggeram lembut 1.0.4
R6 2.6.1 ragg 1.3.3 randomForest (algoritma pembelajaran mesin) 4.7-1.2
rappdirs 0.3.3 rcmdcheck 1.4.0 RColorBrewer 1.1-3
Rcpp 1.0.14 RcppEigen 0.3.4.0.2 dapat direaksi 0.4.4
reactR 0.6.1 alat baca 2.1.5 readxl (membaca file Excel) 1.4.5
recipes 1.2.0 pertandingan ulang 2.0.0 pertandingan ulang 2 2.1.2
pengontrol jarak jauh 2.5.0 contoh replikasi 2.1.1 reshape2 1.4.4
rlang 1.1.6 rmarkdown 2.29 RODBC 1.3-26
roxygen2 7.3.2 rpart 4.1.23 rprojroot 2.0.4
Rserve 1.8-15 RSQLite 2.3.9 rstudioapi 0.17.1
rversions 2.1.2 rvest 1.0.4 Sass 0.4.9
timbangan / sisik 1.3.0 selektor 0,4-2 informasi sesi 1.2.3
bentuk 1.4.6.1 mengkilap 1.10.0 sourcetools 0.1.7-1
sparklyr 1.9.1 SparkR 4.0.0 sparsevctrs 0.3.1
spasial 7.3-17 garis lengkung 4.4.2 sqldf 0,4-11
SQUAREM 2021.1 statistik 4.4.2 statistik4 4.4.2
string 1.8.7 stringr 1.5.1 bertahan hidup 3.5-8
gaya berani 5.17.14.1 Sistem 3.4.3 systemfonts 1.2.1
bahasa pemrograman Tcl/Tk 4.4.2 ujiitu 3.2.3 pemformatan teks 1.0.0
tibble 3.3.0 tidyr 1.3.1 tidyselect 1.2.1
tidyverse 2.0.0 perubahan jam 0.3.0 TanggalWaktu 4041.110
tinytex 0.56 perangkat 4.4.2 tzdb 0.5.0
urlchecker 1.0.1 gunakan ini 3.1.0 utf8 1.2.6
Utilitas 4.4.2 UUID (Pengidentifikasi Unik Universal) 1.2-1 V8 6.0.2
vctrs 0.6.5 viridisLite 0.4.2 Vroom 1.6.5
Waldo 0.6.1 kumis 0.4.1 dengan 3.0.2
xfun 0,51 xml2 1.3.8 xopen 1.0.1
xtable 1.8-4 yaml 2.3.10 zeallot 0.1.0
zip 2.3.2

Pustaka Java dan Scala yang diinstal (versi kluster Scala 2.13)

ID Kelompok Identifikasi Artefak Versi
antlr antlr 2.7.7
com.amazonaws Klien Amazon Kinesis 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.638
com.amazonaws aws-java-sdk-cloudformation 1.12.638
com.amazonaws aws-java-sdk-cloudfront 1.12.638
com.amazonaws AWS Java SDK untuk CloudHSM 1.12.638
com.amazonaws aws-java-sdk-cloudsearch (AWS Java SDK untuk CloudSearch) 1.12.638
com.amazonaws aws-java-sdk-cloudtrail 1.12.638
com.amazonaws aws-java-sdk-cloudwatch 1.12.638
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.638
com.amazonaws aws-java-sdk-codedeploy 1.12.638
com.amazonaws aws-java-sdk-cognitoidentity 1.12.638
com.amazonaws aws-java-sdk-cognitosync 1.12.638
com.amazonaws aws-java-sdk-config (konfigurasi SDK Java untuk AWS) 1.12.638
com.amazonaws aws-java-sdk-core 1.12.638
com.amazonaws aws-java-sdk-datapipeline 1.12.638
com.amazonaws aws-java-sdk-directconnect 1.12.638
com.amazonaws aws-java-sdk-directory 1.12.638
com.amazonaws aws-java-sdk-dynamodb 1.12.638
com.amazonaws aws-java-sdk-ec2 1.12.638
com.amazonaws aws-java-sdk-ecs 1.12.638
com.amazonaws aws-java-sdk-efs 1.12.638
com.amazonaws aws-java-sdk-elasticache (SDK Java AWS untuk ElastiCache) 1.12.638
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.638
com.amazonaws aws-java-sdk-elasticloadbalancing (SDK untuk penyeimbangan beban elastis di AWS dengan Java) 1.12.638
com.amazonaws aws-java-sdk-elastictranscoder 1.12.638
com.amazonaws aws-java-sdk-emr 1.12.638
com.amazonaws aws-java-sdk-glacier (perangkat lunak pengembangan untuk Glacier dari Amazon Web Services) 1.12.638
com.amazonaws aws-java-sdk-glue 1.12.638
com.amazonaws aws-java-sdk-iam 1.12.638
com.amazonaws aws-java-sdk-impor-ekspor 1.12.638
com.amazonaws aws-java-sdk-kinesis 1.12.638
com.amazonaws aws-java-sdk-kms 1.12.638
com.amazonaws aws-java-sdk-lambda 1.12.638
com.amazonaws aws-java-sdk-logs 1.12.638
com.amazonaws AWS-Java-SDK-Pembelajaran Mesin 1.12.638
com.amazonaws aws-java-sdk-opsworks (SDK Java untuk OpsWorks) 1.12.638
com.amazonaws aws-java-sdk-rds 1.12.638
com.amazonaws aws-java-sdk-redshift 1.12.638
com.amazonaws aws-java-sdk-route53 1.12.638
com.amazonaws aws-java-sdk-s3 1.12.638
com.amazonaws aws-java-sdk-ses 1.12.638
com.amazonaws aws-java-sdk-simpledb 1.12.638
com.amazonaws aws-java-sdk-simpleworkflow 1.12.638
com.amazonaws aws-java-sdk-sns 1.12.638
com.amazonaws aws-java-sdk-sqs 1.12.638
com.amazonaws aws-java-sdk-ssm (kit pengembangan perangkat lunak Java untuk AWS-SSM) 1.12.638
com.amazonaws SDK Java untuk Storage Gateway AWS 1.12.638
com.amazonaws aws-java-sdk-sts 1.12.638
com.amazonaws AWS Java SDK Dukungan 1.12.638
com.amazonaws aws-java-sdk-swf-libraries (perpustakaan untuk pengembangan perangkat lunak menggunakan Java dan AWS SWF) 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.638
com.amazonaws jmespath-java 1.12.638
com.clearspring.analytics aliran 2.9.8
com.databricks Rserve 1.8-3
com.databricks databricks-sdk-java 0.27.0
com.databricks jets3t 0.7.1-0
com.databricks.scalapb scalapb-runtime_2.13 0.4.15-11
com.esotericsoftware bayangan-kriogenik 4.0.3
com.esotericsoftware Minlog 1.3.0
com.fasterxml teman sekelas 1.5.1
com.fasterxml.jackson.core Jackson Annotations 2.18.2
com.fasterxml.jackson.core jackson-core 2.18.2
com.fasterxml.jackson.core jackson-databind 2.18.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.18.2
com.fasterxml.jackson.dataformat jackson-dataformat-yaml 2.15.2
com.fasterxml.jackson.datatype Jackson-datatype-joda 2.18.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.18.2
com.fasterxml.jackson.module jackson-module-paranamer 2.18.2
com.fasterxml.jackson.module jackson-module-scala_2.13 2.18.2
com.github.ben-manes.caffeine kafein 2.9.3
com.github.blemale scaffeine_2.13 4.1.0
com.github.fommil jniloader 1.1
com.github.fommil.netlib referensi_asli-java 1.1
com.github.fommil.netlib referensi_asli-java 1.1-penduduk asli
com.github.fommil.netlib sistem_asli-java 1.1
com.github.fommil.netlib sistem_asli-java 1.1-penduduk asli
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1-penduduk asli
com.github.fommil.netlib netlib-native_system-linux-x86_64 1.1-penduduk asli
com.github.luben zstd-jni 1.5.6-10
com.github.virtuald curvesapi 1.08
com.github.wendykierp JTransforms 3.1
com.google.api.grpc proto-google-common-protos 2.5.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson Gson 2.11.0
com.google.crypto.tink tink 1.16.0
com.google.errorprone Annotasi yang rentan terhadap kesalahan 2.36.0
com.google.flatbuffers flatbuffers-java 24.3.25
com.google.guava kegagalan akses 1.0.2
com.google.guava jambu biji 33.4.0-jre
com.google.guava masa depan yang dapat didengarkan 9999.0-kosong-untuk-menghindari-konflik-dengan-guava
com.google.j2objc j2objc-anotasi 3.0.0
com.google.protobuf protobuf-java 3.25.5
com.google.protobuf protobuf-java-util 3.25.5
com.helger pembuat profil 1.1.1
com.ibm.icu icu4j 75.1
com.jcraft jsch 0.1.55
com.lihaoyi sourcecode_2.13 0.1.9
com.microsoft.azure Azure Data Lake Store SDK 2.3.10
com.microsoft.sqlserver mssql-jdbc 11.2.2.jre8
com.microsoft.sqlserver mssql-jdbc 12.8.0.jre8
com.ning compress-lzf (algoritma kompresi) 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning JSON 1.8
com.thoughtworks.paranamer Paranamer 2.8
com.trueaccord.lenses lenses_2.13 0.4.13
com.twitter chill-java 0.10.0
com.twitter chill_2.13 0.10.0
com.twitter util-app_2.13 19.8.1
com.twitter util-core_2.13 19.8.1
com.twitter util-function_2.13 19.8.1
com.twitter util-jvm_2.13 19.8.1
com.twitter util-lint_2.13 19.8.1
com.twitter util-registry_2.13 19.8.1
com.twitter util-stats_2.13 19.8.1
com.typesafe config 1.4.3
com.typesafe.scala-logging scala-logging_2.13 3.9.2
com.uber h3 3.7.3
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
com.zaxxer SparseBitSet 1.3
commons-cli commons-cli 1.9.0
commons-codec commons-codec 1.17.2
koleksi umum koleksi umum 3.2.2
commons-dbcp commons-dbcp 1.4
unggah berkas pada commons unggah berkas pada commons 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.18.0
commons-lang commons-lang 2.6
commons-logging (perpustakaan Java untuk fungsi pencatatan) commons-logging (perpustakaan Java untuk fungsi pencatatan) 1.1.3
kolam umum kolam umum 1.5.4
dev.ludovic.netlib arpack 3.0.3
dev.ludovic.netlib Tidak peduli 3.0.3
dev.ludovic.netlib LAPACK 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift kompresor udara 2.0.2
io.delta delta-sharing-client_2.13 1.3.5
io.dropwizard.metrics metrik dan anotasi 4.2.30
io.dropwizard.metrics inti metrik 4.2.30
io.dropwizard.metrics metrics-graphite 4.2.30
io.dropwizard.metrics pengukuran-pemeriksaan kesehatan 4.2.30
io.dropwizard.metrics metrics-jetty9 4.2.30
io.dropwizard.metrics metrik-jmx 4.2.30
io.dropwizard.metrics metrik-json 4.2.30
io.dropwizard.metrics metrik-jvm 4.2.30
io.dropwizard.metrics metrik-servlet 4.2.30
io.github.java-diff-utils java-diff-utils 4.15
io.netty netty-all 4.1.118.Final
io.netty Netty Buffer 4.1.118.Final
io.netty netty-codec 4.1.118.Final
io.netty netty-kodek-http 4.1.118.Final
io.netty netty-codec-http2 4.1.118.Final
io.netty netty-codec-socks 4.1.118.Final
io.netty netty-common 4.1.118.Final
io.netty netty-handler 4.1.118.Final
io.netty netty-handler-proxy 4.1.118.Final
io.netty netty-resolver (pustaka untuk pemecahan masalah terkait jaringan dalam Netty) 4.1.118.Final
io.netty netty-tcnative-boringssl-static 2.0.70.Final-db-r0-linux-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.70.Final-db-r0-linux-x86_64
io.netty netty-tcnative-boringssl-static 2.0.70.Final-db-r0-osx-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.70.Final-db-r0-osx-x86_64
io.netty netty-tcnative-boringssl-static 2.0.70.Final-db-r0-windows-x86_64
io.netty Kelas netty-tcnative 2.0.70.Final
io.netty netty-transport 4.1.118.Final
io.netty netty-transport-classes-epoll (kelas transportasi netty - epoll) 4.1.118.Final
io.netty netty-transport-classes-kqueue 4.1.118.Final
io.netty netty-transport-native-epoll 4.1.118.Final
io.netty netty-transport-native-epoll 4.1.118.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.118.Final-linux-riscv64
io.netty netty-transport-native-epoll 4.1.118.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.118.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.118.Final-osx-x86_64
io.netty netty-transport-native-unix-common (paket transport Netty untuk sistem Unix umum) 4.1.118.Final
io.prometheus simpleclient 0.16.1-databricks
io.prometheus simpleclient_umum 0.16.1-databricks
io.prometheus simpleclient_dropwizard 0.16.1-databricks
io.prometheus simpleclient_pushgateway (gateway pendorong sederhana) 0.16.1-databricks
io.prometheus simpleclient_servlet 0.16.1-databricks
io.prometheus simpleclient_servlet_common 0.16.1-databricks
io.prometheus simpleclient_tracer_common 0.16.1-databricks
io.prometheus simpleclient_tracer_otel 0.16.1-databricks
io.prometheus simpleclient_pelacakan_otel_agen 0.16.1-databricks
io.prometheus.jmx pengumpul 0.18.0
jakarta.anotasi jakarta.anotasi-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktivasi 1.1.1
javax.annotation javax.annotation-api 1.3.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.media jai_core jai_core_dummy
javax.transaction Java Transaction API (JTA) 1.1
javax.transaction Transaction-API 1.1
javax.xml.bind jaxb-api 2.2.11
Javolution Javolution 5.5.1
Jline Jline 2.14.6
joda-time joda-time 2.13.0
net.java.dev.jna jna 5.8.0
net.razorvine mentimun acar 1.5
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
jaring.bunga salju snowflake-ingest-sdk 0.9.6
net.sourceforge.f2j arpack_gabungan_semua 0.1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.13.1
org.antlr StringTemplate 3.2.1
org.apache.ant ant 1.10.11
org.apache.ant ant-jsch 1.10.11
org.apache.ant ant-launcher 1.10.11
org.apache.arrow format tanda panah 18.2.0
org.apache.arrow inti-memori-panah 18.2.0
org.apache.arrow Arrow-Memory-Netty 18.2.0
org.apache.arrow arrow-memori-netty-penyangga-tambalan 18.2.0
org.apache.arrow arrow-vector 18.2.0
org.apache.avro Avro 1.12.0
org.apache.avro avro-ipc 1.12.0
org.apache.avro avro-mapred 1.12.0
org.apache.commons commons-koleksi4 4.4
org.apache.commons commons-compress 1.27.1
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.17.0
org.apache.commons Commons-Math3 3.6.1
org.apache.commons commons-text (teks umum) 1.13.0
org.apache.curator kurator dan klien 5.7.1
org.apache.curator kerangka kerja kurator 5.7.1
org.apache.curator kurasi resep 5.7.1
org.apache.datasketches datasketches-java 6.1.1
org.apache.datasketches datasketches-memory 3.0.2
org.apache.derby pertandingan derbi 10.14.2.0
org.apache.hadoop lingkungan kerja klien Hadoop 3.4.1
org.apache.hive hive-beeline (antarmuka perintah untuk Apache Hive) 2.3.10
org.apache.hive hive-cli 2.3.10
org.apache.hive hive-jdbc 2.3.10
org.apache.hive hive-llap-client 2.3.10
org.apache.hive hive-llap-common 2.3.10
org.apache.hive hive-serde (komponen pada Apache Hive untuk serialisasi dan deserialisasi) 2.3.10
org.apache.hive Hive-shims 2.3.10
org.apache.hive API penyimpanan hive 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.10
org.apache.hive.shims hive-shims-common (As a specialized technical term, it might be appropriate to maintain it in its original form unless further context suggests an equivalent Indonesian term is necessary.) 2.3.10
org.apache.hive.shims Pengatur Jadwal Hive Shims 2.3.10
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy tanaman anggur 2.5.3
org.apache.logging.log4j log4j-1.2-api 2.24.3
org.apache.logging.log4j log4j-api 2.24.3
org.apache.logging.log4j log4j-core 2.24.3
org.apache.logging.log4j log4j-layout-template-json (pola tata letak JSON di log4j) 2.24.3
org.apache.logging.log4j log4j-slf4j2-impl 2.24.3
org.apache.orc orc-core 2.1.1-shaded-protobuf
org.apache.orc orc-format 1.1.0-shaded-protobuf
org.apache.orc orc-mapreduce 2.1.1-shaded-protobuf
org.apache.orc orc-shims 2.1.1
org.apache.poi Poi 5.4.1
org.apache.poi poi-ooxml 5.4.1
org.apache.poi poi-ooxml-full 5.4.1
org.apache.poi poi-ooxml-lite 5.4.1
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.16.0
org.apache.ws.xmlschema xmlschema-core 2.3.1
org.apache.xbean xbean-asm9-shaded 4.26
org.apache.xmlbeans xmlbeans 5.3.0
org.apache.yetus anotasi penonton 0.13.0
org.apache.zookeeper penjaga kebun binatang 3.9.3
org.apache.zookeeper penjaga kebun binatang-jute 3.9.3
org.checkerframework pemeriksa kualitas 3.43.0
org.codehaus.janino Pengompilasi Umum 3.0.16
org.codehaus.janino Januari 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.53.v20231009
org.eclipse.jetty lanjutan dermaga 9.4.53.v20231009
org.eclipse.jetty jetty-http (protokol HTTP untuk server Jetty) 9.4.53.v20231009
org.eclipse.jetty jetty-io 9.4.53.v20231009
org.eclipse.jetty jetty-jndi 9.4.53.v20231009
org.eclipse.jetty Jetty Plus 9.4.53.v20231009
org.eclipse.jetty Jetty-Proxy 9.4.53.v20231009
org.eclipse.jetty keamanan jetty 9.4.53.v20231009
org.eclipse.jetty Jetty Server 9.4.53.v20231009
org.eclipse.jetty jetty-servlet 9.4.53.v20231009
org.eclipse.jetty jetty-servlets 9.4.53.v20231009
org.eclipse.jetty jetty-util 9.4.53.v20231009
org.eclipse.jetty jetty-util-ajax 9.4.53.v20231009
org.eclipse.jetty Aplikasi web Jetty 9.4.53.v20231009
org.eclipse.jetty jetty-xml 9.4.53.v20231009
org.eclipse.jetty.websocket WebSocket-API 9.4.53.v20231009
org.eclipse.jetty.websocket websocket-klien 9.4.53.v20231009
org.eclipse.jetty.websocket websocket-common 9.4.53.v20231009
org.eclipse.jetty.websocket websocket-server 9.4.53.v20231009
org.eclipse.jetty.websocket websocket-servlet 9.4.53.v20231009
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-pemindai lokasi 2.6.1
org.glassfish.hk2 hk2-utilitas 2.6.1
org.glassfish.hk2 osgi-penanda-sumber-daya 1.0.3
org.glassfish.hk2.external aopalliance (dikemas ulang) 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.41
org.glassfish.jersey.containers jersey-container-servlet-inti 2.41
org.glassfish.jersey.core jersey-client 2.41
org.glassfish.jersey.core jersey biasa 2.41
org.glassfish.jersey.core Jersey-server 2.41
org.glassfish.jersey.inject jersey-hk2 2.41
org.hibernate.validator Hibernate Validator 6.2.5.Final
org.ini4j ini4j 0.5.4
org.javassist javassist 3.29.2-GA
org.jboss.logging jboss-logging 3.4.1.Final
org.jdbi jdbi 2.63.1
org.jetbrains Anotasi 17.0.0
org.jline Jline 3.27.1-jdk8
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.13 4.0.7
org.json4s json4s-core_2.13 4.0.7
org.json4s json4s-jackson-core_2.13 4.0.7
org.json4s json4s-jackson_2.13 4.0.7
org.json4s json4s-scalap_2.13 4.0.7
org.lz4 lz4-java 1.8.0-databricks-1
org.mlflow mlflow-spark_2.13 2.9.1
org.objenesis objenesis 3.3
org.postgresql postgresql 42.6.1
org.roaringbitmap RoaringBitmap 1.2.1
org.rocksdb rocksdbjni 9.8.4
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.13 2.13.16
org.scala-lang scala-library_2.13 2.13.16
org.scala-lang scala-reflect_2.13 2.13.16
org.scala-lang.modules scala-collection-compat_2.13 2.11.0
org.scala-lang.modules scala-java8-compat_2.13 0.9.1
org.scala-lang.modules scala-parallel-collections_2.13 1.2.0
org.scala-lang.modules scala-parser-combinators_2.13 2.4.0
org.scala-lang.modules scala-xml_2.13 2.3.0
org.scala-sbt antarmuka pengujian 1.0
org.scalacheck scalacheck_2.13 1.18.0
org.scalactic scalactic_2.13 3.2.19
org.scalanlp breeze-macros_2.13 2.1.0
org.scalanlp breeze_2.13 2.1.0
org.scalatest kompatibel dengan ScalaTest 3.2.19
org.scalatest scalatest-core_2.13 3.2.19
org.scalatest scalatest-diagrams_2.13 3.2.19
org.scalatest scalatest-featurespec_2.13 3.2.19
org.scalatest scalatest-flatspec_2.13 3.2.19
org.scalatest scalatest-freespec_2.13 3.2.19
org.scalatest scalatest-funspec_2.13 3.2.19
org.scalatest scalatest-funsuite_2.13 3.2.19
org.scalatest scalatest-matchers-core_2.13 3.2.19
org.scalatest scalatest-mustmatchers_2.13 3.2.19
org.scalatest scalatest-propspec_2.13 3.2.19
org.scalatest scalatest-refspec_2.13 3.2.19
org.scalatest scalatest-shouldmatchers_2.13 3.2.19
org.scalatest scalatest-wordspec_2.13 3.2.19
org.scalatest scalatest_2.13 3.2.19
org.slf4j jcl-over-slf4j 2.0.16
org.slf4j jul-to-slf4j 2.0.16
org.slf4j slf4j-api 2.0.16
org.slf4j slf4j-simple 1.7.25
org.threeten threeten-extra 1.8.0
org.tukaani xz 1.10
org.typelevel algebra_2.13 2.8.0
org.typelevel cats-kernel_2.13 2.8.0
org.typelevel spire-macros_2.13 0.18.0
org.typelevel spire-platform_2.13 0.18.0
org.typelevel spire-util_2.13 0.18.0
org.typelevel spire_2.13 0.18.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.10.3
org.yaml snakeyaml 2.0
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 2.5.0-linux-x86_64
Stax stax-api 1.0.1

Petunjuk / Saran

Untuk melihat catatan rilis untuk versi Databricks Runtime yang telah mencapai akhir masa dukungan (EoS), lihat Catatan rilis Databricks Runtime yang telah mencapai akhir masa dukungan. Versi EoS Databricks Runtime telah dihentikan dan mungkin tidak diperbarui.

  • Last updated on