Databricks Runtime 14.2 (EoS)

Nota

Dukungan untuk versi Databricks Runtime ini telah berakhir. Untuk tanggal akhir dukungan, lihat Riwayat akhir dukungan dan akhir masa pakai. Untuk semua versi Databricks Runtime yang didukung, lihat catatan rilis Versi dan kompatibilitas Databricks Runtime.

Catatan rilis berikut memberikan informasi tentang Databricks Runtime 14.2, didukung oleh Apache Spark 3.5.0.

Databricks merilis versi ini pada November 2023.

Fitur dan peningkatan baru

CACHE SELECT sekarang diabaikan

Perintah SQL CACHE SELECT akan diabaikan demi algoritma cache yang ditingkatkan. Lihat Mengoptimalkan performa dengan caching pada Azure Databricks.

Perilaku cache yang telah ditingkatkan

Penempatan DiskCache oleh penjadwal Spark sekarang memiliki penetapan partisi yang lebih cepat, penyeimbangan yang lebih baik selama penskalaan otomatis kluster, dan eksekusi kueri yang lebih konsisten.

Memperbaiki penanganan file yang rusak dalam perintah DML

Perintah DML DELETE, UPDATE, dan MERGE INTO tidak lagi mengikuti opsi baca ignoreCorruptFiles dan ignoreMissingFiles. Saat menemukan file yang tidak dapat dibaca dalam tabel, perintah ini sekarang gagal meskipun opsi ini ditentukan.

Anda sekarang dapat menggunakan fungsi from_avro, to_avro, from_protobuf, dan to_protobuf Python dengan Schema Registry di kluster bersama.

foreachBatch dan StreamingListener mendukung

Anda sekarang dapat menggunakan foreachBatch() API dan StreamingListener dengan Streaming Terstruktur di kluster bersama. Lihat Gunakan foreachBatch untuk menulis ke sink data arbitrer dan Pemantauan kueri streaming terstruktur pada Azure Databricks.

Konkurensi tingkat baris Umumnya Tersedia dan aktif secara default

Konkurensi tingkat baris mengurangi konflik antara operasi tulis bersamaan dengan mendeteksi perubahan di tingkat baris. Konkurensi tingkat baris hanya didukung pada tabel tanpa partisi, yang mencakup tabel dengan pengklusteran cair. Konkurensi tingkat baris diaktifkan secara default pada tabel Delta dengan vektor penghapusan diaktifkan. Lihat Konkurensi tingkat baris.

Delta Sharing: Penerima dapat melakukan kueri batch, CDF, dan streaming pada tabel yang dibagikan yang memiliki vektor penghapusan (Pratinjau Umum)

Penerima Delta Sharing sekarang dapat melakukan kueri batch, CDF, dan streaming pada tabel bersama yang menggunakan Vektor Penghapusan. Pada Databricks Runtime 14.1, mereka hanya dapat melakukan kueri batch. Lihat Menambahkan tabel dengan vektor penghapusan atau pemetaan kolom ke berbagi, Membaca tabel dengan vektor penghapusan atau pemetaan kolom diaktifkan, dan Membaca tabel dengan vektor penghapusan atau pemetaan kolom diaktifkan.

Kloning dangkal untuk tabel eksternal Unity Catalog (Pratinjau Umum)

Anda sekarang dapat menggunakan kloning dangkal dengan tabel eksternal Unity Catalog. Lihat Klon Dangkal Untuk Tabel Unity Catalog.

Algoritma penugasan penyimpanan sementara disk baru

Penjadwal Spark sekarang menggunakan algoritma penembolokan disk baru. Algoritma meningkatkan penggunaan disk dan penetapan partisi di seluruh simpul, dengan penugasan yang lebih cepat baik awal maupun setelah peristiwa penskalaan kluster. Pendistribusian cache yang lebih lengket meningkatkan konsistensi selama proses dan mengurangi perpindahan data selama operasi penyeimbangan ulang.

from_avro dengan konektor registri skema menambahkan dukungan untuk evolusi skema

Anda sekarang dapat mengaktifkan pipeline Anda untuk memulai ulang ketika catatan yang telah berkembang terdeteksi. Sebelumnya, jika evolusi skema terjadi dengan from_avro konektor, kolom baru akan mengembalikan null. Lihat Membaca dan menulis data streaming Avro.

Koleksi statistik multi-utas yang lebih cepat

Pengumpulan statistik menjadi hingga 10 kali lebih cepat pada kluster kecil saat menjalankan CONVERT TO DELTA atau mengkloning dari tabel Apache Iceberg dan Parquet. Lihat Mengonversi ke Tabel Delta Lake dan Clone Parquet dan Iceberg.

Filter pushdown di DeltaSource pada file Delta

Untuk pemanfaatan yang lebih baik, filter partisi pada kueri streaming tabel Delta sekarang didorong ke Delta sebelum pembatasan laju.

Dukungan untuk fungsi skalar yang ditentukan pengguna Scala pada kluster bersama (Pratinjau Umum)

Anda sekarang dapat menggunakan fungsi yang ditentukan pengguna skalar Scala pada kluster yang mendukung Katalog Unity yang dikonfigurasi dengan mode akses bersama. Lihat Fungsi skalar yang ditentukan pengguna - Scala.

Peningkatan pustaka

  • Pustaka Python yang ditingkatkan:
    • fastjsonschema dari 2.18.0 hingga 2.19.0
    • filelock dari 3.12.3 ke 3.12.4
    • googleapis-common-protos dari 1.60.0 hingga 1.61.0
  • Pustaka R yang ditingkatkan:
  • Pustaka Java yang ditingkatkan:

Apache Spark

Databricks Runtime 14.2 menyertakan Apache Spark 3.5.0. Rilis ini mencakup semua perbaikan dan peningkatan Spark yang disertakan dalam Databricks Runtime 14.1 (EoS), serta perbaikan bug tambahan dan peningkatan berikut yang dilakukan pada Spark:

  • [SPARK-45592] [DBRRM-624] Membatalkan "[SC-146977][sql] Masalah ketepatan di AQE dengan InMemoryTableScanExec"
  • [SPARK-45524] [DBRRM-625] Balikkan "[SC-146319][python][SQL] Dukungan awal untuk…"
  • [SPARK-45433] [DBRRM-621] Kembali "[SC-145163][sql] Perbaiki infer skema CSV/JSON...
  • [SPARK-45592] [SC-146977][sql] Masalah akurasi di AQE dengan InMemoryTableScanExec
  • [SPARK-45354] Kembalikan "[SC-143991][sql] Resolve functions bottom-up"
  • [SPARK-45680] [TEST-ONLY][sasp-2347][CONNECT] Memperbaiki pengujian
  • [SPARK-45680] [SAMBUNGKAN] Sesi rilis
  • [SPARK-43380] [SC-146726][es-897115][SQL] Perbaiki perlambatan dalam pembacaan Avro
  • [SPARK-45649] [SC-146742][sql] Menyatukan kerangka kerja persiapan untuk OffsetWindowFunctionFrame
  • [SPARK-40820] [SC-146727][python][SQL] Membuat StructType dari Json
  • [SPARK-45620] [SC-146225][python] Perbaiki API yang berhadapan dengan pengguna yang terkait dengan UDTF Python agar menggunakan camelCase
  • [SPARK-45727] [SC-146978][ss] Hapus peta yang tidak digunakan dalam simulasi penyebaran marka air
  • [SPARK-45723] [SC-146890][python][CONNECT] Metode katalog menghindari konversi Pandas
  • [SPARK-45574] [SC-146106][sql] Tambahkan :: sintaksis sebagai singkatan untuk konversi tipe data
  • [SPARK-45670] [SC-146725][core][3.5] SparkSubmit tidak mendukung --total-executor-cores saat menyebarkan di K8s
  • [SPARK-45661] [SC-146594][sql][PYTHON] Tambahkan toNullable di StructType, MapType, dan ArrayType
  • [SPARK-45524] [SC-146319][python][SQL] Dukungan awal untuk API baca sumber data Python
  • [SPARK-45542] [SC-145892][core] Ganti setSafeMode(HdfsConstants.SafeModeAction, boolean) dengan setSafeMode(SafeModeAction, boolean)
  • [SPARK-45652] [SC-146641][sql] SPJ: Menangani partisi input kosong setelah pemfilteran dinamis
  • [SPARK-45454] [SC-144846][sql] Atur pemilik default tabel ke current_user
  • [SPARK-45554] [SC-146875][python] Memperkenalkan parameter fleksibel ke assertSchemaEqual
  • [SPARK-45242] [SC-143410][sql] Gunakan ID DataFrame untuk memvalidasi CollectMetrics secara semantik
  • [SPARK-45674] [SC-146862][connect][PYTHON] Meningkatkan pesan kesalahan untuk atribut yang bergantung pada JVM di Spark Connect.
  • [SPARK-45646] [SC-146276][sql] Hapus variabel waktu hardcoding sebelum versi Hive 2.0
  • [SPARK-43380] [SC-146726][es-897115][SQL] Perbaiki perlambatan dalam pembacaan Avro
  • [SPARK-45545] [SC-146484][core] Gunakan SSLOptions dalam setiap pembuatan SparkTransportConf
  • [SPARK-45641] [SC-146260][ui] Tampilkan waktu mulai aplikasi di AllJobsPage
  • [SPARK-40154] [SC-146491][python][Docs] Tingkat penyimpanan yang benar di Dataframe.cache docstring
  • [SPARK-45626] [SC-146259][sql] Mengonversi _LEGACY_ERROR_TEMP_1055 menjadi REQUIRES_SINGLE_PART_NAMESPACE
  • [SPARK-45507] [SC-145900][sql] Perbaikan kebenaran untuk subkueri skalar berkorelasi berlapis dengan agregat COUNT
  • [SPARK-45619] [SC-146226][connect][PYTHON] Terapkan metrik yang diamati ke objek Observasi
  • [SPARK-45588] [SC-145909][protobuf][CONNECT][minor] Peningkatan Scaladoc untuk StreamingForeachBatchHelper
  • [SPARK-45616] [SC-146120][core] Hindari ParVector, yang tidak menyebarluaskan ThreadLocals atau SparkSession
  • [SPARK-45604] [SC-146105][sql] Tambahkan pengecekan LogicalType pada konversi INT64 ke DateTime dalam Parquet Vectorized Reader
  • [SPARK-44649] [SC-145891][sql] Runtime Filter mendukung memasukkan ekspresi sisi pembuatan yang setara
  • [SPARK-41674] [SC-128408][sql] Filter runtime harus mendukung sisi penyatuan acak berjenjang sebagai sisi pembuatan filter
  • [SPARK-45547] [SC-146228][ml] Validasi Vektor dengan fungsi bawaan
  • [SPARK-45558] [SC-145890][ss] Memperkenalkan file metadata untuk operator streaming yang bersifat stateful
  • [SPARK-45618] [SC-146252][core] Remove BaseErrorHandler
  • [SPARK-45638] [SC-146251][sql][Avro] Meningkatkan cakupan pengujian konversi desimal
  • [SPARK-44837] [SC-146020][sql] Ubah ALTER TABLE pesan kesalahan kolom ALTER PARTITION
  • [SPARK-45561] [SC-146264][sql] Tambahkan konversi yang tepat untuk TINYINT di MySQLDialect
  • [SPARK-45632] [SC-146255][sql] Cache tabel harus menghindari ColumnarToRow yang tidak perlu saat mengaktifkan AQE
  • [SPARK-45569] [SC-145932][sql] Beri nama pada kesalahan _LEGACY_ERROR_TEMP_2152
  • [SPARK-44784] [SC-141015][connect] Menjadikan pengujian SBT kedap.
  • [SPARK-45452] [SC-144836][sql] Tingkatkan InMemoryFileIndex untuk menggunakan FileSystem.listFiles API
  • [SPARK-44735] [SC-146186][sql] Tambahkan pesan peringatan saat menyisipkan kolom yang memiliki nama sama tetapi tidak sesuai dengan urutan baris.
  • [SPARK-45351] [SC-144791][core] Ubah spark.shuffle.service.db.backend nilai default ke ROCKSDB
  • [SPARK-45553] [SC-145906][ps] Menjadikan tidak lagi direkomendasikan assertPandasOnSparkEqual
  • [SPARK-45613] [SC-146022][core] Mengungkapkan DeterministicLevel sebagai bagian dari DeveloperApi
  • [SPARK-45549] [SC-145895][core] Hapus yang tidak digunakan numExistingExecutors di CoarseGrainedSchedulerBackend
  • [SPARK-45609] [SC-146030][connect] Sertakan SqlState dalam pesan proto SparkThrowable
  • [SPARK-45595] [SC-146037] memunculkan sqlstate pada pesan kesalahan
  • [SPARK-45628] [SC-146123][ml] Tingkatkan vector_to_array untuk .mllib.linalg.SparseVector
  • [SPARK-45009] [SC-145884][sql][FOLLOW UP] Matikan dekorlasi dalam kondisi bergabung untuk uji AQE InSubquery
  • [SPARK-45576] [SC-145883][core] Hapus log debug yang tidak perlu di ReloadingX509TrustManagerSuite
  • [SPARK-45485] [SC-145719][connect] Peningkatan agen pengguna: Gunakan variabel env SPARK_CONNECT_USER_AGENT dan sertakan atribut spesifik lingkungan
  • [SPARK-45508] [SC-145513][core] Tambahkan "–add-opens=java.base/jdk.internal.ref=ALL-UNNAMED" sehingga Platform dapat mengakses Cleaner di Java 9+
  • [SPARK-45595] Batalkan "[SC-146037] Mengekspos SQLSTATE dalam pesan kesalahan"
  • [SPARK-45595] [SC-146037] Mengekspos SQLSTATE dalam pesan kesalahan
  • [SPARK-45112] Kembalikan "[SC-143259][sql] Gunakan UnresolvedFunction ba...
  • [SPARK-45257] [SC-143411][core] Aktifkan spark.eventLog.compress secara default
  • [SPARK-45586] [SC-145899][sql] Kurangi latensi kompilator untuk rencana dengan pohon ekspresi besar
  • [SPARK-45517] [SC-145691][connect][14.x] Perluas lebih banyak konstruktor pengecualian untuk mendukung parameter kerangka kerja kesalahan
  • [SPARK-45581] [SC-145896] Jadikan SQLSTATE wajib.
  • [SPARK-45427] [SC-145590][core] Tambahkan pengaturan RPC SSL ke SSLOptions dan SparkTransportConf
  • [SPARK-45261] [SC-143357][core] Perbaikan EventLogFileWriters untuk menangani none sebagai codec
  • [SPARK-45582] [SC-145897][ss] Pastikan instans penyimpanan tidak digunakan setelah memanggil commit dalam agregasi streaming mode keluaran.
  • [SPARK-45562] [SC-145720][sc-144650][SQL] XML: Jadikan 'rowTag' sebagai opsi yang diperlukan
  • [SPARK-45392] [SC-144362][core][SQL][ss] Ganti Class.newInstance() dengan Class.getDeclaredConstructor().newInstance()
  • [SPARK-45433] [SC-145163][sql] Perbaiki inferensi skema CSV/JSON saat tanda waktu tidak cocok dengan format tanda waktu yang ditentukan
  • [SPARK-45458] [SC-145011][sql] Konversi IllegalArgumentException ke SparkIllegalArgumentException di bitwiseExpressions
  • [SPARK-45564] [SC-145735][sql] Sederhanakan 'DataFrameStatFunctions.bloomFilter' dengan ekspresi 'BloomFilterAggregate'
  • [SPARK-45566] [SC-145777][ps] Mendukung util pengujian seperti Pandas untuk Pandas API di Spark
  • [SPARK-45498] [SC-145509][core] Tindak Lanjut: Abaikan penyelesaian tugas dari tahap lama...
  • [SPARK-45483] [SC-145152][connect] Perbaiki grup fungsi di connect.functions
  • [SPARK-45577] [SC-145781][python] Memperbaiki UserDefinedPythonTableFunctionAnalyzeRunner untuk meneruskan nilai terlipat dari argumen bernama
  • [SPARK-45009] [SC-138223][tindak lanjut] Matikan dekorrelasi dalam kondisi join untuk AetherSQLQuerySuite
  • [SPARK-45415] [SC-145344] Izinkan penonaktifan selektif "fallocate" di statestore RocksDB
  • [SPARK-45500] [SC-145134][core][WEBUI] Tampilkan jumlah driver yang diselesaikan secara abnorrmal di MasterPage
  • [SPARK-44120] [SC-144349][python] Dukungan Python 3.12
  • [SPARK-45439] [SC-145589][sql][UI] Kurangi penggunaan memori LiveStageMetrics.accumIdsToMetricType
  • [SPARK-45565] [SC-145717][ui] JSON.stringify yang tidak perlu dan perulangan JSON.parse untuk daftar tugas pada detail tahap
  • [SPARK-45567] [SC-145718][connect] Hapus 'if' yang redundan di org.apache.spark.sql.connect.execution.ExecuteGrpcResponseSender#run
  • [SPARK-45112] [SC-143259][sql] Gunakan resolusi berbasis UnresolvedFunction dalam fungsi Himpunan Data SQL
  • [SPARK-45486] [SASP-2457][sc-145612][CONNECT] Buat permintaan add_artifact idempogen
  • [SPARK-44913] [SC-144326][sql] DS V2 mendukung push down V2 UDF yang memiliki metode ajaib
  • [SPARK-45538] [SC-145635][python][CONNECT]pyspark connect overwrite_partitions bug
  • [SPARK-45491] [SC-145622] Menambahkan SQLSTATES 2/2 yang hilang
  • [SPARK-45009] [SC-145620][sc-138223][SQL] Dekorelasi subkueri yang berkaitan dengan predikat dalam kondisi join
  • [SPARK-45377] [SC-144377][core] Handle InputStream di NettyLogger
  • [SPARK-45248] [SC-143759][core]Mengatur batas waktu untuk server spark ui
  • [SPARK-44594] [SC-145611][ss] Menghapus parameter metode redundan di konektor Kafka
  • [SPARK-45539] [SC-145621][ss] Tambahkan pernyataan dan log untuk menegaskan bahwa definisi watermark diperlukan dalam kueri streaming agregasi pada mode tambahan
  • [SPARK-44262] [SC-145639][sql] Tambahkan dropTable dan getInsertStatement ke JdbcDialect
  • [SPARK-45516] [SC-145480][connect] Sertakan QueryContext dalam pesan proto SparkThrowable
  • [SPARK-45310] [SC-145127][core] Status blok shuffle laporan harus mempertimbangkan layanan shuffle selama migrasi penonaktifan
  • [SPARK-45521] [SC-145487][ml] Hindari komputasi ulang nnz in VectorAssembler
  • [SPARK-45418] [SC-145485][sql][PYTHON][connect] Ubah alias kolom current_database() menjadi current_schema()
  • [SPARK-45116] [SC-145142][sql] Tambahkan beberapa komentar untuk param JdbcDialect createTable
  • [SPARK-45495] [SC-145529][inti] Mendukung profil sumber daya tugas tingkat tahap untuk kluster k8s saat alokasi dinamis dinonaktifkan
  • [SPARK-45487] [SC-145559] Memperbaiki SQLSTATEs dan kesalahan sementara
  • [SPARK-45505] [SC-145550][python] Refaktorisasi analyzeInPython untuk membuatnya dapat digunakan kembali
  • [SPARK-45132] [SC-145425][sql] Perbaikan IDENTIFIER untuk pemanggilan fungsi
  • [SPARK-45213] [SC-145020][sql] Tetapkan nama ke kesalahan _LEGACY_ERROR_TEMP_2151
  • [SPARK-45416] [SC-145126][connect] Pemeriksaan konsistensi hasil Arrow
  • [SPARK-45163] [SC-143386][sql] Gabungkan UNSUPPORTED_VIEW_OPERATION &UNSUPPORTED_TABLE_OPERATION & perbaiki beberapa masalah
  • [SPARK-45421] [SC-144814][sql] Menangkap AnalysisException pada InlineCTE
  • [SPARK-43664] [SC-145404][connect][PS] Ajukan pengecualian untuk ps.sql dengan objek Pandas-on-Spark di Spark Connect.
  • [SPARK-45402] [SC-145371][sql][PYTHON] Tambahkan API UDTF untuk metode 'eval' dan 'terminate' untuk menggunakan hasil 'analyze' sebelumnya
  • [SPARK-36112] [SC-67885] [SQL] Mendukung subkueri EXISTS dan IN yang berkorelasi menggunakan kerangka kerja DecorrelateInnerQuery
  • [SPARK-45383] [SC-144929][sql] Perbaiki pesan kesalahan untuk perjalanan waktu dengan tabel yang tidak ada
  • [SPARK-43254] [SC-143318][sql] Berikan nama pada kesalahan _LEGACY_ERROR_TEMP_2018
  • [SPARK-45204] [SC-145167][connect] Tambahkan ExecuteHolder opsional ke SparkConnectPlanner
  • [SPARK-45451] [SC-145144][sql] Membuat tingkat penyimpanan default cache himpunan data dapat dikonfigurasi
  • [SPARK-45192] [SC-143194][ui] Perbaiki parameter "lineInterpolate" yang tertunda untuk sisi graphviz
  • [SPARK-45467] [SC-145146][core] Ganti Proxy.getProxyClass() dengan Proxy.newProxyInstance().getClass
  • [SPARK-45397] [SC-145139][ml][CONNECT] Tambahkan transformator fitur penyusun array
  • [SPARK-44855] [SC-145226][connect] Penyesuaian kecil dalam melampirkan ExecuteGrpcResponseSender ke ExecuteResponseObserver
  • [SPARK-45398] [SC-144796][sql] Tambahkan ESCAPE dalam sql()Like ekspresi
  • [SPARK-45494] [SC-145129][core][PYTHON] Memperkenalkan fungsi util untuk membaca/menulis array byte untuk PythonWorkerUtils
  • [SPARK-45464] [SC-145125][core] Memperbaiki build distribusi jaringan yarn
  • [SPARK-45461] [SC-144851][core][SQL][mllib] Memperkenalkan pemeta untuk StorageLevel
  • [SPARK-45450] [SC-145009][python] Memperbaiki mengimpor menurut PEP8: pyspark.pandas dan pyspark (modul inti)
  • [SPARK-45475] [SC-145018][sql] Menggunakan DataFrame.foreachPartition alih-alih RDD.foreachPartition di JdbcUtils
  • [SPARK-45271] [SC-143778][sql] Gabungkan _LEGACY_ERROR_TEMP_1113 ke TABLE_OPERATION & hapus beberapa metode yang tidak digunakan di QueryCompilationErrors
  • [SPARK-45449] [SC-145013][sql] Masalah Pembatalan Cache dengan Tabel JDBC
  • [SPARK-45473] [SC-145017][sql] Perbaiki pesan kesalahan yang salah untuk RoundBase
  • [SPARK-43299] [SC-145022][ss][CONNECT] Mengonversi StreamingQueryException pada Klien Scala
  • [SPARK-45474] [SC-145014][core][WEBUI] Mendukung pemfilteran tingkat atas di MasterPage JSON API
  • [SPARK-45205] [SC-145012][sql] CommandResultExec untuk mengambil alih metode iterator untuk menghindari pemicu beberapa pekerjaan.
  • [SPARK-45472] [SC-145004][ss] RocksDB State Store Tidak Perlu Memeriksa ulang keberadaan jalur titik pemeriksaan
  • [SPARK-45470] [SC-145010][sql] Hindari nilai string tempel jenis kompresi ORC Hive
  • [SPARK-45448] [SC-144829][python] Memperbaiki impor sesuai dengan PEP8: pyspark.testing, pyspark.mllib, pyspark.resource, dan pyspark.streaming
  • [SPARK-45446] [SC-144828][python] Perbaiki pengaturan impor menurut PEP8: pyspark.errors dan pyspark.ml
  • [SPARK-45239] [SC-144832][connect] Kurangi ukuran default spark.connect.jvmStacktrace.maxSize
  • [SPARK-45436] [SC-144831][python][CONNECT] Metode dataFrame memeriksa sesi yang sama
  • [SPARK-45413] [SC-144847][core] Tambahkan peringatan untuk persiapan menghilangkan dukungan LevelDB
  • [SPARK-45462] [SC-144848][core][WEBUI] Tampilkan Duration di ApplicationPage
  • [SPARK-44527] [SC-144855][sql] Ganti ScalarSubquery dengan null jika maxRows-nya adalah 0
  • [SPARK-45401] [SC-144854][python] Tambahkan metode cleanup baru di antarmuka UDTF
  • [SPARK-43704] [SC-144849][connect][PS] Dukungan MultiIndex untuk to_series()
  • [SPARK-45424] [SC-144888][sql] Memperbaiki TimestampFormatter untuk mengembalikan hasil penguraian opsional ketika hanya ada pencocokan awalan.
  • [SPARK-45441] [SC-144833][python] Memperkenalkan lebih banyak fungsi util untuk PythonWorkerUtils
  • [SPARK-45412] [SC-144803][python][CONNECT] Validasi rencana dan sesi di DataFrame.__init__
  • [SPARK-45408] [SC-144810][core] Tambahkan pengaturan RPC SSL ke TransportConf
  • [SPARK-45432] [SC-144818][core] Hapus konstruktor Hadoop-2 LocatedFileStatus yang tidak digunakan lagi
  • [SPARK-45434] [SC-144819][ml][CONNECT] LogisticRegression memeriksa label pelatihan
  • [SPARK-45420] [SC-144808][sql][PYTHON][connect] Add DataType.fromDDL into PySpark
  • [SPARK-45406] [SC-144793][python][CONNECT] Hapus schema dari konstruktor DataFrame
  • [SPARK-45404] [SC-144799][core] Mendukung AWS_ENDPOINT_URL variabel env
  • [SPARK-43620] [SC-144792][connect][PS] Fix Pandas API tergantung pada fitur yang tidak didukung
  • [SPARK-45354] [SC-143991][sql] Atasi fungsi bottom-up
  • [SPARK-45394] [SASP-1480][sc-144712][PYTHON][connect] Tambahkan percobaan ulang untuk API artefak. Meningkatkan penanganan kesalahan (tindak lanjut ke [SPARK-45093]).
  • [SPARK-45120] [SC-142780][spark-45150][UI] Tingkatkan d3 dari v3 ke v7(v7.8.5) dan terapkan perubahan api di UI
  • [SPARK-44838] [SC-143983][sql] peningkatan raise_error
  • [SPARK-45312] [SC-143754][sql][UI] Dukungan beralih tampilan/sembunyikan svg rencana pada halaman eksekusi
  • [SPARK-45378] [SC-144448][core] Tambahkan convertToNettyForSsl ke ManagedBuffer
  • [SPARK-44762] [SC-144338][connect][CORE] Dokumentasi untuk SparkConnect.addJobTag dan Connect SparkSession.addTag
  • [SPARK-45383] Menangani RelationTimeTravel yang tidak terselesaikan dengan anggun
  • [SPARK-45347] [SC-144512][sql][CONNECT] Termasuk SparkThrowable dalam FetchErrorDetailsResponse
  • [SPARK-45012] [SC-141512][sql] CheckAnalysis harus menghasilkan rencana inline dalam AnalysisException
  • [SPARK-45359] [SC-144336][python][CONNECT] DataFrame.{columns, colRegex, explain} harus memunculkan pengecualian ketika rencana tidak valid
  • [SPARK-45227] [SC-144233][core] Perbaiki masalah keamanan utas yang halus dengan CoarseGrainedExecutorBackend
  • [SPARK-45266] [SC-144171][python] Atur ulang aturan penganalisis ResolveFunctions untuk menunda pembuatan gabungan lateral saat argumen tabel digunakan
  • [SPARK-45266] Membatalkan “[SC-144171][python] Melakukan refaktor pada aturan penganalisis ResolveFunctions untuk menunda pembuatan gabungan lateral saat argumen tabel digunakan”
  • [SPARK-45371] [SC-144389][connect] Perbaiki masalah bayangan di Klien Spark Connect Scala
  • [SPARK-45057] [SC-144214][core] Hindari memperoleh kunci baca ketika keepReadLock bernilai false
  • [SPARK-45385] [SC-144357][sql] Penghentian spark.sql.parser.escapedStringLiterals
  • [SPARK-45340] [SC-143917][sql] Hapus konfigurasi SQL spark.sql.hive.verifyPartitionPath
  • [SPARK-45266] [SC-144171][python] Atur ulang aturan penganalisis ResolveFunctions untuk menunda pembuatan gabungan lateral saat argumen tabel digunakan
  • [SPARK-45362] [SC-144198][python] Projek ekspresi PARTITION BY sebelum dikonsumsi metode 'eval' UDTF Python
  • [SPARK-45346] [SC-143925][sql] Inferensi skema Parquet harus menghormati pengaturan sensitivitas huruf saat menggabungkan skema.
  • [SPARK-45341] [SC-143933][core] Perbaiki tingkat judul di komentar KVStore. java agar sbt doc berhasil dijalankan dengan Java 17
  • [SPARK-45334] [SC-143914][sql] Hapus komentar yang menyesatkan di parquetSchemaConverter
  • [SPARK-45337] [SC-143932][core] Restruktur AbstractCommandBuilder#getScalaVersion untuk menghilangkan pemeriksaan terkait Scala 2.12
  • [SPARK-45329] [SC-143918][python][CONNECT] Metode DataFrame melewatkan konversi pandas
  • [SPARK-43662] [SC-143923][ps][CONNECT] Dukungan merge_asof di Spark Connect
  • [SPARK-44126] [SC-143751][core] Jumlah kegagalan migrasi acak tidak boleh meningkat ketika eksekutor target dinonaktifkan
  • [SPARK-44550] [SC-119768][sql] Aktifkan perbaikan kebenaran untuk null IN (empty list) di bawah ANSI
  • [SPARK-45316] [SC-143783][core][SQL] Tambahkan parameter ignoreCorruptFiles/ignoreMissingFiles baru ke dan HadoopRDDNewHadoopRDD
  • [SPARK-45093] [SC-143414][connect][PYTHON] Pelaporan kesalahan untuk kueri addArtifacts
  • [SPARK-44756] [SC-143787][core] Eksekutor macet ketika RetryingBlockTransferor gagal memulai coba lagi
  • [SPARK-45333] [SC-143768][core] Perbaiki satu kesalahan unit yang terkait dengan spark.eventLog.buffer.kb
  • [SPARK-45317] [SC-143750][sql][CONNECT] Menangani nama file null dalam jejak tumpukan pengecualian
  • [SPARK-45191] [SC-143407][sql] InMemoryTableScanExec simpleStringWithNodeId menambahkan informasi kolomar
  • [SPARK-45235] [SC-143314][connect][PYTHON] Mendukung parameter peta dan array dengan sql()
  • [SPARK-45138] [SC-143309][ss] Tentukan kelas kesalahan baru dan terapkan saat status titik pemeriksaan ke DFS gagal
  • [SPARK-45297] [SC-143644][sql] Hapus solusi untuk dateformatter yang ditambahkan di SPARK-31827
  • [SPARK-44345] [SC-143593][core] Turunkan tingkat log unknown shuffle map output ke WARN jika migrasi pengacakan diaktifkan
  • [SPARK-44463] [SC-143251][ss][CONNECT] Meningkatkan penanganan kesalahan untuk pekerja Python streaming di Connect
  • [SPARK-45207] [SC-143603][sql][CONNECT] Terapkan Pengayaan Kesalahan untuk Klien Scala
  • [SPARK-45240] [SC-143602][sql][CONNECT] Terapkan Pengayaan Kesalahan untuk Klien Python
  • [SPARK-45216] [SC-143288][sql] Perbaiki API Himpunan Data benih non-deterministik
  • [SPARK-45251] [SC-143419][connect] Tambahkan bidang client_type untuk FetchErrorDetails
  • [SPARK-45137] [SC-143001][connect] Mendukung parameter peta/array dalam parameterisasi sql()
  • [SPARK-45224] [SC-143257][python] Tambahkan contoh w/map dan array sebagai parameter sql()
  • [SPARK-44622] [SC-143205][sql][CONNECT] Mengimplementasikan FetchErrorDetails RPC
  • [SPARK-45178] [SC-136089] Fallback untuk menjalankan satu batch untuk Trigger.AvailableNow dengan sumber yang tidak didukung daripada menggunakan pembungkus
  • [SPARK-44823] [14.x][sc-142979][PYTHON] Memperbarui black ke 23.9.1 dan memperbaiki pemeriksaan yang keliru
  • [SPARK-45078] [SC-142954][sql] Fix array_insert ImplicitCastInputTypes tidak berfungsi
  • [SPARK-44579] [SC-138428][sql] Dukungan Interupsi Pada Pembatalan di SQLExecution
  • [SPARK-45252] [SC-143371][core] Menyiasati simbol lebih besar/lebih kecil dalam komentar agar sbt doc berjalan dengan sukses.
  • [SPARK-45189] [SC-142973][sql] Membuat UnresolvedRelation dari TableIdentifier harus menyertakan bidang katalog
  • [SPARK-45229] [SC-143254][core][UI] Tampilkan jumlah driver yang menunggu dalam status SUBMITTED di MasterPage
  • [SPARK-43453] Batalkan "[SC-143135][ps] Abaikan names dari MultiIndex ketika axis=1 untuk concat"

Dukungan driver Databricks ODBC/JDBC

Databricks mendukung driver ODBC/JDBC yang dirilis dalam 2 tahun terakhir. Silakan unduh driver dan peningkatan yang baru dirilis (unduh ODBC, unduh JDBC).

Lihat Pembaruan pemeliharaan Databricks Runtime 14.2.

Lingkungan sistem

  • Sistem Operasi: Ubuntu 22.04.3 LTS
  • Java: Zulu 8.72.0.17-CA-linux64
  • Scala: 2.12.15
  • Python: 3.10.12
  • R: 4.3.1
  • Danau Delta: 3.0.0

Perpustakaan Python terinstal

Pustaka Versi Pustaka Versi Pustaka Versi
anyio 3.5.0 argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0
asttoken 2.0.5 atribut 22.1.0 panggilan balik 0.2.0
beautifulsoup4 4.11.1 hitam 22.6.0 pemutih 4.1.0
blinker 1.4 boto3 1.24.28 botocore 1.27.96
sertifikat 2022.12.7 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 klik 8.0.4 komunikasi 0.1.2
konturpy 1.0.5 kriptografi 39.0.1 cycler 0.11.0
Cython 0.29.32 databricks-sdk 0.1.6 dbus-python 1.2.18
debugpy 1.6.7 decorator 5.1.1 defusedxml 0.7.1
distlib 0.3.7 docstring ke markdown 0.11 titik masuk 0,4
menjalankan 0.8.3 ikhtisar-faset 1.1.1 fastjsonschema 2.19.0
filelock 3.12.4 fonttools 4.25.0 googleapis-common-protos 1.61.0
grpcio 1.48.2 grpcio-status 1.48.1 httplib2 0.20.2
idna 3.4 importlib-metadata 4.6.4 ipykernel 6.25.0
ipython 8.14.0 ipython-genutils 0.2.0 ipywidgets 7.7.2
jedi 0.18.1 Jeepney 0.7.1 Jinja2 3.1.2
jmespath 0.10.0 joblib 1.2.0 jsonschema 4.17.3
jupyter-client 7.3.4 jupyter-server 1.23.4 jupyter_core 5.2.0
jupyterlab-pygments 0.1.2 jupyterlab-widgets 1.0.0 gantungan kunci digital 23.5.0
kiwisolver 1.4.4 launchpadlib 1.10.16 lazr.restfulclient 0.14.4
lazr.uri 1.0.6 lxml 4.9.1 MarkupSafe 2.1.1
matplotlib 3.7.0 matplotlib-inline 0.1.6 Mccabe 0.7.0
mistune 0.8.4 more-itertools 8.10.0 ekstensi mypy 0.4.3
nbclassic 0.5.2 nbclient 0.5.13 nbconvert 6.5.4
nbformat 5.7.0 nest-asyncio 1.5.6 nodeenv 1.8.0
buku catatan 6.5.2 notebook_shim 0.2.2 numpy 1.23.5
oauthlib 3.2.0 pengemasan 22.0 pandas 1.5.3
pandocfilters 1.5.0 parso 0.8.3 pathspec 0.10.3
kambing hitam 0.5.3 pexpect 4.8.0 pickleshare 0.7.5
Pillow 9.4.0 pip 22.3.1 platformdir 2.5.2
plotly 5.9.0 pluggy 1.0.0 prometheus-client 0.14.1
prompt-toolkit 3.0.36 protobuf 4.24.0 psutil 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 pure-eval 0.2.2
pyarrow 8.0.0 pyarrow-hotfix 0,4 pycparser 2.21
pydantic 1.10.6 pyflakes 3.1.0 Pygments 2.11.2
PyGObject 3.42.1 PyJWT 2.3.0 pyodbc 4.0.32
pyparsing 3.0.9 pyright 1.1.294 pyrsistent 0.18.0
python-dateutil 2.8.2 python-lsp-jsonrpc 1.1.1 python-lsp-server 1.8.0
pytoolconfig 1.2.5 pytz 2022.7 pyzmq 23.2.0
permintaan 2.28.1 tali 1.7.0 s3transfer 0.6.2
scikit-learn 1.1.1 scipy 1.10.0 seaborn 0.12.2
SecretStorage 3.3.1 Send2Trash 1.8.0 setuptools 65.6.3
six 1.16.0 sniffio 1.2.0 soupsieve 2.3.2.post1
ssh-import-id 5.11 stack-data 0.2.0 statsmodels 0.13.5
tenacity 8.1.0 selesai 0.17.1 threadpoolctl 2.2.0
tinycss2 1.2.1 tokenize-rt 4.2.1 tomli 2.0.1
tornado 6.1 traitlets=5.0.5 5.7.1 typing_extensions 4.4.0
ujson 5.4.0 pembaruan tanpa pengawasan 0.1 urllib3 1.26.14
virtualenv 20.16.7 wadllib 1.3.6 wcwidth 0.2.5
webencodings=0.5.1 0.5.1 websocket-client 0.58.0 whatthepatch 1.0.2
wheel 0.38.4 widgetsnbextension 3.6.1 yapf 0.33.0
zipp 1.0.0

Perpustakaan R yang terinstal

Pustaka R diinstal dari snapshot CRAN dari Posit Package Manager pada 2023-02-10.

Pustaka Versi Pustaka Versi Pustaka Versi
anak panah 12.0.1 askpass 1.1 assertthat 0.2.1
backports 1.4.1 dasar 4.3.1 base64enc 0.1-3
bit 4.0.5 bit64 4.0.5 blob 1.2.4
memulai ulang 1.3-28 brew 1,0-8 brio 1.1.3
sapu 1.0.5 bslib 0.5.0 cachem 1.0.8
callr 3.7.3 caret 6.0-94 cellranger 1.1.0
chron 2.3-61 kelas 7.3-22 cli 3.6.1
clipr 0.8.0 Jam 0.7.0 kluster 2.1.4
codetools 0.2-19 ruang warna 2.1-0 commonmark 1.9.0
pengompilasi 4.3.1 konfigurasi 0.3.1 Berkonflik 1.2.0
cpp11 0.4.4 crayon 1.5.2 kredensial 1.3.2
curl 5.0.1 data.table 1.14.8 kumpulan data 4.3.1
DBI 1.1.3 dbplyr 2.3.3 deskripsi 1.4.2
devtools 2.4.5 diagram 1.6.5 diffobj 0.3.5
digest 0.6.33 lampu sorot bawah 0.4.3 dplyr 1.1.2
dtplyr 1.3.1 e1071 1.7-13 elipsis 0.3.2
evaluate 0,21% penggemar 1.0.4 warna 2.1.1
fastmap 1.1.1 fontawesome 0.5.1 forcats 1.0.0
foreach 1.5.2 asing 0.8-82 membuat 0.2.0
fs 1.6.2 masa depan 1.33.0 future.apply 1.11.0
gargle 1.5.1 tipe generik 0.1.3 Gert 1.9.2
ggplot2 3.4.2 GH 1.4.0 gitcreds 0.1.2
glmnet 4.1-7 variabel global 0.16.2 lem 1.6.2
googledrive 2.1.1 googlesheets4 1.1.1 Gower 1.0.1
grafis 4.3.1 grDevices 4.3.1 kisi 4.3.1
gridExtra 2.3 gsubfn 0,7 gtable 0.3.3
helm keselamatan 1.3.0 tempat perlindungan 2.5.3 highr 0.10
hms 1.1.3 htmltools 0.5.5 htmlwidgets 1.6.2
httpuv 1.6.11 httr 1.4.6 httr2 0.2.3
ids 1.0.1 ini 0.3.1 ipred 0.9-14
isoband 0.2.7 iterator 1.0.14 jquerylib 0.1.4
jsonlite 1.8.7 KernSmooth 2.23-21 knitr 1,43
pelabelan 0.4.2 nanti 1.3.1 lattice 0.21-8
lava 1.7.2.1 siklus hidup 1.0.3 listenv 0.9.0
lubridate 1.9.2 magrittr 2.0.3 markdown 1.7
MASS 7.3-60 Matrix 1.5-4.1 memoise 2.0.1
metode 4.3.1 mgcv 1.8-42 mime 0.12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 modelr 0.1.11
munsell 0.5.0 nlme 3.1-162 nnet 7.3-19
numDeriv 2016.8-1.1 openssl 2.0.6 paralel 4.3.1
secara paralel 1.36.0 pilar 1.9.0 pkgbuild 1.4.2
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.2.1
plogr 0.2.0 plyr 1.8.8 pujian 1.0.0
prettyunits 1.1.1 pROC 1.18.4 processx 3.8.2
prodlim 2023.03.31 profvis 0.3.8 kemajuan 1.2.2
progressr 0.13.0 janji 1.2.0.1 proto 1.0.0
proksi 0.4-27 ps 1.7.5 purrr 1.0.1
r2d3 0.2.6 R6 2.5.1 ragg 1.2.5
randomForest 4.7-1.1 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.11 RcppEigen 0.3.3.9.3
readr 2.1.4 readxl 1.4.3 recipes 1.0.6
pertandingan ulang 1.0.1 rematch2 2.1.2 pengendali jarak jauh 2.4.2
reprex 2.0.2 reshape2 1.4.4 rlang 1.1.1
rmarkdown 2.23 RODBC 1.3-20 roxygen2 7.2.3
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-11
RSQLite 2.3.1 rstudioapi 0.15.0 rversions 2.1.2
rvest 1.0.3 sass 0.4.6 timbangan 1.2.1
selectr 0.4-2 informasi sesi 1.2.2 bentuk 1.4.6
mengkilap 1.7.4.1 sourcetools 0.1.7-1 sparklyr 1.8.1
spasial 7.3-15 splines 4.3.1 sqldf 0.4-11
SQUAREM 2021.1 statistik 4.3.1 stats4 4.3.1
stringi 1.7.12 stringr 1.5.0 kelangsungan hidup 3.5-5
sys 3.4.2 systemfonts 1.0.4 tcltk 4.3.1
testthat 3.1.10 pembentukan teks 0.3.6 tibble 3.2.1
tidyr 1.3.0 tidyselect 1.2.0 tidyverse 2.0.0
perubahan waktu 0.2.0 timeDate 4022.108 tinytex 0,45
perangkat 4.3.1 tzdb 0.4.0 urlchecker 1.0.1
gunakanini 2.2.2 utf8 1.2.3 utils 4.3.1
uuid 1.1-0 vctrs 0.6.3 viridisLite 0.4.2
vroom 1.6.3 waldo 0.5.1 serabut 0.4.1
withr 2.5.0 xfun 0,39 xml2 1.3.5
xopen 1.0.0 xtable 1.8-4 yaml 2.3.7
zip 2.3.0

Pustaka Java dan Scala terinstal (versi kluster Scala 2.12)

ID Grup ID Artefak Versi
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.390
com.amazonaws aws-java-sdk-cloudformation 1.12.390
com.amazonaws aws-java-sdk-cloudfront 1.12.390
com.amazonaws aws-java-sdk-cloudhsm 1.12.390
com.amazonaws aws-java-sdk-cloudsearch 1.12.390
com.amazonaws aws-java-sdk-cloudtrail 1.12.390
com.amazonaws aws-java-sdk-cloudwatch 1.12.390
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.390
com.amazonaws aws-java-sdk-codedeploy 1.12.390
com.amazonaws aws-java-sdk-cognitoidentity 1.12.390
com.amazonaws aws-java-sdk-cognitosync 1.12.390
com.amazonaws aws-java-sdk-config 1.12.390
com.amazonaws aws-java-sdk-core 1.12.390
com.amazonaws aws-java-sdk-datapipeline 1.12.390
com.amazonaws aws-java-sdk-directconnect 1.12.390
com.amazonaws aws-java-sdk-directory 1.12.390
com.amazonaws aws-java-sdk-dynamodb 1.12.390
com.amazonaws aws-java-sdk-ec2 1.12.390
com.amazonaws aws-java-sdk-ecs 1.12.390
com.amazonaws aws-java-sdk-efs 1.12.390
com.amazonaws aws-java-sdk-elasticache 1.12.390
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.390
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.390
com.amazonaws aws-java-sdk-elastictranscoder 1.12.390
com.amazonaws aws-java-sdk-emr 1.12.390
com.amazonaws aws-java-sdk-glacier 1.12.390
com.amazonaws aws-java-sdk-glue 1.12.390
com.amazonaws aws-java-sdk-iam 1.12.390
com.amazonaws aws-java-sdk-importexport 1.12.390
com.amazonaws aws-java-sdk-kinesis 1.12.390
com.amazonaws aws-java-sdk-kms 1.12.390
com.amazonaws aws-java-sdk-lambda 1.12.390
com.amazonaws aws-java-sdk-logs 1.12.390
com.amazonaws aws-java-sdk-machinelearning 1.12.390
com.amazonaws aws-java-sdk-opsworks 1.12.390
com.amazonaws aws-java-sdk-rds 1.12.390
com.amazonaws aws-java-sdk-redshift 1.12.390
com.amazonaws aws-java-sdk-route53 1.12.390
com.amazonaws aws-java-sdk-s3 1.12.390
com.amazonaws aws-java-sdk-ses 1.12.390
com.amazonaws aws-java-sdk-simpledb 1.12.390
com.amazonaws aws-java-sdk-simpleworkflow 1.12.390
com.amazonaws aws-java-sdk-sns 1.12.390
com.amazonaws aws-java-sdk-sqs 1.12.390
com.amazonaws aws-java-sdk-ssm 1.12.390
com.amazonaws aws-java-sdk-storagegateway 1.12.390
com.amazonaws aws-java-sdk-sts 1.12.390
com.amazonaws aws-java-sdk-support 1.12.390
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.390
com.amazonaws jmespath-java 1.12.390
com.clearspring.analytics aliran 2.9.6
com.databricks Rserve 1.8-3
com.databricks databricks-sdk-java 0.7.0
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo-shaded 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml teman sekelas 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.15.2
com.fasterxml.jackson.core jackson-core 2.15.2
com.fasterxml.jackson.core jackson-databind 2.15.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.15.1
com.fasterxml.jackson.module jackson-module-paranamer 2.15.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.15.2
com.github.ben-manes.caffeine caffeine 2.9.3
com.github.fommil jniloader 1.1
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java 1.1-elemen asli
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java 1.1-elemen asli
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1-elemen asli
com.github.fommil.netlib netlib-native_system-linux-x86_64 1.1-elemen asli
com.github.luben zstd-jni 1.5.5-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.10.1
com.google.crypto.tink tink 1.9.0
com.google.errorprone penandaan_rentan_kesalahan 2.10.0
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.helger profiler 1.1.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 11.2.2.jre8
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe konfigurasi 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.3
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1.16.0
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.13.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 3.0.3
dev.ludovic.netlib blas 3.0.3
dev.ludovic.netlib lapack 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift kompresor udara 0.25
io.delta delta-sharing-client_2.12 1.0.2
io.dropwizard.metrics metrik-anotasi 4.2.19
io.dropwizard.metrics metrics-core 4.2.19
io.dropwizard.metrics metrics-graphite 4.2.19
io.dropwizard.metrics metrik-cek kesehatan 4.2.19
io.dropwizard.metrics metrics-jetty9 4.2.19
io.dropwizard.metrics metrics-jmx 4.2.19
io.dropwizard.metrics metrik-json 4.2.19
io.dropwizard.metrics metrik-jvm 4.2.19
io.dropwizard.metrics metrik-servlet 4.2.19
io.netty netty-all 4.1.96.Final
io.netty netty-buffer 4.1.96.Final
io.netty netty-codec 4.1.96.Final
io.netty netty-codec-http 4.1.96.Final
io.netty netty-codec-http2 4.1.96.Final
io.netty netty-codec-socks 4.1.96.Final
io.netty netty-common 4.1.96.Final
io.netty netty-handler 4.1.96.Final
io.netty netty-handler-proxy 4.1.96.Final
io.netty netty-resolver 4.1.96.Final
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-windows-x86_64
io.netty netty-tcnative-kelas 2.0.61.Final
io.netty netty-transport 4.1.96.Final
io.netty netty-transport-classes-epoll 4.1.96.Final
io.netty netty-transport-classes-kqueue 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.96.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.1.96.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx pengumpul 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktivasi 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
net.java.dev.jna jna 5.8.0
net.razorvine pickle 1.3
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.16
org.apache.ant ant-jsch 1.9.16
org.apache.ant ant-launcher 1.9.16
org.apache.arrow arrow-format 12.0.1
org.apache.arrow arrow-memory-core 12.0.1
org.apache.arrow arrow-memory-netty 12.0.1
org.apache.arrow arrow-vector 12.0.1
org.apache.avro avro 1.11.2
org.apache.avro avro-ipc 1.11.2
org.apache.avro avro-mapred 1.11.2
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.23.0
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.curator klien-koordinator 2.13.0
org.apache.curator curator-framework 2.13.0
org.apache.curator curator-recipes 2.13.0
org.apache.datasketches datasketches-java 3.1.0
org.apache.datasketches datasketches-memory 2.0.0
org.apache.derby derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.6
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy tanaman ivy 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.20.0
org.apache.logging.log4j log4j-api 2.20.0
org.apache.logging.log4j log4j-core 2.20.0
org.apache.logging.log4j log4j-slf4j2-impl 2.20.0
org.apache.mesos mesos 1.11.0-shaded-protobuf
org.apache.orc orc-core 1.9.1-shaded-protobuf
org.apache.orc orc-mapreduce 1.9.1-shaded-protobuf
org.apache.orc orc-shims 1.9.1
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.ws.xmlschema xmlschema-core 2.3.0
org.apache.xbean xbean-asm9-shaded 4.23
org.apache.yetus anotasi-audiens 0.13.0
org.apache.zookeeper Zookeeper 3.6.3
org.apache.zookeeper zookeeper-jute 3.6.3
org.checkerframework checker-qual 3.31.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.52.v20230823
org.eclipse.jetty jetty-continuation 9.4.52.v20230823
org.eclipse.jetty jetty-http 9.4.52.v20230823
org.eclipse.jetty jetty-io 9.4.52.v20230823
org.eclipse.jetty jetty-jndi 9.4.52.v20230823
org.eclipse.jetty jetty-plus 9.4.52.v20230823
org.eclipse.jetty jetty-proxy 9.4.52.v20230823
org.eclipse.jetty jetty-security 9.4.52.v20230823
org.eclipse.jetty jetty-server 9.4.52.v20230823
org.eclipse.jetty jetty-servlet 9.4.52.v20230823
org.eclipse.jetty jetty-servlets 9.4.52.v20230823
org.eclipse.jetty jetty-util 9.4.52.v20230823
org.eclipse.jetty jetty-util-ajax 9.4.52.v20230823
org.eclipse.jetty jetty-webapp 9.4.52.v20230823
org.eclipse.jetty jetty-xml 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-api 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-client 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-common 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-server 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-servlet 9.4.52.v20230823
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2,40
org.glassfish.jersey.containers jersey-container-servlet-core 2,40
org.glassfish.jersey.core jersey-client 2,40
org.glassfish.jersey.core jersey-common 2,40
org.glassfish.jersey.core jersey-server 2,40
org.glassfish.jersey.inject jersey-hk2 2,40
org.hibernate.validator hibernate-validator 6.1.7.Final
org.ini4j ini4j 0.5.4
org.javassist javassist 3.29.2-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains anotasi 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mariadb.jdbc mariadb-java-client 2.7.9
org.mlflow mlflow-spark 2.2.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.6.0
org.roaringbitmap RoaringBitmap 0.9.45
org.roaringbitmap ganjal 0.9.45
org.rocksdb rocksdbjni 8.3.2
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.15
org.scala-lang scala-library_2.12 2.12.15
org.scala-lang scala-reflect_2.12 2.12.15
org.scala-lang.modules scala-collection-compat_2.12 2.9.0
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt antarmuka-uji 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.2.15
org.scalanlp breeze-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest kompatibel dengan Scalatest 3.2.15
org.scalatest scalatest-core_2.12 3.2.15
org.scalatest scalatest-diagrams_2.12 3.2.15
org.scalatest scalatest-featurespec_2.12 3.2.15
org.scalatest scalatest-flatspec_2.12 3.2.15
org.scalatest scalatest-freespec_2.12 3.2.15
org.scalatest scalatest-funspec_2.12 3.2.15
org.scalatest scalatest-funsuite_2.12 3.2.15
org.scalatest scalatest-matchers-core_2.12 3.2.15
org.scalatest scalatest-mustmatchers_2.12 3.2.15
org.scalatest scalatest-propspec_2.12 3.2.15
org.scalatest scalatest-refspec_2.12 3.2.15
org.scalatest scalatest-shouldmatchers_2.12 3.2.15
org.scalatest scalatest-wordspec_2.12 3.2.15
org.scalatest scalatest_2.12 3.2.15
org.slf4j jcl-over-slf4j 2.0.7
org.slf4j jul-to-slf4j 2.0.7
org.slf4j slf4j-api 2.0.7
org.threeten threeten-extra 1.7.1
org.tukaani xz 1.9
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.10.3
org.yaml snakeyaml 2.0
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1
  • Last updated on