Databricks Runtime 13.0 (EoS)
Feljegyzés
A Databricks Runtime-verzió támogatása véget ért. A támogatás megszűnésének dátumáról lásd a támogatási előzményeket. Az összes támogatott Databricks Runtime-verziót lásd : Databricks Runtime release notes versions and compatibility.
Az alábbi kibocsátási megjegyzések az Apache Spark 3.4.0 által működtetett Databricks Runtime 13.0-ról nyújtanak információkat.
A Databricks 2023 áprilisában adta ki ezt a verziót.
Új funkciók és fejlesztések
- A H3-kifejezések mostantól támogatják a lineáris földrajzi helyeket
- Ganglia helyett fürtmetrikák
- Megjelent a Spark 3.4.0
- A Photon hibát ad vissza, ha egy fájl módosul a lekérdezések tervezése és végrehajtása között
- A prediktív I/O új funkciói
- Kiterjesztett támogatás a prediktív I/O-funkciókhoz
- Csatlakozás másik Databricks-munkaterülethez a Databricks-összekötő használatával
- További Kafka-lehetőségek strukturált streameléshez megosztott fürttel a Unity Katalógusban
- Delta-táblamódosítások kihagyása strukturált streameléssel
- CREATE TABLE LIKE funkció Delta-táblákhoz
- Új metaadatoszlopmezők, amely a fájlblokkok kezdetét és hosszát jelöli
- Új H3 térinformatikai függvények
- Új beépített SQL-függvények
%sql
Python-jegyzetfüzetekben%pip
nem indítja újra automatikusan a Pythont- A fürt hatókörű Python-kódtárak telepítése nem gyökérfelhasználó használatával történik
A H3-kifejezések mostantól támogatják a lineáris földrajzi helyeket
A h3_coverash3
függvények mostantól h3_coverash3string
támogatják a lineáris (linestring
és multilinestring
) földrajzi helyeket. A függvények minimálisan lefedik a H3 cellákat a megadott felbontásban. Lásd: h3_coverash3 és h3_coverash3string.
Ganglia helyett fürtmetrikák
A Databricks Runtime 13- és újabb verziói esetében a Ganglia-metrikákat az Azure Databricks-fürtmetrikák váltják fel. A Databricks Runtime 12-s és újabb verziói esetében továbbra is használhatJa a Ganglia-metrikákat. Ha olyan munkafolyamata van, amely a Ganglia-metrikáktól függ, és nem elégedett a fürtmetrikákkal, forduljon az Azure Databricks-fiók csapatához. Lásd: Számítási metrikák megtekintése.
Megjelent a Spark 3.4.0
Az Apache Spark 3.4.0 már általánosan elérhető. Lásd a Spark 3.4.0-s kiadását.
A Photon hibát ad vissza, ha egy fájl módosul a lekérdezések tervezése és végrehajtása között
A photon-lekérdezések hibaüzenetet adnak vissza, ha egy fájl frissül a lekérdezések tervezése és végrehajtása között. A módosítás előtt a Photon akkor is beolvassa a fájlokat, ha a módosítás ideje megváltozik a lekérdezések tervezése és végrehajtása között, ami kiszámíthatatlan eredményekhez vezethet.
A prediktív I/O új funkciói
A Photon mostantól támogatja a tolókereteket a SOROK és a RANGE módokhoz is a .{ROWS | RANGE} BETWEEN offset_start { PRECEDING | FOLLOWING } AND offset_stop { PRECEDING | FOLLOWING }
Kiterjesztett támogatás a prediktív I/O-funkciókhoz
A Photon kiterjesztett támogatása CSV, AVRO, DataFrame gyorsítótárazási adatforrásokhoz, ha a séma kizárólag skaláris oszlopokat tartalmaz. A támogatás a beágyazott típusok, például térképek, szerkezetek és tömbök esetében is kiterjeszthető.
Csatlakozás másik Databricks-munkaterülethez a Databricks-összekötő használatával
Az Azure Databricks-összekötő lehetővé teszi, hogy egy másik munkaterületen konfigurált számítási erőforrásokhoz csatlakozzon, és eredményeket ad vissza az aktuális Azure Databricks-munkaterületre. Az Azure Databricks JDBC-illesztő mostantól a Databricks Runtime része. Lásd: A Databricks-összekötő használata egy másik Databricks-munkaterülethez való csatlakozáshoz.
További Kafka-lehetőségek strukturált streameléshez megosztott fürttel a Unity Katalógusban
Most már használhatja a beállításokat kakfa.ssl.truststore.location
, és kafak.ssl.keystore.location
tárolhatja a Kafka-tanúsítványokat a Unity Catalog által felügyelt külső helyeken, amikor megosztott hozzáférési fürtökön használja a strukturált streamelést. A DBFS-gyökérben nem használhat helyeket.
Delta-táblamódosítások kihagyása strukturált streameléssel
Mostantól skipChangeCommits
figyelmen kívül hagyhatja az adatmódosítási véglegesítéseket a Delta táblában a , MERGE
és DELETE
a műveletek esetébenUPDATE
. Ez lecseréli ignoreChanges
az elavultat. Lásd: Frissítések és törlések figyelmen kívül hagyása.
CREATE TABLE LIKE funkció Delta-táblákhoz
CREATE TABLE LIKE
Mostantól támogatott a Delta-táblák használata.
Új metaadatoszlopmezők, amely a fájlblokkok kezdetét és hosszát jelöli
Mostantól a következő metaadat-információkat szerezheti be a bemeneti fájlokhoz az _metadata
oszlopban: file_block_start
és file_block_length
. További információt a Fájl metaadatai oszlopban talál.
Új H3 térinformatikai függvények
Az új h3_coverash3 és h3_coverash3string kifejezések térinformatikai feldolgozáshoz érhetők el, ha a Photon engedélyezve van. Lásd: H3 térinformatikai függvények.
Új beépített SQL-függvények
A következő függvények lettek hozzáadva:
- array_insert(tömb, index, elem) A pozícióba
index
beszúrt kibontottarray
helyetelem
adja vissza. - luhn_check(numStr) A
true
numStr
Luhn-algoritmus ellenőrzésének sikerességétől számít.
%sql
Python-jegyzetfüzetekben
A Python-jegyzetfüzetekben az összes nem üres %sql
találat elérhető _sqldf
az IPython kimeneti gyorsítótárazási rendszerével. Ez leegyszerűsíti a DataFrame-eredmény Pythonban való használatát. Ez egy viselkedésbeli változás a korábbi DBR-verziókhoz hasonlóan, _sqldf
nem mindig lett újra hozzárendelve.
_sqldf
ha a cellát párhuzamos SQL-cellavégrehajtással hajtották végre, a rendszer nem rendeli %sql
újra a cellaeredményhez.
%pip
nem indítja újra automatikusan a Pythont
Miután parancsokat futtatott %pip
a virtualEnv-t módosító Python-jegyzetfüzetekben, a Databricks többé nem indítja újra automatikusan a Python-folyamatot. A Python-folyamat újraindításához hívja meg a következőt dbutils.library.restartPython()
: Ezzel a módosítással a Databricks parancsai a Jupyter Notebookokhoz hasonlóan viselkednek, %pip
és konzisztensek !pip
és %sh pip
parancsok. A Databricks %pip
!pip
%sh pip
ahelyett vagy .
A fürt hatókörű Python-kódtárak telepítése nem gyökérfelhasználó használatával történik
A kódtárak most már egy nem gyökérszintű felhasználóval vannak telepítve, aki felelős a tártelepítésekért. Ha init szkriptekben szeretné konfigurálni a pip telepítési viselkedését, használja a [globális szintű fájlt https://pip.pypa.io/en/stable/topics/configuration/#configuration-files].
Hibajavítások
- A
%sh
parancsokban a következő javítások történtek:- A nem UTF-8 karaktert tartalmazó kimenet mostantól támogatott.
- A parancs megszakítása után az alfolyamatok megszakadnak.
Könyvtárfrissítések
- Frissített Python-kódtárak:
- asttokens 2.0.5 és 2.2.1 között
- fekete 22.3.0-tól 22.6.0-ra
- boto3 1.21.32-től 1.24.28-ra
- botocore 1.24.32-től 1.27.28-ra
- minősítés 2021.10.8-tól 2022.9.14-ig
- cffi 1.15.0 és 1.15.1 között
- titkosítás 3.4.8–37.0.1 között
- Cython 0.29.28-tól 0.29.32-ig
- dbus-python 1.2.16-tól 1.2.18-ra
- docstring-to-markdown 0,11 és 0,12 között
- végrehajtás a 0.8.3-tól az 1.2.0-sig
- aspektusok áttekintése 1.0.0 és 1.0.2 között
- fastjsonschema 2.16.2 és 2.16.3 között
- filelock 3.9.0 és 3.10.7 között
- ipykernel 6.15.3 és 6.17.1 között
- ipython 8.5.0-tól 8.10.0-ig
- joblib 1.1.1 és 1.2.0 között
- jsonschema 4.4.0 és 4.16.0 között
- jupyter-client 6.1.12 és 7.3.4 között
- kiwisolver 1.3.2 és 1.4.2 között
- matplotlib 3.5.1 és 3.5.2 között
- matplotlib-inline 0.1.2 és 0.1.6 között
- nbformat 5.3.0-ról 5.5.0-ra
- jegyzetfüzet 6.4.8-tól 6.4.12-ig
- pandas 1.4.2 és 1.4.4 között
- Párna 9.0.1-től 9.2.0-ra
- pip 21.2.4 és 22.2.2 között
- platformdirs 2.6.2 és 2.5.2 között
- ábrázolás 5.6.0-tól 5.9.0-ra
- prometheus-client 0.13.1 és 0.14.1 között
- prompt-toolkit 3.0.20-tól 3.0.36-osig
- psutil 5.8.0 és 5.9.0 között
- pyflakes 2.5.0 és 3.0.1 között
- PyGObject 3.36.0 és 3.42.1 között
- pyparsing from 3.0.4 to 3.0.9
- pyright 1.1.283-tól 1.1.294-ig
- python-lsp-server 1.6.0 és 1.7.1 között
- pytz 2021.3-tól 2022.1-től
- pyzmq 22.3.0 és 23.2.0 között
- 2.27.1–2.28.1 közötti kérelmek
- 0.22.0-tól 1.7.0-ra
- s3transfer 0.5.0-ról 0.6.0-ra
- scikit-learn 1.0.2-től 1.1.1-től
- scipy 1.7.3-tól 1.9.1-hez
- setuptools 61.2.0-tól 63.4.1-hez
- ssh-import-id 5.10 és 5.11 között
- stack-data from 0.2.0 to 0.6.2
- testpath 0.5.0 és 0.6.0 között
- tomli 1.2.2 és 2.0.1 között
- ujson 5.1.0-tól 5.4.0-ra
- urllib3 1.26.9 és 1.26.11 között
- virtualenv 20.8.0-tól 20.16.3-ra
- whatthepatch 1.0.4-től 1.0.2-re
- 0.37.0 és 0.37.1 közötti kerék
- Frissített R-kódtárak:
- nyíl 10.0.0 és 10.0.1 között
- bit 4.0.4 és 4.0.5 között
- seprű 1.0.1 és 1.0.3 között
- bslib 0.4.1 és 0.4.2 között
- chron 2.3-58-tól 2.3-59-hez
- cli 3.4.1-től 3.6.0-ra
- színtér 2.0-3-tól 2.1-0-ra
- curl 4.3.3-tól 5.0.0-ra
- data.table 1.14.4-től 1.14.6-osig
- dbplyr 2.2.1 és 2.3.0 között
- kivonat 0.6.30-tól 0.6.31-ig
- dplyr 1.0.10-től 1.1.0-ra
- e1071 1,7-12-től 1,7-13-ra
- kiértékelés 0,18-tól 0,20-ra
- fani 1.0.3-tól 1.0.4-ig
- fontawesome 0.4.0 és 0.5.0 között
- forcats 0.5.2–1.0.0
- fs 1.5.2 és 1.6.1 között
- 1.29.0-tól 1.31.0-ra
- gargle 1.2.1-től 1.3.0-ra
- gert 1.9.1 és 1.9.2 között
- glmnet 4.1-4-től 4.1-6-osig
- globals from 0.16.1 to 0.16.2
- 1.0.0 és 1.0.1 közötti csatorna
- highr 0,9 és 0,10 között
- htmltoolok a 0.5.3 és 0.5.4 között
- htmlwidgets 1.5.4 és 1.6.1 között
- httpuv 1.6.6-tól 1.6.8-ra
- izoband 0.2.6-tól 0.2.7-esig
- jsonlite 1.8.3 és 1.8.4 között
- knitr 1,40-től 1,42-ig
- láva 1.7.0 és 1.7.1 között
- figyelő 0.8.0-ról 0.9.0-ra
- lubridate 1.9.0 és 1.9.1 között
- markdown 1,3 és 1,5 között
- modellező 0.1.9 és 0.1.10 között
- 2.0.4-től 2.0.5-ös verzióig
- párhuzamosan az 1.32.1-től az 1.34.0-sig
- pkgbuild 1.3.1-től 1.4.0-ra
- pkgdown 2.0.6-tól 2.0.7-re
- pkgload 1.3.1-től 1.3.2-re
- 1.8.7-től 1.8.8-ra
- progressr 0.11.0-tól 0.13.0-ra
- purrr 0.3.5 és 1.0.1 között
- ragg 1.2.4-től 1.2.5-ösig
- Rcpp 1.0.9 és 1.0.10 között
- readxl 1.4.1 és 1.4.2 között
- receptek 1.0.3-tól 1.0.4-ig
- rmarkdown 2.18-tól 2.20-ig
- RODBC 1.3-19-től 1.3-20-ig
- roxygen2 7.2.1-től 7.2.3-ig
- RSQLite 2.2.18-tól 2.2.20-ra
- sass 0.4.2 és 0.4.5 között
- fényes 1.7.3 és 1.7.4 között
- forrástoolok 0,1,7-0,1,7-1
- sparklyr 1.7.8 és 1.7.9 között
- SparkR 3.3.2 és 3.4.0 között
- térbeli 7,3-11-7,3-15
- stringi 1.7.8 és 1.7.12 között
- sztring 1.4.1 és 1.5.0 között
- túlélés 3,4-0-ről 3,5-3-3-ra
- testthat 3.1.5-től 3.1.6-osig
- tidyr 1.2.1-től 1.3.0-ra
- timechange 0.1.1-ről 0.2.0-ra
- timeDate 4021.106-ról 4022.108-ra
- tinytex 0,42 és 0,44 között
- utf8 1.2.2 és 1.2.3 között
- vctrs 0.5.0 és 0.5.2 között
- vroom 1.6.0 és 1.6.1 között
- whisker 0,4-től 0.4.1-től
- xfun 0,34 és 0,37 között
- yaml 2.3.6–2.3.7
- Frissített Java-kódtárak:
- com.amazonaws.aws-java-sdk-autoscaling from 1.12.189 to 1.12.390
- com.amazonaws.aws-java-sdk-cloudformation 1.12.189–1.12.390
- com.amazonaws.aws-java-sdk-cloudfront 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-cloudhsm 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-cloudsearch 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-cloudtrail 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-cloudwatch 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-cloudwatchmetrics 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-codedeploy 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-cognitoidentity 1.12.189–1.12.390
- com.amazonaws.aws-java-sdk-cognitosync 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-config 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-core 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-datapipeline 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-directconnect 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-directory 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-dynamodb 1.12.189-1.12.390
- com.amazonaws.aws-java-sdk-ec2 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-ecs 1.12.189–1.12.390
- com.amazonaws.aws-java-sdk-efs 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-elasticache 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-elasticbeanstalk 1.12.189-1.12.390
- com.amazonaws.aws-java-sdk-elasticloadbalancing 1.12.189-1.12.390
- com.amazonaws.aws-java-sdk-elastictranscoder 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-emr 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-glacier 1.12.189-1.12.390
- com.amazonaws.aws-java-sdk-glue 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-iam 1.12.189-től 1.12.390-ig
- com.amazonaws.aws-java-sdk-importexport 1.12.189–1.12.390
- com.amazonaws.aws-java-sdk-kinesis 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-kms 1.12.189-1.12.390
- com.amazonaws.aws-java-sdk-lambda 1.12.189-1.12.390
- com.amazonaws.aws-java-sdk-logs 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-machinelearning 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-opsworks 1.12.189–1.12.390
- com.amazonaws.aws-java-sdk-rds 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-redshift 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-route53 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-s3 1.12.189-1.12.390
- com.amazonaws.aws-java-sdk-ses 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-simpledb 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-simpleworkflow 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-sns 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-sqs 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-ssm 1.12.189–1.12.390
- com.amazonaws.aws-java-sdk-storagegateway 1.12.189 és 1.12.390 között
- com.amazonaws.aws-java-sdk-sts 1.12.189–1.12.390
- com.amazonaws.aws-java-sdk-support 1.12.189-1.12.390
- com.amazonaws.aws-java-sdk-workspaces 1.12.189–1.12.390
- com.amazonaws.jmespath-java 1.12.189 és 1.12.390 között
- com.fasterxml.jackson.core.jackson-annotations from 2.13.4 to 2.14.2
- com.fasterxml.jackson.core.jackson-core 2.13.4-2.14.2
- com.fasterxml.jackson.core.jackson-databind 2.13.4.2 és 2.14.2 között
- com.fasterxml.jackson.dataformat.jackson-dataformat-cbor from 2.13.4 to 2.14.2
- com.fasterxml.jackson.datatype.jackson-datatype-joda 2.13.4 és 2.14.2 között
- com.fasterxml.jackson.module.jackson-module-paranamer 2.13.4-2.14.2
- com.fasterxml.jackson.module.jackson-module-scala_2.12 2.13.4 és 2.14.2 között
- com.github.luben.zstd-jni 1.5.2-1-től 1.5.2-5-ig
- com.google.code.gson.gson 2.8.6 és 2.8.9 között
- com.google.crypto.tink.tink.tink 1.6.1-től 1.7.0-ra
- com.h2database.h2 2.0.204–2.1.214
- com.jcraft.jsch 0.1.50 és 0.1.55 között
- com.ning.compress-lzf 1.1 és 1.1.2 között
- commons-fileupload.commons-fileupload 1.3.3 és 1.5 között
- dev.ludovic.netlib.arpack 2.2.1 és 3.0.3 között
- dev.ludovic.netlib.blas 2.2.1 és 3.0.3 között
- dev.ludovic.netlib.lapack 2.2.1 és 3.0.3 között
- io.delta.delta-sharing-spark_2.12 0.6.9-től 0.6.3-ra
- io.dropwizard.metrics.metrics-core 4.1.1 és 4.2.10 között
- io.dropwizard.metrics.metrics-graphite 4.1.1 és 4.2.10 között
- io.dropwizard.metrics.metrics-healthchecks 4.1.1 és 4.2.10 között
- io.dropwizard.metrics.metrics-jetty9 4.1.1 és 4.2.10 között
- io.dropwizard.metrics.metrics-jmx 4.1.1 és 4.2.10 között
- io.dropwizard.metrics.metrics-json 4.1.1 és 4.2.10 között
- io.dropwizard.metrics.metrics-jvm 4.1.1 és 4.2.10 között
- io.dropwizard.metrics.metrics-servlets 4.1.1 és 4.2.10 között
- io.netty.netty-all 4.1.74.Final-4.1.87.Final
- io.netty.netty-puffer 4.1.74.Final-ról 4.1.87.Final-ra
- io.netty.netty-codec 4.1.74.Final-4.1.87.Final
- io.netty.netty-common 4.1.74.Final-4.1.87.Final
- io.netty.netty-handler 4.1.74.Final-4.1.87.Final
- io.netty.netty-resolver 4.1.74.Final–4.1.87.Final
- io.netty.netty-transport 4.1.74.Final-4.1.87.Final
- io.netty.netty-transport-classes-epoll 4.1.74.Final-4.1.87.Final
- io.netty.netty-transport-classes-kqueue 4.1.74.Final-4.1.87.Final
- io.netty.netty-transport-native-unix-common 4.1.74.Final-4.1.87.Final
- joda-time.joda-time 2.10.13–2.12.1
- net.razorvine.pickle 1,2-től 1,3-ra
- net.snowflake.snowflake-jdbc 3.13.29-től 3.13.22-ig
- org.antlr.antlr4-runtime 4.8 és 4.9.3 között
- org.apache.ant.ant 1.9.2-től 1.9.16-osig
- org.apache.ant.ant-jsch 1.9.2-től 1.9.16-osig
- org.apache.ant.ant-launcher 1.9.2-től 1.9.16-osig
- org.apache.arrow.arrow-format from 7.0.0 to 11.0.0
- org.apache.arrow.arrow-memory-core 7.0.0-11.0.0
- org.apache.arrow.arrow-memory-netty 7.0.0-11.0.0
- org.apache.arrow.arrow-vector 7.0.0 és 11.0.0 között
- org.apache.avro.avro 1.11.0 és 1.11.1 között
- org.apache.avro.avro-ipc 1.11.0 és 1.11.1 között
- org.apache.avro.avro-mapred 1.11.0-tól 1.11.1-re
- org.apache.httpcomponents.httpclient 4.5.13 és 4.5.14 között
- org.apache.httpcomponents.httpcore 4.4.14-től 4.4.16-osig
- org.apache.logging.log4j.log4j-1.2-api 2.18.0 és 2.19.0 között
- org.apache.logging.log4j.log4j-api 2.18.0 és 2.19.0 között
- org.apache.logging.log4j.log4j-core 2.18.0 és 2.19.0 között
- org.apache.orc.orc-core 1.7.8-tól 1.8.2-shaded-protobuf
- org.apache.orc.orc-mapreduce 1.7.8-tól 1.8.2-shaded-protobuf
- org.apache.orc.orc-shims 1.7.8 és 1.8.2 között
- org.apache.xbean.xbean-asm9-shaded from 4.20 to 4.22
- org.apache.zookeeper.zookeeper 3.6.2 és 3.6.3 között
- org.apache.zookeeper.zookeeper-jute 3.6.2 és 3.6.3 között
- org.eclipse.jetty.jetty-client 9.4.46.v20220331–9.4.50.v20221201
- org.eclipse.jetty.jetty-folytatás 9.4.46.v20220331-ről 9.4.50.v20221201
- org.eclipse.jetty.jetty-http from 9.4.46.v20220331 to 9.4.50.v20221201
- org.eclipse.jetty.jetty-io 9.4.46.v20220331-től 9.4.50.v20221201
- org.eclipse.jetty.jetty-jndi 9.4.46.v20220331-től 9.4.50.v20221201
- org.eclipse.jetty.jetty-plus 9.4.46.v20220331-től 9.4.50.v20221201
- org.eclipse.jetty.jetty-proxy 9.4.46.v20220331-ről 9.4.50.v20221201
- org.eclipse.jetty.jetty-security 9.4.46.v20220331–9.4.50.v20221201
- org.eclipse.jetty.jetty-server 9.4.46.v20220331-ről 9.4.50.v20221201
- org.eclipse.jetty.jetty-servlet 9.4.46.v20220331 és 9.4.50.v20221201
- org.eclipse.jetty.jetty-servlets from 9.4.46.v20220331 to 9.4.50.v20221201
- org.eclipse.jetty.jetty-util 9.4.46.v20220331-ről 9.4.50.v20221201
- org.eclipse.jetty.jetty-util-ajax from 9.4.46.v20220331 to 9.4.50.v20221201
- org.eclipse.jetty.jetty-webapp 9.4.46.v20220331–9.4.50.v20221201
- org.eclipse.jetty.jetty-xml 9.4.46.v20220331–9.4.50.v20221201
- org.eclipse.jetty.websocket.websocket-api 9.4.46.v20220331 és 9.4.50.v20221201
- org.eclipse.jetty.websocket.websocket-client 9.4.46.v20220331–9.4.50.v20221201
- org.eclipse.jetty.websocket.websocket-common 9.4.46.v20220331–9.4.50.v20221201
- org.eclipse.jetty.websocket.websocket-server 9.4.46.v20220331–9.4.50.v20221201
- org.eclipse.jetty.websocket.websocket-servlet 9.4.46.v20220331–9.4.50.v20221201
- org.hibernate.validator.hibernate-validator from 6.1.0.Final to 6.1.7.Final
- org.mlflow.mlflow-spark 2.1.1 és 2.2.0 között
- org.postgresql.postgresql 42.3.3-tól 42.3.8-ig
- org.roaringbitmap.RoaringBitmap 0.9.25 és 0.9.39 között
- org.roaringbitmap.shims 0.9.25-től 0.9.39-re
- org.rocksdb.rocksdbjni 6.28.2 és 7.8.3 között
- org.scala-lang.scala-compiler_2.12 2.12.14–2.12.15
- org.scala-lang.scala-library_2.12 2.12.14–2.12.15
- org.scala-lang.scala-reflect_2.12 2.12.14–2.12.15
- org.scalanlp.breeze-macros_2.12 1.2 és 2.1.0 között
- org.scalanlp.breeze_2.12 1.2 és 2.1.0 között
- org.slf4j.jcl-over-slf4j 1.7.36-tól 2.0.6-osig
- org.slf4j.jul-to-slf4j 1.7.36–2.0.6
- org.slf4j.slf4j-api 1.7.36-tól 2.0.6-osig
- org.threeten.threeten-extra 1.5.0 és 1.7.1 között
- org.wildfly.openssl.wildfly-openssl from 1.0.7.Final to 1.1.3.Final
- org.yaml.snakeyaml 1,24-től 1,33-ra
Apache Spark
A Databricks Runtime 13.0 tartalmazza az Apache Spark 3.4.0-t.
- Spark SQL
- Spark Core
- Strukturált streamelés
- Spark Connect
- PySpark
- MLLIB
- SparkR
- Élő felhasználói felület és előzménykiszolgáló szolgáltatás
- Build
Spark SQL
Funkciók
- A táblák oszlopainak ALAPÉRTELMEZETT értékeinek támogatása (SPARK-38334)
- Dataset.as(StructType) hozzáadása (SPARK-39625)
- Paraméteres SQL támogatása (SPARK-41271, SPARK-42702)
- Unpivot/melt hozzáadása (SPARK-38864, SPARK-39876)
- Az oldalirányú oszlop aliashivatkozásainak támogatása (SPARK-27561)
- Támogatási eredmény eltolás záradéka (SPARK-28330, SPARK-39159)
- Időzóna-adattípus nélküli időbélyeg támogatása (SPARK-35662)
- Skaláris részquery támogatása az időutazásban (SPARK-39306)
- A Catalog API kompatibilissé tétele 3 rétegű névtérrel (SPARK-39235)
- Időbélyeg másodpercben történő támogatása a TimeTravelhez adatkeret-beállítások használatával (SPARK-39633)
- SparkSession.config(Map) hozzáadása (SPARK-40163)
- A munkamenet-katalógus alapértelmezett adatbázisának (SPARK-35242) módosításának támogatása
- Protobuf-támogatás a Sparkhoz – from_protobuf ÉS to_protobuf (SPARK-40654)
- HA NEM EGYEZIK A FORRÁS záradék a egyesítéshez (SPARK-40921)
- A CREATE TABLE oszlopbeállítások (SPARK-40944) rendezési kényszerének lazítása
- Sql Equivalent for Dataframe overwrite parancs (SPARK-40956)
- Támogatás a külső hivatkozások üzemeltetéséhez szükséges gyermekkimenet nélkül (SPARK-41441)
- ORDER BY ALL (SPARK-41637)
- CSOPORTOSÍTÁS MINDEN SZERINT (SPARK-41635)
- FlatMapSortedGroups és cogroupSorted hozzáadása (SPARK-38591)
- Segéd lekérdezések támogatása korrelált nem egyenlőségi predikátumokkal (SPARK-36114)
- Az UNION/INTERSECT/EXCEPT (SPARK-36124) használatával korrelációval rendelkező al lekérdezések támogatása
ANSI-megfelelőség
- ANSI SQL mód: mindig null értéket ad vissza a leképezési oszlophoz való érvénytelen hozzáféréskor (SPARK-40066)
- Dupla idézett azonosítók támogatása (SPARK-40585)
- ANSI SQL mód: A Kerek/Bround függvénynek hibát kell visszaadnia az egész szám túlcsordulásakor (SPARK-42045)
- Az ANSI-intervallumokhoz tartozó integrálok öntésének támogatása (SPARK-40008)
- Decimális osztás támogatása ANSI-intervallumokra (SPARK-40014)
- Szélesebb ANSI-intervallumtípusokat ad vissza a percentilisfüggvényekből (SPARK-40151)
- AZ ANSI-intervallumok támogatása decimális értékre (SPARK-39470)
- Az integrálok kiosztási időközeinek támogatása ANSI módban (SPARK-39451)
- Az SQLSTATE használatának megkeményítése hibaosztályokhoz (SPARK-41994)
Függvények
- Táblaértékű generátorfüggvények támogatása a FROM záradékban (SPARK-41594)
- ANSI-összesítő függvény támogatása: REGR_SXY (SPARK-37681)
- ANSI-összesítő függvény támogatása: REGR_R2 (SPARK-37641)
- ANSI-összesítő függvény támogatása: REGR_SXX (SPARK-37672)
- Az ANSI-összesítő függvény támogatása: REGR_SYY (SPARK-37702)
- ANSI-összesítő függvény támogatása: REGR_SLOPE (SPARK-39230)
- Az ANSI-összesítő függvény támogatása: REGR_INTERCEPT (SPARK-37623)
- Az ANSI aggregációs függvény támogatása PERCENTILE_CONT ablakfüggvényként (SPARK-38219)
- Az ANSI aggregációs függvény támogatása: PERCENTILE_DISC (SPARK-37691)
- Támogatási SPLIT_PART függvény (SPARK-38063)
- Támogatási TRY_AVG függvény (SPARK-38589)
- Támogatási TRY_TO_BINARY függvény (SPARK-38590)
- Az TO_NUMBER és TRY_TO_NUMBER SQL-függvények támogatása egy új specifikációnak megfelelően (SPARK-38796)
- Az ANSI általános értékspecifikációjának és függvényének támogatása – USER (SPARK-39138)
- A decimális értékek sztringekként való formázásához TO_CHAR és TRY_TO_CHAR függvények támogatása (SPARK-28516)
- Támogatási ANY_VALUE összesítő függvény (SPARK-39213)
- Támogatási EQUAL_NUL függvény (SPARK-39305)
- A MEDIAN (SPARK-39320) összesítő függvény támogatása
- Támogatási REGEXP_COUNT függvény (SPARK-39618)
- Támogatási REGEXP_INSTR függvény (SPARK-39744)
- Támogatási REGEXP_SUBSTR függvény (SPARK-39695)
- UNPIVOT függvény támogatása (SPARK-39876)
- Támogatási TRY_TO_TIMESTAMP függvény (SPARK-39795)
- Az URL-kódolás és -dekódolás támogatása beépített függvényként és rendezett, URL-hez kapcsolódó függvényekként (SPARK-39741)
- Aggregátumfüggvény mód támogatása (SPARK-39808)
- A GET függvény támogatása (SPARK-40109)
- Függvény aliasainak hozzáadása: LEN, DATEPART, DATEADD, DATE_DIFF, CURDATE (SPARK-40352)
- A TO_BINARY függvény fejlesztése (SPARK-40112)
- Támogatási CURRENT_SCHEMA (SPARK-41323)
- Az adatmaszkolás beépített maszkolásának támogatása (SPARK-40687)
- Magas szintű függvény támogatása: ARRAY_COMPACT (SPARK-41235)
- Támogatási ARRAY_APPEND függvény (SPARK-41232)
- Támogatási ARRAY_INSERT függvény (SPARK-41234)
- Támogatási LUHN_CHECK függvény (SPARK-42191)
- Támogatási ARRAY_SORT(oszlop, összehasonlító) (SPARK-39925)
Adatforrások
- Oszlopstatisztikák támogatása a DS v2-ben (SPARK-41378)
- Storage particionált illesztés (SPJ) a DS v2-ben (SPARK-37375)
- Sorszintű műveletek a DS v2-ben (SPARK-35801)
- Add SupportsReportOrdering mix in interface for DS v2 Scan (SPARK-38647)
- A CSV-séma következtetésének DÁTUM típusa (SPARK-39469)
- Illesztőprogram-metrikák támogatása a DS v2 egyéni metrika API-ban (SPARK-39635)
- A DS v2 függvényt írással támogatja a disztribúció és a rendezés (SPARK-39607)
- StringEndsWith/Támogatja a Parquetbe való leküldést, hogy használhassuk a szótárszűrőt (SPARK-39002)
- UDT támogatása a Spark Parquet vektoros olvasójában (SPARK-39086)
- A METADATA oszlop kiterjesztése a Parquet-fájlok sorindexeinek támogatásához (SPARK-37980)
- A parquet FIXED_LEN_BYTE_ARRAY típusának támogatása (SPARK-41096)
- A szűrési predikátumok sorrendjének optimalizálása (SPARK-40045)
- CTE- és temp table-lekérdezések támogatása AZ MSSQL JDBC-vel (SPARK-37259)
- Támogatás az ignoreCorruptFiles és ignoreMissingFiles elemhez az adatforrás beállításaiban (SPARK-38767)
- V1-alapú írás lekérése a WriteFilesba (SPARK-41407)
- Külső adatfájlok (SPARK-40697) írásvédett karakterpárnázásának hozzáadása
Lekérdezésoptimalizálás
- Nem korrelált skaláris alhálózatok egyesítése (SPARK-34079)
- A Bloom szűrőillesztések engedélyezése alapértelmezés szerint (SPARK-38841)
- A distinctKeys (SPARK-38832) által létrehozott összesítési kifejezés szükségtelen eltérőinek eltávolítása
- Támogatás predikátum leküldéses és oszlopmetsző de duped CTes (SPARK-37670)
- Távolítsa el a külső illesztést, ha az összesítő függvények ismétlődő agnosztikusak a streamelt oldalon (SPARK-38886)
- Távolítsa el a bal/jobb oldali külső illesztést, ha csak a bal/jobb oldali oszlopok vannak kijelölve, és a másik oldalon lévő illesztési kulcsok egyediek (SPARK-39172)
- Globális rendezés optimalizálása a RepartitionByExpressionra (SPARK-39911)
- TransposeWindow szabály optimalizálása (SPARK-38034)
- A Rendezés megszüntetése a LocalLimit (SPARK-40050) használatával történő eltávolításának támogatásához
- Helyi korlát leküldése mindkét oldalra, ha az illesztés feltétele üres (SPARK-40040)
- PushProjectionThroughLimit hozzáadása optimalizálóhoz (SPARK-40501)
- A PIVOT/UNPIVOT támogatása csatlakozó gyermekekkel (SPARK-41195)
- Oszlopmetszet támogatása több nemdeterminista szűrővel (SPARK-41017)
- Kimeneti particionálás és rendezés javítása az AQE-gyorsítótárral (SPARK-41048)
- Több hasonló teljesítmény javítása egy kiegyensúlyozott kifejezésfa-predikátum létrehozásával (SPARK-41167)
- Távolítsa el a rendezést, ha az a RepartitionByExpression (SPARK-36703) gyermeke
- Az elérhető oszlopstatisztikák használata befejezett lekérdezési szakaszokból (SPARK-39991)
- Kifejezések újrafelhasználása a WindowSpecDefinitionben (SPARK-41805)
- Az AliasAwareOutputPartitioning és az AliasAwareQueryOutputOrdering fejlesztése az összes alias figyelembe vételéhez (SPARK-40086, SPARK-42049)
- Leküldéses korlát a Python UDF-eken keresztül (SPARK-42115)
Kódlétrehozás és lekérdezés végrehajtása
- DefaultJoin létrehozása párhuzamosan futó BroadcastNestedLoopJoinExec fájlban (SPARK-40487)
- Codegen-támogatás a HiveGenericUDF-hez (SPARK-42051)
- Shuffle bevezetése egypartíción (SPARK-41986)
- Támogatja a DPP-t a metszési oldalon az Unió (SPARK-39217)
Egyéb jelentős változások
- Automatikus partícióstatisztika-gyűjtemény támogatása (SPARK-38573)
- Hibaüzenetek formázása a Thrift-kiszolgálón (SPARK-40098)
- Bővítmény API hozzáadása a gyorsítótárazás tervezésének normalizálásához (SPARK-41183)
- Spark-típusok újrabontása fizikai típusok bevezetésével (SPARK-41226)
- OneOf mezőtámogatási és rekurziós ellenőrzések (SPARK-41396)
- Az oszlopfeloldási logika központosítása (SPARK-41405)
- A tervmódosítás ellenőrzésének javítása (SPARK-42081)
- A SparkPath bemutatása a typesafetyhez (SPARK-41970)
- Kivétel a db_name.view_name esetében az Adathalmaz API által létrehozott ideiglenes nézet (SPARK-41090) esetén
- A Maszk függvény alapértelmezett argumentumának módosítása -1 értékről NULL értékre (SPARK-42070)
Spark Core
Leszerelése
- Ne futtassa újra a felesleges feladatokat a leszerelt végrehajtó, ha az adatok áttelepítve vannak (SPARK-41469)
- A leszerelt végrehajtó által okozott szakaszlehívási hiba figyelmen kívül hagyása (SPARK-40481)
- Engedélyezze a spark.storage.leszerelést. (rdd|shuffle)Blocks.enabled alapértelmezés szerint (SPARK-40198)
- Támogatás hozzáadása a YARN leszereléséhez, ha az ESS le van tiltva (SPARK-30835)
Scheduler
- Szakaszütemezés támogatása helyi fürt mód (SPARK-41949)
- Önálló fürt támogatási szakaszszintű tevékenységerőforrás-profilja, ha a dinamikus lefoglalás le van tiltva (SPARK-39853)
- Késleltetés az illesztőprogram engedélyezéséhez az ExecutorExitCode (SPARK-39957) fogadásához
- A spekuláció javítása a fázisfeladat-metrikákkal (SPARK-32170)
- Szakaszszintű erőforrásütemezési támogatás hozzáadása önálló fürthöz (SPARK-39062)
- A LaunchTask-folyamat fejlesztése a LaunchTask-üzenetek sikertelen küldése által okozott szakaszhibák elkerülése érdekében (SPARK-39955)
Shuffle
- Leküldéses alapú shuffle ügyféloldali olvasási metrikák hozzáadása (SPARK-36620)
- Kiszolgálóoldali metrikák leküldéses alapú shuffle-hez (SPARK-33573)
- Győződjön meg arról, hogy az egyesítettShuffleCleaner le lett állítva a db bezárása előtt (SPARK-40186)
- RocksDB-támogatás hozzáadása a shuffle szolgáltatásállapot-tárolóhoz (SPARK-38888)
- A távoli/külső shuffle állapot db-ként való tárolására használt LevelDB beágyazása (SPARK-38909)
- A spark.dynamicAllocation.shuffleTracking.enabled alapértelmezés szerint engedélyezve (SPARK-3984)
- A leküldéses shuffle szolgáltatás engedélyezése az állapot NM szintű adatbázisban való tárolásához a munkamegőrző újraindításhoz (SPARK-33236)
- Shuffle-blokkok eltávolítása a kibocsátott végrehajtók shuffle szolgáltatásával (SPARK-37618)
Egyéb jelentős változások
- Csak IPv6-környezet támogatása (SPARK-39457)
- A spark.kryo.unsafe engedélyezése alapértelmezés szerint (SPARK-42137)
- Tetszőleges egyéni classpath letiltása proxyfelhasználóval fürt módban (SPARK-41958)
- Kerülje a BlockManager újbóli regisztrációját, ha a végrehajtó elveszett (SPARK-41360)
- Távolítsa el azt a korlátozást, hogy az egyetlen tevékenység eredményének el kell férnie 2 GB-ban (SPARK-40622)
- Távolítsa el az elavult spark.akka.* konfigurációk (SPARK-40401) támogatását
- Módosítsa az alapértelmezett naplózást stderr értékre a log4j viselkedésének megfelelően (SPARK-40406)
- DirectTaskResult metaadatok kizárása az eredményméret kiszámításakor (SPARK-40261)
- Kezdeti partíciószám testreszabásának engedélyezése a take() viselkedésben (SPARK-40211)
- Megszakítható zárolás használata szinkronizált helyett a Executor.updateDependencies() (SPARK-40235) alkalmazásban
- A feladathibának mindig aktiválnia kell a feladathibák figyelőit (SPARK-40106)
- Lehetővé teszi a figyelés vagy a lekérdezés szelektív letiltását (SPARK-36462)
- Ne gyorsítótárazza a nemializált szórási kapcsolatokat az illesztőprogramon (SPARK-39983)
- A TaskMemoryManager és a UnsafeExternalSorter.SpillableIterator (SPARK-39283) közötti holtpont javítása
- A szakasz számpartícióinak elérhetővé tétele a TaskContextben (SPARK-38679)
- Memóriaterhelési tényező konfigurálása (SPARK-38194)
- Kerülje a bash -c használatát a ShellBasedGroupsMappingProviderben (SPARK-38992)
Strukturált streamelés
Főbb funkciók
- Aszinkron folyamatkövetés (SPARK-39591)
- Python tetszőleges állapotalapú feldolgozás strukturált streamelésben (SPARK-40434)
- Protobuf-támogatás strukturált streamelésben (SPARK-40653)
- Késői rekordszűrés javítása állapotalapú operátorok láncolásának támogatásához (SPARK-40925)
Egyéb jelentős változások
- A Hadoop Abortable felületén (SPARK-40039) alapuló streamelési ellenőrzőpont-fájlkezelő bemutatása
- Trigger.Once és Promote Trigger.AvailableNow (SPARK-39805) törlése és előléptetése
- A katalógustábla információinak felfedése a logikai tervnek a streamelési lekérdezésben (SPARK-39564)
- Metrikák gyűjtésének támogatása streamelt fogadókból (SPARK-38564)
- Elavult DStream API (SPARK-42075)
- A Kafka eltolási konfiguráció alapértelmezett értékének tükrözése (SPARK-40844)
- Klónozott spark-munkamenet biztosítása a DataFrame-ben a ForeachBatch fogadó felhasználói függvényében a PySparkban (SPARK-41379)
Spark Connect
Python-ügyfél
- DataFrame API implementálása (SPARK-41279)
- Oszlop API implementálása (SPARK-41282)
- Functions API implementálása (SPARK-41283)
- SparkSession API implementálása (SPARK-41281)
- I/O API implementálása (SPARK-41284)
- Catalog API implementálása (SPARK-41289)
- Felhasználó által definiált függvények támogatása a Pythonban (SPARK-41661)
- Pandas/Arrow Function API (SPARK-42393) támogatása
- Futtatókörnyezeti SQL-konfiguráció támogatása (SPARK-42499)
- Build, csomag és infrastruktúra a Spark Connecthez (SPARK-41286)
- A Spark Connect Python-ügyfél (SPARK-40451) megjegyzéseinek beírása
Scala-ügyfél
- Alapvető Scala-ügyfél implementálása (SPARK-41534, SPARK-42133, SPARK-42043, SPARK-41822)
- SparkSession API implementálása (SPARK-42639, SPARK-42581, SPARK-42564, SPARK-42544, SPARK-42631)
- Dataframe API implementálása (SPARK-42440, SPARK-42559, SPARK-42558, SPARK-42556, SPARK-42468, SPARK-42529, SPARK-42561, SPARK-42894, SPARK-41874, SPARK-42691, SPARK-42692, SPARK-42481, SPARK-42541, SPARK-42542, SPARK-42520, SPARK-41823)
- Oszlop API implementálása (SPARK-42441, SPARK-42560)
- Functions API implementálása (SPARK-42461, SPARK-42579, SPARK-42527, SPARK-42531, SPARK-42495, SPARK-42557)
- I/O API implementálása (SPARK-42457, SPARK-42555, SPARK-42690, SPARK-42878, SPARK-42757, SPARK-42482, SPARK-42733, SPARK-42518)
- Futtatókörnyezeti SQL-konfiguráció implementálása (SPARK-42586)
- Egyszerű felhasználó által definiált függvény támogatása (SPARK-42283, SPARK-42653, SPARK-42543)
- Alapszintű gépelt API-támogatás (SPARK-42580, SPARK-42605)
- A Spark Connect tesztinfrastruktúra (SPARK-42172, SPARK-42377, SPARK-42599)
- REPL-támogatás implementálása (SPARK-42656, SPARK-42884)
PySpark
Pandas API a Sparkban
- Jelentős fejlesztés
- Python tetszőleges állapotalapú feldolgozás strukturált streamelésben (SPARK-40434)
- Pandas API hiányzó paramétereinek implementálása (SPARK-42883)
- Pandas 1.5-támogatás (SPARK-40576)
- Fő funkció
- Series.searchsorted implementálása (SPARK-40330)
- Series.autocorr implementálása (SPARK-38774)
- DataFrame.mode implementálása (SPARK-40138)
- DataFrame.boxplot és DataFrame.plot.box implementálása (SPARK-38993)
- DataFrame.corrwith implementálása (SPARK-38907)
- DataFrame.resample és Series.resample implementálása (SPARK-39081)
- DataFrame.interpolate és Series.interpolate implementálása (SPARK-38844)
- DataFrame.ewm és Series.ewm implementálása (SPARK-38785)
- A GroupBy.prod implementálása (SPARK-40334)
- A GroupBy.nth implementálása (SPARK-40333)
- A GroupBy.quantile implementálása (SPARK-40332)
- A GroupBy.sem implementálása (SPARK-40305)
- A GroupBy.mad implementálása (SPARK-39284)
- A GroupBy.skew implementálása (SPARK-39246)
- A GroupBy.ewm implementálása (SPARK-39129)
- A GroupBy pozícióindexelésének támogatása (SPARK-38947)
Egyéb jelentős változások
- Jelentős fejlesztések
- Memóriaprofilozó biztosítása a PySpark felhasználó által definiált függvényeihez (SPARK-40281)
- A Catalog API kompatibilissé tétele 3 rétegű névtérrel (SPARK-39235)
- NumPy-bemenet támogatása a PySparkban (SPARK-39405)
- PySpark-hibák fejlesztései (SPARK-41597)
- Főbb funkciók
- Paraméteres SQL támogatása a PySparkban (SPARK-41666)
- A "medián" függvény implementálása (SPARK-40003)
- A "mode" függvény implementálása (SPARK-40007)
- A "unpivot/melt" függvény implementálása (SPARK-39877)
- A Varchar támogatása a PySparkban (SPARK-39760)
- CharType támogatása a PySparkban (SPARK-39809)
MLLIB
- PyTorch-forgalmazó implementálása (SPARK-41589)
- Az adatérvényesítés egységesítése (SPARK-38584)
- Az ALS shuffle méretének csökkentése (SPARK-40476, SPARK-40745)
- Dedup izotóniás regressziós ismétlődő funkciók (SPARK-41008)
- A KMeans blokkolja a bemeneti vektorokat (SPARK-30661)
- Relevanciapont hozzáadása nDCG-kiértékeléshez (SPARK-39446)
SparkR
- Unpivot/melt hozzáadása (SPARK-41267)
- Array_sort(oszlop, összehasonlító) hozzáadása (SPARK-40167)
- Több "Oszlop" csökkenés támogatása az R-ben (SPARK-40087)
- A Arrow 9.0.0 támogatása a SparkR használatával (SPARK-40114)
- A Catalog API kompatibilissé tétele háromrétegű névtérrel (SPARK-39579, SPARK-39646, SPARK-39645, SPARK-39236, SPARK-39716, SPARK-39719)
- Támogatás R 4.2.0 (SPARK-39372)
Élő felhasználói felület és előzménykiszolgáló szolgáltatás
- Jobb Spark felhasználói felület méretezhetősége és illesztőprogram-stabilitás nagy alkalmazásokhoz (SPARK-41053)
- A RocksDB használata a spark.history.store.hybridStore.diskBackend alapértelmezés szerint (SPARK-42277)
- Beágyazott végrehajtások csoportosítása a gyökérvégrehajtás alatt (SPARK-41752)
- Metrikák tulajdonságainak megjelenítése a környezet lapon (SPARK-39110)
- A StagePage bemeneti méretének javítása/a rekordok nem jelennek meg, ha a rekordok értéke nullánál nagyobb (SPARK-34777)
- Az eseménynaplózás JsonProtocol teljesítményének javítása Json4s helyett Jackson használatával (SPARK-39489)
- A spark.history.fs.update.batchSize (SPARK-39225) támogatása
Létrehozás
- Cloudpickle frissítése a 2.2.0-s verzióra (SPARK-40991)
- A Python 3.7 támogatásának megszüntetése (SPARK-39861)
- A Python 3.11 támogatása (SPARK-41454)
- A dev.ludovic.netlib frissítése 3.0.2-re (SPARK-40251)
- A szellő frissítése 2.0-ra (SPARK-39616)
- Slf4j-verzió frissítése 2.0.6-ra (SPARK-41561)
- Kubernetes-client verzió frissítése a 6.4.1-es verzióra (SPARK-42362)
- A rocksdbjni frissítése a 7.9.2-hez ( SPARK-42129)
- Az Apache Arrow frissítése a 11.0.0-ra (SPARK-42161)
- Az Apache Kafka frissítése 3.3.2-re (SPARK-42109)
Karbantartási frissítések
Lásd a Databricks Runtime 13.0 karbantartási frissítéseit.
Rendszerkörnyezet
- Operációs rendszer: Ubuntu 22.04.2 LTS
- Java: Zulu 8.68.0.21-CA-linux64
- Scala: 2.12.15
- Python: 3.10.6
- R: 4.2.2
- Delta Lake: 2.3.0
Telepített Python-kódtárak
Könyvtár | Verzió | Könyvtár | Verzió | Könyvtár | Verzió |
---|---|---|---|---|---|
appdirs | 1.4.4 | argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 |
asttokens | 2.2.1 | attrs | 21.4.0 | backcall | 0.2.0 |
beautifulsoup4 | 4.11.1 | fekete | 22.6.0 | fehérítő | 4.1.0 |
villogó | 1.4 | boto3 | 1.24.28 | botocore | 1.27.28 |
minősítés | 2022.9.14 | cffi | 1.15.1 | karakterkészlet | 4.0.0 |
charset-normalizer | 2.0.4 | kattintás | 8.0.4 | kriptográfia | 37.0.1 |
biciklista | 0.11.0 | Cython | 0.29.32 | dbus-python | 1.2.18 |
hibakeresés | 1.5.1 | lakberendező | 5.1.1 | defusedxml | 0.7.1 |
distlib | 0.3.6 | docstring-to-markdown | 0,12 | belépési pontok | 0,4 |
Végrehajtó | 1.2.0 | aspektusok áttekintése | 1.0.2 | fastjsonschema | 2.16.3 |
filelock | 3.10.7 | betűtípusok | 4.25.0 | googleapis-common-protos | 1.56.4 |
grpcio | 1.48.1 | grpcio-status | 1.48.1 | httplib2 | 0.20.2 |
idna | 3.3 | importlib-metadata | 4.6.4 | ipykernel | 6.17.1 |
ipython | 8.10.0 | ipython-genutils | 0.2.0 | ipywidgets | 7.7.2 |
jedi | 0.18.1 | Jeepney | 0.7.1 | Jinja2 | 2.11.3 |
jmespath | 0.10.0 | joblib | 1.2.0 | jsonschema | 4.16.0 |
jupyter-client | 7.3.4 | jupyter_core | 4.11.2 | jupyterlab-pygments | 0.1.2 |
jupyterlab-widgetek | 1.0.0 | kulcstartó | 23.5.0 | kiwisolver | 1.4.2 |
launchpadlib | 1.10.16 | lazr.restfulclient | 0.14.4 | lazr.uri | 1.0.6 |
MarkupSafe | 2.0.1 | matplotlib | 3.5.2 | matplotlib-inline | 0.1.6 |
Mccabe | 0.7.0 | mistune | 0.8.4 | more-itertools | 8.10.0 |
mypy-extensions | 0.4.3 | nbclient | 0.5.13 | nbconvert | 6.4.4 |
nbformat | 5.5.0 | nest-asyncio | 1.5.5 | nodeenv | 1.7.0 |
jegyzetfüzet | 6.4.12 | numpy | 1.21.5 | oauthlib | 3.2.0 |
csomagolás | 21,3 | pandas | 1.4.4 | pandocfilters | 1.5.0 |
parso | 0.8.3 | pathspec | 0.9.0 | Patsy | 0.5.2 |
pexpect | 4.8.0 | pickleshare | 0.7.5 | Párna | 9.2.0 |
mag | 22.2.2 | platformdirs | 2.5.2 | ábrázolás | 5.9.0 |
pluggy | 1.0.0 | prometheus-client | 0.14.1 | prompt-toolkit | 3.0.36 |
protobuf | 3.19.4 | psutil | 5.9.0 | psycopg2 | 2.9.3 |
ptyprocess | 0.7.0 | pure-eval | 0.2.2 | pyarrow | 7.0.0 |
pycparser | 2.21 | pyflakes | 3.0.1 | Pygments | 2.11.2 |
PyGObject | 3.42.1 | PyJWT | 2.3.0 | pyodbc | 4.0.32 |
pyparsing | 3.0.9 | pyright | 1.1.294 | pyrsistent | 0.18.0 |
python-dateutil | 2.8.2 | python-lsp-jsonrpc | 1.0.0 | python-lsp-server | 1.7.1 |
pytoolconfig | 1.2.2 | pytz | 2022.1 | pyzmq | 23.2.0 |
kérelmek | 2.28.1 | kötél | 1.7.0 | s3transfer | 0.6.0 |
scikit-learn | 1.1.1 | scipy | 1.9.1 | tengeri | 0.11.2 |
SecretStorage | 3.3.1 | Send2Trash | 1.8.0 | setuptools | 63.4.1 |
Hat | 1.16.0 | levessieve | 2.3.1 | ssh-import-id | 5,11 |
veremadatok | 0.6.2 | statsmodels | 0.13.2 | Kitartás | 8.0.1 |
terminado | 0.13.1 | testpath | 0.6.0 | threadpoolctl | 2.2.0 |
tokenize-rt | 4.2.1 | tomli | 2.0.1 | tornádó | 6.1 |
árulók | 5.1.1 | ujson | 5.4.0 | felügyelet nélküli frissítések | 0,1 |
urllib3 | 1.26.11 | virtualenv | 20.16.3 | wadllib | 1.3.6 |
wcwidth | 0.2.5 | webencodings | 0.5.1 | whatthepatch | 1.0.2 |
kerék | 0.37.1 | widgetsnbextension | 3.6.1 | yapf | 0.31.0 |
zipp | 1.0.0 |
Telepített R-kódtárak
Az R-kódtárak a Microsoft CRAN 2023.02.10-i pillanatképéből vannak telepítve.
Könyvtár | Verzió | Könyvtár | Verzió | Könyvtár | Verzió |
---|---|---|---|---|---|
nyíl | 10.0.1 | askpass | 1,1 | assertthat | 0.2.1 |
backports | 1.4.1 | alap | 4.2.2 | base64enc | 0.1-3 |
bit | 4.0.5 | bit64 | 4.0.5 | blob | 1.2.3 |
indítás | 1.3-28 | főz | 1.0-8 | Brio | 1.1.3 |
seprű | 1.0.3 | bslib | 0.4.2 | gyorsítótár | 1.0.6 |
hívó | 3.7.3 | kalap | 6.0-93 | cellranger | 1.1.0 |
chron | 2.3-59 | osztály | 7.3-21 | Cli | 3.6.0 |
clipr | 0.8.0 | óra | 0.6.1 | fürt | 2.1.4 |
kódtoolok | 0.2-19 | színtér | 2.1-0 | commonmark | 1.8.1 |
fordítóprogram | 4.2.2 | config | 0.3.1 | cpp11 | 0.4.3 |
zsírkréta | 1.5.2 | hitelesítő adatok | 1.3.2 | csavarodik | 5.0.0 |
data.table | 1.14.6 | adatkészletek | 4.2.2 | DBI | 1.1.3 |
dbplyr | 2.3.0 | Desc | 1.4.2 | devtools | 2.4.5 |
diffobj | 0.3.5 | emészt | 0.6.31 | levilágított | 0.4.2 |
dplyr | 1.1.0 | dtplyr | 1.2.2 | e1071 | 1.7-13 |
három pont | 0.3.2 | evaluate | 0.20 | fani | 1.0.4 |
farver | 2.1.1 | gyorstérkép | 1.1.0 | fontawesome | 0.5.0 |
forcats | 1.0.0 | foreach | 1.5.2 | külföldi | 0.8-82 |
kovácsol | 0.2.0 | Fs | 1.6.1 | jövő | 1.31.0 |
future.apply | 1.10.0 | gargarizál | 1.3.0 | Generikus | 0.1.3 |
Gert | 1.9.2 | ggplot2 | 3.4.0 | Gh | 1.3.1 |
gitcreds | 0.1.2 | glmnet | 4.1-6 | globális | 0.16.2 |
ragasztó | 1.6.2 | googledrive | 2.0.0 | googlesheets4 | 1.0.1 |
Gower | 1.0.1 | grafika | 4.2.2 | grDevices | 4.2.2 |
rács | 4.2.2 | gridExtra | 2.3 | gsubfn | 0,7 |
gtable | 0.3.1 | hardhat | 1.2.0 | kikötő | 2.5.1 |
highr | 0.10 | Hms | 1.1.2 | htmltoolok | 0.5.4 |
htmlwidgets | 1.6.1 | httpuv | 1.6.8 | httr | 1.4.4 |
Azonosítók | 1.0.1 | ini | 0.3.1 | ipred | 0.9-13 |
izoband | 0.2.7 | iterátorok | 1.0.14 | jquerylib | 0.1.4 |
jsonlite | 1.8.4 | KernSmooth | 2.23-20 | knitr | 1.42 |
címkézés | 0.4.2 | később | 1.3.0 | rács | 0.20-45 |
láva | 1.7.1 | életciklus | 1.0.3 | figyelő | 0.9.0 |
lubridate | 1.9.1 | magrittr | 2.0.3 | markdown | 1,5 |
TÖMEG | 7.3-58.2 | Mátrix | 1.5-1 | memoise | 2.0.1 |
metódusok | 4.2.2 | mgcv | 1.8-41 | MIME | 0,12 |
miniUI | 0.1.1.1 | ModelMetrics | 1.2.2.2 | modellező | 0.1.10 |
munsell | 0.5.0 | nlme | 3.1-162 | nnet | 7.3-18 |
numDeriv | 2016.8-1.1 | openssl | 2.0.5 | parallel | 4.2.2 |
párhuzamosan | 1.34.0 | pillér | 1.8.1 | pkgbuild | 1.4.0 |
pkgconfig | 2.0.3 | pkgdown | 2.0.7 | pkgload | 1.3.2 |
plogr | 0.2.0 | rétegelt | 1.8.8 | dicséret | 1.0.0 |
prettyunits | 1.1.1 | Proc | 1.18.0 | processx | 3.8.0 |
prodlim | 2019.11.13 | profvis | 0.3.7 | haladás | 1.2.2 |
progressr | 0.13.0 | Ígér | 1.2.0.1 | Proto | 1.0.0 |
helyettes | 0.4-27 | Ps | 1.7.2 | purrr | 1.0.1 |
r2d3 | 0.2.6 | R6 | 2.5.1 | ragg | 1.2.5 |
randomForest | 4.7-1.1 | rappdirs | 0.3.3 | rcmdcheck | 1.4.0 |
RColorBrewer | 1.1-3 | Rcpp | 1.0.10 | RcppEigen | 0.3.3.9.3 |
olvasó | 2.1.3 | readxl | 1.4.2 | receptek | 1.0.4 |
Visszavágót | 1.0.1 | visszavágó2 | 2.1.2 | Távirányító | 2.4.2 |
reprex | 2.0.2 | újraformázás2 | 1.4.4 | rlang | 1.0.6 |
rmarkdown | 2,20 | RODBC | 1.3-20 | roxygen2 | 7.2.3 |
rpart | 4.1.19 | rprojroot | 2.0.3 | Rserve | 1.8-12 |
RSQLite | 2.2.20 | rstudioapi | 0,14 | rversions | 2.1.2 |
rvest | 1.0.3 | Sass | 0.4.5 | mérleg | 1.2.1 |
választó | 0.4-2 | sessioninfo | 1.2.2 | alak | 1.4.6 |
Fényes | 1.7.4 | sourcetools | 0.1.7-1 | sparklyr | 1.7.9 |
SparkR | 3.4.0 | térbeli | 7.3-15 | splines | 4.2.2 |
sqldf | 0.4-11 | NÉGYZET | 2021.1 | statisztika | 4.2.2 |
statisztikák4 | 4.2.2 | stringi | 1.7.12 | sztring | 1.5.0 |
túlélés | 3.5-3 | sys | 3.4.1 | systemfonts | 1.0.4 |
tcltk | 4.2.2 | testthat | 3.1.6 | szövegformázás | 0.3.6 |
tibble | 3.1.8 | tidyr | 1.3.0 | tidyselect | 1.2.0 |
tidyverse | 1.3.2 | timechange | 0.2.0 | timeDate | 4022.108 |
tinytex | 0.44 | eszközök | 4.2.2 | tzdb | 0.3.0 |
urlchecker | 1.0.1 | usethis | 2.1.6 | utf8 | 1.2.3 |
eszközök | 4.2.2 | uuid | 1.1-0 | vctrs | 0.5.2 |
viridisLite | 0.4.1 | vroom | 1.6.1 | Waldo | 0.4.0 |
bajusz | 0.4.1 | withr | 2.5.0 | xfun | 0,37 |
xml2 | 1.3.3 | xopen | 1.0.0 | xtable | 1.8-4 |
yaml | 2.3.7 | fütyülés | 2.2.2 |
Telepített Java- és Scala-kódtárak (Scala 2.12-fürtverzió)
Csoportazonosító | Összetevő azonosítója | Verzió |
---|---|---|
antlr | antlr | 2.7.7 |
com.amazonaws | amazon-kinesis-client | 1.12.0 |
com.amazonaws | aws-java-sdk-autoscaling | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudformation | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudfront | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudhsm | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudsearch | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudtrail | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudwatch | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.12.390 |
com.amazonaws | aws-java-sdk-codedeploy | 1.12.390 |
com.amazonaws | aws-java-sdk-cognitoidentity | 1.12.390 |
com.amazonaws | aws-java-sdk-cognitosync | 1.12.390 |
com.amazonaws | aws-java-sdk-config | 1.12.390 |
com.amazonaws | aws-java-sdk-core | 1.12.390 |
com.amazonaws | aws-java-sdk-datapipeline | 1.12.390 |
com.amazonaws | aws-java-sdk-directconnect | 1.12.390 |
com.amazonaws | aws-java-sdk-directory | 1.12.390 |
com.amazonaws | aws-java-sdk-dynamodb | 1.12.390 |
com.amazonaws | aws-java-sdk-ec2 | 1.12.390 |
com.amazonaws | aws-java-sdk-ecs | 1.12.390 |
com.amazonaws | aws-java-sdk-efs | 1.12.390 |
com.amazonaws | aws-java-sdk-elasticache | 1.12.390 |
com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.12.390 |
com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.12.390 |
com.amazonaws | aws-java-sdk-elastictranscoder | 1.12.390 |
com.amazonaws | aws-java-sdk-emr | 1.12.390 |
com.amazonaws | aws-java-sdk-glacier | 1.12.390 |
com.amazonaws | aws-java-sdk-glue | 1.12.390 |
com.amazonaws | aws-java-sdk-iam | 1.12.390 |
com.amazonaws | aws-java-sdk-importexport | 1.12.390 |
com.amazonaws | aws-java-sdk-kinesis | 1.12.390 |
com.amazonaws | aws-java-sdk-kms | 1.12.390 |
com.amazonaws | aws-java-sdk-lambda | 1.12.390 |
com.amazonaws | aws-java-sdk-logs | 1.12.390 |
com.amazonaws | aws-java-sdk-machinelearning | 1.12.390 |
com.amazonaws | aws-java-sdk-opsworks | 1.12.390 |
com.amazonaws | aws-java-sdk-rds | 1.12.390 |
com.amazonaws | aws-java-sdk-redshift | 1.12.390 |
com.amazonaws | aws-java-sdk-route53 | 1.12.390 |
com.amazonaws | aws-java-sdk-s3 | 1.12.390 |
com.amazonaws | aws-java-sdk-ses | 1.12.390 |
com.amazonaws | aws-java-sdk-simpledb | 1.12.390 |
com.amazonaws | aws-java-sdk-simpleworkflow | 1.12.390 |
com.amazonaws | aws-java-sdk-sns | 1.12.390 |
com.amazonaws | aws-java-sdk-sqs | 1.12.390 |
com.amazonaws | aws-java-sdk-ssm | 1.12.390 |
com.amazonaws | aws-java-sdk-storagegateway | 1.12.390 |
com.amazonaws | aws-java-sdk-sts | 1.12.390 |
com.amazonaws | aws-java-sdk-support | 1.12.390 |
com.amazonaws | aws-java-sdk-swf-libraries | 1.11.22 |
com.amazonaws | aws-java-sdk-workspaces | 1.12.390 |
com.amazonaws | jmespath-java | 1.12.390 |
com.clearspring.analytics | patak | 2.9.6 |
com.databricks | Rserve | 1.8-3 |
com.databricks | jets3t | 0.7.1-0 |
com.databricks.scalapb | compilerplugin_2.12 | 0.4.15-10 |
com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
com.esotericsoftware | kryo-shaded | 4.0.2 |
com.esotericsoftware | minlog | 1.3.0 |
com.fasterxml | osztálytárs | 1.3.4 |
com.fasterxml.jackson.core | jackson-annotations | 2.14.2 |
com.fasterxml.jackson.core | jackson-core | 2.14.2 |
com.fasterxml.jackson.core | jackson-databind | 2.14.2 |
com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.14.2 |
com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.14.2 |
com.fasterxml.jackson.datatype | jackson-datatype-jsr310 | 2.13.4 |
com.fasterxml.jackson.module | jackson-module-paranamer | 2.14.2 |
com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.14.2 |
com.github.ben-manes.koffein | koffein | 2.3.4 |
com.github.fommil | jniloader | 1,1 |
com.github.fommil.netlib | native_ref-java | 1,1 |
com.github.fommil.netlib | native_ref-java | 1.1-natívok |
com.github.fommil.netlib | native_system-java | 1,1 |
com.github.fommil.netlib | native_system-java | 1.1-natívok |
com.github.fommil.netlib | netlib-native_ref-linux-x86_64 | 1.1-natívok |
com.github.fommil.netlib | netlib-native_system-linux-x86_64 | 1.1-natívok |
com.github.luben | zstd-jni | 1.5.2-5 |
com.github.wendykierp | JTransforms | 3.1 |
com.google.code.findbugs | jsr305 | 3.0.0 |
com.google.code.gson | gson | 2.8.9 |
com.google.crypto.tink | Csellengő | 1.7.0 |
com.google.flatbuffers | flatbuffers-java | 1.12.0 |
com.google.guava | gujávafa | 15,0 |
com.google.protobuf | protobuf-java | 2.6.1 |
com.h2database | h2 | 2.1.214 |
com.helger | Profiler | 1.1.1 |
com.jcraft | jsch | 0.1.55 |
com.jolbox | bonecp | 0.8.0.RELEASE |
com.lihaoyi | sourcecode_2.12 | 0.1.9 |
com.microsoft.azure | azure-data-lake-store-sdk | 2.3.9 |
com.ning | compress-lzf | 1.1.2 |
com.sun.mail | javax.mail | 1.5.2 |
com.tdunning | json | 1.8 |
com.thoughtworks.paranamer | paranamer | 2.8 |
com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
com.twitter | chill-java | 0.10.0 |
com.twitter | chill_2.12 | 0.10.0 |
com.twitter | util-app_2.12 | 7.1.0 |
com.twitter | util-core_2.12 | 7.1.0 |
com.twitter | util-function_2.12 | 7.1.0 |
com.twitter | util-jvm_2.12 | 7.1.0 |
com.twitter | util-lint_2.12 | 7.1.0 |
com.twitter | util-registry_2.12 | 7.1.0 |
com.twitter | util-stats_2.12 | 7.1.0 |
com.typesafe | config | 1.2.1 |
com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
com.uber | h3 | 3.7.0 |
com.univocity | univocity-parsers | 2.9.1 |
com.zaxxer | HikariCP | 4.0.3 |
commons-cli | commons-cli | 1.5.0 |
commons-codec | commons-codec | 1,15 |
commons-collections | commons-collections | 3.2.2 |
commons-dbcp | commons-dbcp | 1.4 |
commons-fileupload | commons-fileupload | 1,5 |
commons-httpclient | commons-httpclient | 3.1 |
commons-io | commons-io | 2.11.0 |
commons-lang | commons-lang | 2.6 |
commons-naplózás | commons-naplózás | 1.1.3 |
commons-pool | commons-pool | 1.5.4 |
dev.ludovic.netlib | arpack | 3.0.3 |
dev.ludovic.netlib | Blas | 3.0.3 |
dev.ludovic.netlib | lapack | 3.0.3 |
info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
io.airlift | aircompressor | 0.21 |
io.delta | delta-sharing-spark_2.12 | 0.6.3 |
io.dropwizard.metrics | metrikamag | 4.2.10 |
io.dropwizard.metrics | metrics-graphite | 4.2.10 |
io.dropwizard.metrics | metrics-healthchecks | 4.2.10 |
io.dropwizard.metrics | metrics-jetty9 | 4.2.10 |
io.dropwizard.metrics | metrics-jmx | 4.2.10 |
io.dropwizard.metrics | metrics-json | 4.2.10 |
io.dropwizard.metrics | metrics-jvm | 4.2.10 |
io.dropwizard.metrics | metrics-servlets | 4.2.10 |
io.netty | netty-all | 4.1.87.Final |
io.netty | netty-buffer | 4.1.87.Final |
io.netty | netty-codec | 4.1.87.Final |
io.netty | netty-codec-http | 4.1.87.Final |
io.netty | netty-codec-http2 | 4.1.87.Final |
io.netty | netty-codec-zokni | 4.1.87.Final |
io.netty | netty-common | 4.1.87.Final |
io.netty | netty-handler | 4.1.87.Final |
io.netty | netty-handler-proxy | 4.1.87.Final |
io.netty | netty-resolver | 4.1.87.Final |
io.netty | netty-transport | 4.1.87.Final |
io.netty | netty-transport-classes-epoll | 4.1.87.Final |
io.netty | netty-transport-classes-kqueue | 4.1.87.Final |
io.netty | netty-transport-native-epoll | 4.1.87.Final |
io.netty | netty-transport-native-epoll | 4.1.87.Final-linux-aarch_64 |
io.netty | netty-transport-native-epoll | 4.1.87.Final-linux-x86_64 |
io.netty | netty-transport-native-kqueue | 4.1.87.Final-osx-aarch_64 |
io.netty | netty-transport-native-kqueue | 4.1.87.Final-osx-x86_64 |
io.netty | netty-transport-native-unix-common | 4.1.87.Final |
io.prometheus | simpleclient | 0.7.0 |
io.prometheus | simpleclient_common | 0.7.0 |
io.prometheus | simpleclient_dropwizard | 0.7.0 |
io.prometheus | simpleclient_pushgateway | 0.7.0 |
io.prometheus | simpleclient_servlet | 0.7.0 |
io.prometheus.jmx | gyűjtő | 0.12.0 |
jakarta.annotation | jakarta.annotation-api | 1.3.5 |
jakarta.servlet | jakarta.servlet-api | 4.0.3 |
jakarta.validation | jakarta.validation-api | 2.0.2 |
jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
javax.activation | aktiválás | 1.1.1 |
javax.el | javax.el-api | 2.2.4 |
javax.jdo | jdo-api | 3.0.1 |
javax.transaction | jta | 1,1 |
javax.transaction | transaction-api | 1,1 |
javax.xml.bind | jaxb-api | 2.2.11 |
javolution | javolution | 5.5.1 |
jline | jline | 2.14.6 |
joda-time | joda-time | 2.12.1 |
net.java.dev.jna | jna | 5.8.0 |
net.razorvine | pác | 1.3 |
net.sf.jpam | jpam | 1,1 |
net.sf.opencsv | opencsv | 2.3 |
net.sf.supercsv | super-csv | 2.2.0 |
net.snowflake | snowflake-ingest-sdk | 0.9.6 |
net.snowflake | snowflake-jdbc | 3.13.22 |
net.sourceforge.f2j | arpack_combined_all | 0,1 |
org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
org.antlr | ST4 | 4.0.4 |
org.antlr | antlr-runtime | 3.5.2 |
org.antlr | antlr4-runtime | 4.9.3 |
org.antlr | stringtemplate | 3.2.1 |
org.apache.ant | ant | 1.9.16 |
org.apache.ant | ant-jsch | 1.9.16 |
org.apache.ant | ant-launcher | 1.9.16 |
org.apache.arrow | nyílformátum | 11.0.0 |
org.apache.arrow | nyíl-memóriamag | 11.0.0 |
org.apache.arrow | nyíl-memória-netty | 11.0.0 |
org.apache.arrow | nyíl-vektor | 11.0.0 |
org.apache.avro | avro | 1.11.1 |
org.apache.avro | avro-ipc | 1.11.1 |
org.apache.avro | avro-mapred | 1.11.1 |
org.apache.commons | commons-collections4 | 4.4 |
org.apache.commons | commons-compress | 1.21 |
org.apache.commons | commons-crypto | 1.1.0 |
org.apache.commons | commons-lang3 | 3.12.0 |
org.apache.commons | commons-math3 | 3.6.1 |
org.apache.commons | commons-text | 1.10.0 |
org.apache.curator | kurátor-ügyfél | 2.13.0 |
org.apache.curator | kurátor-keretrendszer | 2.13.0 |
org.apache.curator | kurátor-receptek | 2.13.0 |
org.apache.datasketches | datasketches-java | 3.1.0 |
org.apache.datasketches | datasketches-memory | 2.0.0 |
org.apache.derby | keménykalap | 10.14.2.0 |
org.apache.hadoop | hadoop-client-runtime | 3.3.4 |
org.apache.hive | hive-beeline | 2.3.9 |
org.apache.hive | hive-cli | 2.3.9 |
org.apache.hive | hive-jdbc | 2.3.9 |
org.apache.hive | hive-llap-client | 2.3.9 |
org.apache.hive | hive-llap-common | 2.3.9 |
org.apache.hive | hive-serde | 2.3.9 |
org.apache.hive | hive-shims | 2.3.9 |
org.apache.hive | hive-storage-api | 2.8.1 |
org.apache.hive.shims | hive-shims-0.23 | 2.3.9 |
org.apache.hive.shims | hive-shims-common | 2.3.9 |
org.apache.hive.shims | hive-shims-scheduler | 2.3.9 |
org.apache.httpcomponents | httpclient | 4.5.14 |
org.apache.httpcomponents | httpcore | 4.4.16 |
org.apache.ivy | borostyán | 2.5.1 |
org.apache.logging.log4j | log4j-1.2-api | 2.19.0 |
org.apache.logging.log4j | log4j-api | 2.19.0 |
org.apache.logging.log4j | log4j-core | 2.19.0 |
org.apache.logging.log4j | log4j-slf4j2-impl | 2.19.0 |
org.apache.mesos | mesos | 1.11.0-shaded-protobuf |
org.apache.orc | orc-core | 1.8.2-shaded-protobuf |
org.apache.orc | orc-mapreduce | 1.8.2-shaded-protobuf |
org.apache.orc | orc-shims | 1.8.2 |
org.apache.thrift | libfb303 | 0.9.3 |
org.apache.thrift | libthrift | 0.12.0 |
org.apache.xbean | xbean-asm9-shaded | 4.22 |
org.apache.yetus | célközönség-széljegyzetek | 0.13.0 |
org.apache.zookeeper | zookeeper | 3.6.3 |
org.apache.zookeeper | zookeeper-juta | 3.6.3 |
org.checkerframework | checker-qual | 3.5.0 |
org.codehaus.jackson | jackson-core-asl | 1.9.13 |
org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
org.codehaus.janino | commons-compiler | 3.0.16 |
org.codehaus.janino | janino | 3.0.16 |
org.datanucleus | datanucleus-api-jdo | 4.2.4 |
org.datanucleus | datanucleus-core | 4.1.17 |
org.datanucleus | datanucleus-rdbms | 4.1.19 |
org.datanucleus | javax.jdo | 3.2.0-m3 |
org.eclipse.jetty | jetty-client | 9.4.50.v20221201 |
org.eclipse.jetty | móló-folytatás | 9.4.50.v20221201 |
org.eclipse.jetty | jetty-http | 9.4.50.v20221201 |
org.eclipse.jetty | jetty-io | 9.4.50.v20221201 |
org.eclipse.jetty | jetty-jndi | 9.4.50.v20221201 |
org.eclipse.jetty | móló plusz | 9.4.50.v20221201 |
org.eclipse.jetty | jetty-proxy | 9.4.50.v20221201 |
org.eclipse.jetty | jetty-security | 9.4.50.v20221201 |
org.eclipse.jetty | jetty-server | 9.4.50.v20221201 |
org.eclipse.jetty | jetty-servlet | 9.4.50.v20221201 |
org.eclipse.jetty | jetty-servlets | 9.4.50.v20221201 |
org.eclipse.jetty | jetty-util | 9.4.50.v20221201 |
org.eclipse.jetty | jetty-util-ajax | 9.4.50.v20221201 |
org.eclipse.jetty | jetty-webapp | 9.4.50.v20221201 |
org.eclipse.jetty | jetty-xml | 9.4.50.v20221201 |
org.eclipse.jetty.websocket | websocket-api | 9.4.50.v20221201 |
org.eclipse.jetty.websocket | websocket-client | 9.4.50.v20221201 |
org.eclipse.jetty.websocket | websocket-common | 9.4.50.v20221201 |
org.eclipse.jetty.websocket | websocket-server | 9.4.50.v20221201 |
org.eclipse.jetty.websocket | websocket-servlet | 9.4.50.v20221201 |
org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
org.glassfish.hk2 | hk2-api | 2.6.1 |
org.glassfish.hk2 | hk2-lokátor | 2.6.1 |
org.glassfish.hk2 | hk2-utils | 2.6.1 |
org.glassfish.hk2 | osgi-resource-locator | 1.0.3 |
org.glassfish.hk2.external | aopalliance-repackaged | 2.6.1 |
org.glassfish.hk2.external | jakarta.inject | 2.6.1 |
org.glassfish.jersey.containers | jersey-container-servlet | 2.36 |
org.glassfish.jersey.containers | jersey-container-servlet-core | 2.36 |
org.glassfish.jersey.core | jersey-client | 2.36 |
org.glassfish.jersey.core | jersey-common | 2.36 |
org.glassfish.jersey.core | jersey-server | 2.36 |
org.glassfish.jersey.inject | jersey-hk2 | 2.36 |
org.hibernate.validator | hibernate-validator | 6.1.7.Final |
org.javassist | javassist | 3.25.0-GA |
org.jboss.logging | jboss-logging | 3.3.2.Végleges |
org.jdbi | jdbi | 2.63.1 |
org.jetbrains | Széljegyzetek | 17.0.0 |
org.joda | joda-convert | 1,7 |
org.jodd | jodd-core | 3.5.2 |
org.json4s | json4s-ast_2.12 | 3.7.0-M11 |
org.json4s | json4s-core_2.12 | 3.7.0-M11 |
org.json4s | json4s-jackson_2.12 | 3.7.0-M11 |
org.json4s | json4s-scalap_2.12 | 3.7.0-M11 |
org.lz4 | lz4-java | 1.8.0 |
org.mariadb.jdbc | mariadb-java-client | 2.7.4 |
org.mlflow | mlflow-spark | 2.2.0 |
org.objenesis | objenesis | 2.5.1 |
org.postgresql | postgresql | 42.3.8 |
org.roaringbitmap | RoaringBitmap | 0.9.39 |
org.roaringbitmap | Alátéteket | 0.9.39 |
org.rocksdb | rocksdbjni | 7.8.3 |
org.rosuda.REngine | REngine | 2.1.0 |
org.scala-lang | scala-compiler_2.12 | 2.12.15 |
org.scala-lang | scala-library_2.12 | 2.12.15 |
org.scala-lang | scala-reflect_2.12 | 2.12.15 |
org.scala-lang.modules | scala-collection-compat_2.12 | 2.4.3 |
org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
org.scala-sbt | teszt-interfész | 1.0 |
org.scalacheck | scalacheck_2.12 | 1.14.2 |
org.scalactic | scalactic_2.12 | 3.0.8 |
org.scalanlp | breeze-macros_2.12 | 2.1.0 |
org.scalanlp | breeze_2.12 | 2.1.0 |
org.scalatest | scalatest_2.12 | 3.0.8 |
org.slf4j | jcl-over-slf4j | 2.0.6 |
org.slf4j | jul-to-slf4j | 2.0.6 |
org.slf4j | slf4j-api | 2.0.6 |
org.threeten | három-extra | 1.7.1 |
org.tukaani | xz | 1,9 |
org.typelevel | algebra_2.12 | 2.0.1 |
org.typelevel | cats-kernel_2.12 | 2.1.1 |
org.typelevel | spire-macros_2.12 | 0.17.0 |
org.typelevel | spire-platform_2.12 | 0.17.0 |
org.typelevel | spire-util_2.12 | 0.17.0 |
org.typelevel | spire_2.12 | 0.17.0 |
org.wildfly.openssl | wildfly-openssl | 1.1.3.Final |
org.xerial | sqlite-jdbc | 3.8.11.2 |
org.xerial.snappy | snappy-java | 1.1.8.4 |
org.yaml | snakeyaml | 1.33 |
oro | oro | 2.0.8 |
pl.edu.icm | JLargeArrays | 1,5 |
software.amazon.cryptools | AmazonCorrettoCryptoProvider | 1.6.1-linux-x86_64 |
software.amazon.ion | ion-java | 1.0.2 |
stax | stax-api | 1.0.1 |