Databricks Runtime 9.1 LTS

Následující poznámky k verzi obsahují informace o Databricks Runtime 9.1 LTS a Databricks Runtime 9.1 LTS Photon s využitím Apache Sparku 3.1.2. Databricks vydala tyto image v září 2021. Photon je ve verzi Public Preview.

Poznámka:

LTS znamená, že tato verze je dlouhodobě podporována. Viz životní cyklus verze LTS modulu Databricks Runtime.

Nové funkce a vylepšení

Nápovědy k schématu automatického zavaděče teď fungují s typy polí a mapování.

Typy polí a map jsou podporovány v odvození schématu přepsání s nápovědou schématu pro automatický zavaděč.

Mezi příklady tipů schématu pro pole patří:

  1. arr Array<TYPE> změní typ pole.
  2. arr.element TYPE změní typ pole (pomocí klíčového element slova).
  3. arr.element.x TYPE změní typ vnořeného pole v poli struktur.

První dva příklady jsou rady ke změně typu pole arr na TYPE, ale používají jinou syntaxi. Ve třetím příkladu arr je pole struktur s polem x. Tento příklad ukazuje, jak změnit typ x na TYPE.

Mezi příklady tipů schémat pro mapy patří:

  1. m Map<KEY-TYPE, VALUE-TYPE> změní typy klíčů a hodnot mapování.
  2. m.key TYPE změní typ mapových klíčů.
  3. m.value TYPE změní typ mapových hodnot.
  4. m.key.x TYPE změní typ pole v klíči mapy.
  5. m.value.x TYPE změní typ pole hodnoty mapy.

První příklad změní typ mapování mKEY_TYPE na klíč i hodnotu a VALUE_TYPE v uvedeném pořadí. Druhý a třetí příklad lze použít, pokud je potřeba změnit pouze typ klíče nebo pouze typ hodnoty. Ve čtvrtém a pátém příkladu m je mapa s klíčem a hodnotou typů struktury s polem x. Tento příklad ukazuje, jak změnit typ x na TYPE.

Podpora souborů Avro pro schéma sloučení

Formát souboru Avro teď podporuje mergeSchema možnost při čtení souborů. Nastavení mergeSchema na hodnotu True při čtení souborů Avro odvodí schéma ze sady souborů Avro, nikoli z jednoho souboru. To zlepšuje použitelnost odvozením schématu, které může být schopno číst všechny soubory, i když se jejich jednotlivá schémata liší. Viz Konfigurace.

Podpora přírůstkového výpisu automatického zavaděče (Public Preview)

V případě lexikálních vygenerovaných souborů teď využívá auto loader? Teď využívá lexikální řazení souborů a stávající optimalizovaná rozhraní API k efektivnějšímu výpisu adresáře výpisem z dříve přijatých souborů, nikoli výpisem celého adresáře. Automatický zavaděč automaticky zjistí, jestli je daný adresář vhodný pro přírůstkové výpisy ve výchozím nastavení. Pokud chcete toto chování explicitně řídit, nastavte novou cloudFiles.useIncrementalListing možnost na zapnuto (true), vypnuto (false) nebo automatické (auto). Pokud toto chování nastavíte na true, můžete také nastavit cloudFiles.backfillInterval možnost naplánovat pravidelné obnovení dat, abyste měli jistotu, že jsou všechna vaše data zcela ingestována.

Delta teď podporuje libovolnou hodnotu ReplaceWhere

V kombinaci s režimem replaceWhere přepsání lze tuto možnost použít k současnému přepsání dat, která odpovídají predikátu definovanému v této možnosti. replaceWhere Dříve podporoval predikát pouze přes sloupce oddílů, ale teď může být libovolným výrazem. Viz Zápis do tabulky.

Automatický zavaděč pro Google Cloud teď podporuje oznámení o souborech (Public Preview)

Auto Loader teď podporuje režim oznámení souborů v Google Cloudu. Nastavte .option("cloudFiles.useNotifications", "true") automatické zavaděče tak, aby automaticky nastavil prostředky Google Cloud Pub/Sub za vás. V režimu oznámení o souborech se při doručení zjistí a ingestují nové soubory bez výpisu vstupního adresáře. Podívejte se, co je režim oznámení souboru automatického zavaděče?.

CREATE FUNCTION teď podporuje vytváření funkcí tabulky.

Kromě vytvoření skalární funkce, která vrací skalární hodnotu, teď můžete vytvořit funkci tabulky, která vrací sadu řádků. Viz CREATE FUNCTION (SQL a Python).

Streamovací zdroj Kafka teď hlásí estimatedTotalBytesBehindLatest metriku

Zdroj streamování Kafka teď hlásí odhad, kolik bajtů je příjemce po každé dávce za nejnovějším dostupným bajtem. Tuto metriku můžete použít ke sledování průběhu streamu. Viz Načtení metrik Kafka.

Příklad výstupu metriky:

StreamingQueryProgress {
  "batchId": 0,
  .....
  "sources": [ {
    "description" : "KafkaV2[Subscribe[topic-0]]",
    "metrics":{
      "avgOffsetsBehindLatest" : "1.0",
      "estimatedTotalBytesBehindLatest" : "80.0", // new
      "maxOffsetsBehindLatest" : "1",
      "minOffsetsBehindLatest" : "1"
    } ],
  ....
 }

U struktur uvnitř polí teď Delta MERGE INTO překládá pole struktury podle názvu a vyvíjí schémata struktury.

Delta MERGE INTO teď podporuje rozlišení polí struktury podle názvu a automatického vývoje schématu pro pole struktur. Pokud je automatický vývoj schématu povolen nastavením spark.databricks.delta.schema.autoMerge.enabled na hodnotu true a INSERTUPDATE klauzule přeloží pole struktury uvnitř pole podle názvu, přetypování na odpovídající datový typ definovaný v cílovém poli a vyplnění dalších nebo chybějících polí ve zdroji nebo cíli hodnotami null. Pokud je automatický vývoj schématu zakázaný a INSERT klauzule přeloží pole struktury uvnitř pole podle názvu, UPDATE ale nebudou moct vyvíjet další pole. Viz Automatický vývoj schématu pro pole struktur.

Opravy chyb

  • Opravili jsme nevracení paměti v konektoru Amazon S3, ke kterému mohlo dojít v dlouhotrvajících úlohách nebo službách, což způsobilo funkce JVM DeleteOnExit .

Upgrady knihoven

  • Upgradované knihovny Pythonu:
    • vykreslovat od 4.14.3 do 5.1.0
  • Upgradované knihovny jazyka R:
    • od 4.1.0 do 4.1.1
    • bslib od 0.2.5.1 do 0.3.0
    • cachem from 1.0.5 to 1.0.6
    • kompilátor z verze 4.1.0 do 4.1.1
    • datové sady od 4.1.0 do 4.1.1
    • budoucí od 1.21.0 do 1.22.1
    • gert od 1.3.1 do 1.3.2
    • grafika od 4.1.0 do 4.1.1
    • grDevices od 4.1.0 do 4.1.1
    • mřížka od 4.1.0 do 4.1.1
  • Upgradované knihovny Java:
    • org.eclipse.jetty od 9.4.36.v20210114 do 9.4.42.v20210604

Apache Spark

Databricks Runtime 9.1 LTS zahrnuje Apache Spark 3.1.2. Tato verze zahrnuje všechny opravy a vylepšení Sparku zahrnuté v Databricks Runtime 9.0 (nepodporované) a také následující další opravy chyb a vylepšení Sparku:

  • [SPARK-36674][SQL] [CHERRY-PICK] Podpora ILIKE - malá a malá písmena nerozlišující LIKE
  • [SPARK-36353][SQL] [3.1] RemoveNoopOperators by měl zachovat výstupní schéma.
  • [SPARK-35876][SQL] [3.1] ArraysZip by měl uchovávat názvy polí, aby se zabránilo opětovnému zápisu analyzátorem nebo optimalizátorem.
  • [SPARK-36398][SQL] Redact sensitive information in Spark Thrift Server log
  • [SPARK-36498][SQL] Změna pořadí vnitřních polí vstupního dotazu v zápisu byName V2
  • [SPARK-36614][JÁDRO] [UŽIVATELSKÉ ROZHRANÍ] Oprava důvodu ztráty exekutoru způsobeného vyřazením z provozu v uživatelském rozhraní
  • [SPARK-36012][SQL] Přidání příznaku null v SHOW CREATE TABLE
  • [SPARK-36509][JÁDRO] Oprava problému, kdy exekutory nejsou nikdy znovu naplánovány, pokud se pracovní proces zastaví v samostatném clusteru
  • [SPARK-36603][JÁDRO] Použití WeakReference ne SoftReference v LevelDB
  • [SPARK-36564][JÁDRO] Oprava hodnoty NullPointerException v LiveRDDDistribution.toApi
  • [SPARK-36086][SQL] [3.1] Alias nahrazení projektu CollapseProject by měl používat název sloupce původu.
  • [SPARK-33527][SQL] Rozšiřte funkci dekódování tak, aby byla konzistentní s hlavními databázemi.
  • [SPARK-36400][SPARK-36398][SQL] [WEBI] Rozpoznávání spark.sql.redaction.string.regex pomocí ThriftServeru
  • [SPARK-34054][JÁDRO] BlockManagerDecommissioner – vyčištění kódu
  • [SPARK-36500][JÁDRO] Oprava úniku souboru temp_shuffle při přerušení úlohy
  • [SPARK-36489][SQL] Agregace funkcí bez klíčů seskupení v tabulkách s jedním kontejnerem vrátí více řádků.
  • [SPARK-36464][JÁDRO] Oprava inicializace proměnné podkladové velikosti v blokuedByteBufferOutputStream pro zápis více než 2 GB dat
  • [SPARK-36339][SQL] [3.0] Odkazy na seskupení, které nejsou součástí agregace, by se měly nahradit
  • [SPARK-36354][JÁDRO] EventLogFileReader by měl přeskočit průběžné adresáře protokolu událostí bez protokolů.
  • [SPARK-36242][JÁDRO] [3.1] Před nastavením úspěchu zajistěte zavření souboru přelití = true v metodě ExternalSorter.spillMemoryIteratorToDisk.
  • [SPARK-36211][PYTHON] Oprava psaní návratové udf hodnoty
  • [SPARK-34222][SQL] Zlepšení pravidla zjednodušení logických pravidel
  • [SPARK-35027][JÁDRO] Zavřete inputStream v FileAppender při zápisu...
  • [SPARK-36269][SQL] Oprava konfigurace pouze nastavení datových sloupců na názvy sloupců Hive
  • [SPARK-36213][SQL] Normalize PartitionSpec for Describe Table Command with PartitionSpec
  • [SPARK-36210][SQL] Zachování pořadí vložení sloupce v Dataset.withColumns
  • [SPARK-36079][SQL] Odhad filtru založený na hodnotě Null by měl vždy být v rozsahu [0, 1]
  • [SPARK-28266][SQL] ConvertToLogicalRelation by neměl při čtení tabulek Hive interpretovat path vlastnost

Aktualizace údržby

Viz aktualizace údržby Databricks Runtime 9.1 LTS.

Prostředí systému

  • Operační systém: Ubuntu 20.04.4 LTS
  • Java: Zulu 8.56.0.21-CA-linux64
  • Scala: 2.12.10
  • Python: 3.8.10
  • R: 4.1.1
  • Delta Lake: 1.0.0

Nainstalované knihovny Pythonu

Knihovna Verze Knihovna Verze Knihovna Verze
Antergos Linux 2015.10 (ISO-Rolling) appdirs 1.4.4 backcall 0.2.0
boto3 1.16.7 botocore 1.19.7 Certifi 2020.12.5
chardet 4.0.0 Cyklovač 0.10.0 Cython 0.29.23
dbus-python 1.2.16 Dekoratér 5.0.6 distlib 0.3.2
informace o distribuci 0.23ubuntu1 přehled omezujících vlastností 1.0.0 filelock 3.0.12
idna 2.10 ipykernel 5.3.4 ipython 7.22.0
ipython-genutils 0.2.0 Jedi 0.17.2 jmespath 0.10.0
joblib 1.0.1 jupyter-client 6.1.12 jupyter-core 4.7.1
verizonsolver 1.3.1 Koaly 1.8.1 matplotlib 3.4.2
numpy 1.19.2 pandas 1.2.4 parso 0.7.0
Patsy 0.5.1 pexpect 4.8.0 pickleshare 0.7.5
Polštář 8.2.0 Pip 21.0.1 plotly 5.1.0
prompt-toolkit 3.0.17 protobuf 3.17.2 psycopg2 2.8.5
ptyprocess 0.7.0 pyarrow 4.0.0 Pygments 2.8.1
PyGObject 3.36.0 pyparsing 2.4.7 python-apt 2.0.0+ubuntu0.20.4.5
python-dateutil 2.8.1 pytz 2020.5 pyzmq 20.0.0
žádosti 2.25.1 requests-unixsocket 0.2.0 s3transfer 0.3.7
scikit-learn 0.24.1 scipy 1.6.2 seaborn 0.11.1
setuptools 52.0.0 Šest 1.15.0 ssh-import-id 5.10
statsmodels 0.12.2 Houževnatost 8.0.1 threadpoolctl 2.1.0
Tornádo 6.1 vlastnosti 5.0.5 bezobslužné upgrady 0,1
urllib3 1.25.11 virtualenv 20.4.1 wcwidth 0.2.5
Kolo 0.36.2

Nainstalované knihovny jazyka R

Knihovny R se instalují ze snímku Microsoft CRAN 2021-09-08.

Knihovna Verze Knihovna Verze Knihovna Verze
askpass 1,1 assertthat 0.2.1 Backports 1.2.1
base 4.1.1 base64enc 0.1-3 bitové 4.0.4
bit64 4.0.5 blob 1.2.2 startování 1.3-28
Vařit 1.0-6 Brio 1.1.2 Koště 0.7.9
bslib 0.3.0 cachem 1.0.6 volající 3.7.0
caret 6.0-88 cellranger 1.1.0 chron 2.3-56
class 7.3-19 Rozhraní příkazového řádku 3.0.1 clipr 0.7.1
cluster 2.1.2 codetools 0.2-18 barevný prostor 2.0-2
commonmark 1,7 – kompilátor 4.1.1 config 0.3.1
cpp11 0.3.1 Pastelka 1.4.1 přihlašovací údaje 1.3.1
Curl 4.3.2 data.table 1.14.0 Power BI 4.1.1
DBI 1.1.1 dbplyr 2.1.1 Desc 1.3.0
devtools 2.4.2 diffobj 0.3.4 Digest 0.6.27
dplyr 1.0.7 dtplyr 1.1.0 tři tečky 0.3.2
evaluate 0,14 fanynky 0.5.0 farver 2.1.0
fastmap 1.1.0 forcats 0.5.1 foreach 1.5.1
Zahraniční 0.8-81 Forge 0.2.0 Fs 1.5.0
Budoucnosti 1.22.1 future.apply 1.8.1 Kloktadlo 1.2.0
Generik 0.1.0 Gert 1.3.2 ggplot2 3.3.5
Gh 1.3.0 gitcreds 0.1.1 glmnet 4.1-2
Globals 0.14.0 Lepidlo 1.4.2 googledrive 2.0.0
googlesheets4 1.0.0 Gower 0.2.2 Grafika 4.1.1
grDevices 4.1.1 Mřížky 4.1.1 gridExtra 2.3
gsubfn 0,7 gtable 0.3.0 Útočiště 2.4.3
highr 0,9 Hms 1.1.0 htmltools 0.5.2
htmlwidgets 1.5.3 httpuv 1.6.2 httr 1.4.2
hwriter 1.3.2 hwriterPlus 1.0-3 Id 1.0.1
Ini 0.3.1 ipred 0.9-11 isoband 0.2.5
Iterátory 1.0.13 jquerylib 0.1.4 jsonlite 1.7.2
KernSmooth 2.23-20 pletení 1.33 Označování 0.4.2
Později 1.3.0 Mříže 0.20-44 Láva 1.6.10
lifecycle 1.0.0 listenv 0.8.0 lubridate 1.7.10
magrittr 2.0.1 Markdown 1,1 MASS 7.3-54
Matrice 1.3-4 memoise 2.0.0 metody 4.1.1
mgcv 1.8-36 Mime 0,11 ModelMetrics 1.2.2.2
modelr 0.1.8 munsell 0.5.0 nlme 3.1-152
nnet 7.3-16 numDeriv 2016.8-1.1 openssl 1.4.5
parallel 4.1.1 paralelně 1.27.0 Pilíř 1.6.2
pkgbuild 1.2.0 pkgconfig 2.0.3 pkgload 1.2.1
plogr 0.2.0 plyr 1.8.6 Chvála 1.0.0
prettyunits 1.1.1 Proc 1.18.0 processx 3.5.2
prodlim 2019.11.13 Průběh 1.2.2 progressr 0.8.0
Sliby 1.2.0.1 proto 1.0.0 Ps 1.6.0
purrr 0.3.4 r2d3 0.2.5 R6 2.5.1
randomForest 4.6-14 rappdirs 0.3.3 Analýza rcmdcheck 1.3.3
RColorBrewer 1.1-2 Rcpp 1.0.7 readr 2.0.1
readxl 1.3.1 recepty 0.1.16 Zápas 1.0.1
rematch2 2.1.2 vzdálená zařízení 2.4.0 reprex 2.0.1
reshape2 1.4.4 rlang 0.4.11 rmarkdown 2.10
RODBC 1.3-18 roxygen2 7.1.1 rpart 4.1-15
rprojroot 2.0.2 Rserve 1.8-8 RSQLite 2.2.8
rstudioapi 0,13 rversions 2.1.1 rvest 1.0.1
Sass 0.4.0 Váhy 1.1.1 selektor 0.4-2
sessioninfo 1.1.1 Obrazec 1.4.6 Lesklé 1.6.0
sourcetools 0.1.7 sparklyr 1.7.1 SparkR 3.1.1
Prostorové 7.3-11 Křivky 4.1.1 sqldf 0.4-11
ČTVEREC 2021.1 Statistiky 4.1.1 Statistiky 4 4.1.1
stringi 1.7.4 stringr 1.4.0 Přežití 3.2-13
sys 3.4 tcltk 4.1.1 TeachingDemos 2.10
testthat 3.0.4 tibble 3.1.4 tidyr 1.1.3
tidyselect 1.1.1 tidyverse 1.3.1 timeDate 3043.102
tinytex 0.33 tools 4.1.1 tzdb 0.1.2
usethis 2.0.1 utf8 1.2.2 utils 4.1.1
Uuid 0.1-4 vctrs 0.3.8 viridisLite 0.4.0
vroom 1.5.4 Waldo 0.3.0 vousa 0,4
withr 2.4.2 xfun 0.25 xml2 1.3.2
xopen 1.0.0 xtable 1.8-4 yaml 2.2.1
Zip 2.2.0

Nainstalované knihovny Java a Scala (verze clusteru Scala 2.12)

ID skupiny ID artefaktu Verze
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws automatické škálování aws-java-sdk 1.11.655
com.amazonaws aws-java-sdk-cloudformation 1.11.655
com.amazonaws aws-java-sdk-cloudfront 1.11.655
com.amazonaws aws-java-sdk-cloudhsm 1.11.655
com.amazonaws aws-java-sdk-cloudsearch 1.11.655
com.amazonaws aws-java-sdk-cloudtrail 1.11.655
com.amazonaws aws-java-sdk-cloudwatch 1.11.655
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.655
com.amazonaws aws-java-sdk-codedeploy 1.11.655
com.amazonaws aws-java-sdk-cognitoidentity 1.11.655
com.amazonaws aws-java-sdk-cognitosync 1.11.655
com.amazonaws aws-java-sdk-config 1.11.655
com.amazonaws aws-java-sdk-core 1.11.655
com.amazonaws aws-java-sdk-datapipeline 1.11.655
com.amazonaws aws-java-sdk-directconnect 1.11.655
com.amazonaws aws-java-sdk-directory 1.11.655
com.amazonaws aws-java-sdk-dynamodb 1.11.655
com.amazonaws aws-java-sdk-ec2 1.11.655
com.amazonaws aws-java-sdk-ecs 1.11.655
com.amazonaws aws-java-sdk-efs 1.11.655
com.amazonaws aws-java-sdk-elasticache 1.11.655
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.655
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.655
com.amazonaws aws-java-sdk-elastictranscoder 1.11.655
com.amazonaws aws-java-sdk-emr 1.11.655
com.amazonaws aws-java-sdk-glacier 1.11.655
com.amazonaws aws-java-sdk-glue 1.11.655
com.amazonaws aws-java-sdk-iam 1.11.655
com.amazonaws aws-java-sdk-importexport 1.11.655
com.amazonaws aws-java-sdk-kinesis 1.11.655
com.amazonaws aws-java-sdk-kms 1.11.655
com.amazonaws aws-java-sdk-lambda 1.11.655
com.amazonaws aws-java-sdk-logs 1.11.655
com.amazonaws aws-java-sdk-machinelearning 1.11.655
com.amazonaws aws-java-sdk-marketplacecommerceanalytics 1.11.655
com.amazonaws aws-java-sdk-marketplacemeteringservice 1.11.655
com.amazonaws aws-java-sdk-opsworks 1.11.655
com.amazonaws aws-java-sdk-rds 1.11.655
com.amazonaws aws-java-sdk-redshift 1.11.655
com.amazonaws aws-java-sdk-route53 1.11.655
com.amazonaws aws-java-sdk-s3 1.11.655
com.amazonaws aws-java-sdk-ses 1.11.655
com.amazonaws aws-java-sdk-simpledb 1.11.655
com.amazonaws aws-java-sdk-simpleworkflow 1.11.655
com.amazonaws aws-java-sdk-sns 1.11.655
com.amazonaws aws-java-sdk-sqs 1.11.655
com.amazonaws aws-java-sdk-ssm 1.11.655
com.amazonaws aws-java-sdk-storagegateway 1.11.655
com.amazonaws aws-java-sdk-sts 1.11.655
com.amazonaws podpora aws-java-sdk-support 1.11.655
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.655
com.amazonaws jmespath-java 1.11.655
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics datový proud 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware Kryo-shaded 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml Spolužák 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.10.0
com.fasterxml.jackson.core jackson-core 2.10.0
com.fasterxml.jackson.core jackson-databind 2.10.0
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.10.0
com.fasterxml.jackson.datatype jackson-datatype-joda 2.10.0
com.fasterxml.jackson.module jackson-module-paranamer 2.10.0
com.fasterxml.jackson.module jackson-module-scala_2.12 2.10.0
com.github.ben-manes.kofein Kofein 2.3.4
com.github.fommil jniloader 1,1
com.github.fommil.netlib core 1.1.2
com.github.fommil.netlib native_ref-java 1,1
com.github.fommil.netlib nativní native_ref javy 1,1
com.github.fommil.netlib native_system-java 1,1
com.github.fommil.netlib nativní native_system javy 1,1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1,1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1,1
com.github.joshelser dropwizard-metrics-hadoop-metrics2-reporter 0.1.2
com.github.luben zstd-jni 1.4.8-1
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.2.4
com.google.crypto.tink Tink 1.6.0
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava Guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 1.4.195
com.helger Profiler 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 9.2.1.jre8
com.ning compress-lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.9.5
com.twitter chill_2.12 0.9.5
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 3.1.0
commons-beanutils commons-beanutils 1.9.4
commons-cli commons-cli 1.2
commons-codec commons-codec 1,10
commons-collections commons-collections 3.2.2
commons-configuration commons-configuration 1.6
commons-dbcp commons-dbcp 1.4
commons-digester commons-digester 1.8
commons-fileupload commons-fileupload 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2,4
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
hive-2.3__hadoop-2.7 jets3t-0.7 liball_deps_2.12
hive-2.3__hadoop-2.7 zookeeper-3.4 liball_deps_2.12
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.10
io.delta delta-sharing-spark_2.12 0.1.0
io.dropwizard.metrics metriky – jádro 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics metriky – kontroly stavu 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics metriky – servlety 4.1.1
io.netty netty-all 4.1.51.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx Kolekcí 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktivace 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transaction jta 1,1
javax.transaction transaction-api 1,1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.5
log4j apache-log4j-extra 1.2.17
log4j log4j 1.2.17
maven-trees hive-2.3__hadoop-2.7 liball_deps_2.12
net.java.dev.jna jna 5.8.0
net.razorvine pyrolit 4.30
net.sf.jpam jpam 1,1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.3
net.snowflake spark-snowflake_2.12 2.9.0-spark_3.1
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8-1
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow arrow-format 2.0.0
org.apache.arrow arrow-memory-core 2.0.0
org.apache.arrow arrow-memory-netty 2.0.0
org.apache.arrow arrow-vector 2.0.0
org.apache.avro Avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.commons commons-compress 1.20
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3,10
org.apache.commons commons-math3 3.4.1
org.apache.commons commons-text 1.6
org.apache.kurátor kurátor-client 2.7.1
org.apache.kurátor kurátor-framework 2.7.1
org.apache.kurátor kurátor-recepty 2.7.1
org.apache.derby Derby 10.12.1.1
org.apache.directory.api api-asn1-api 1.0.0-M20
org.apache.directory.api api-util 1.0.0-M20
org.apache.directory.server apacheds-i18n 2.0.0-M15
org.apache.directory.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop hadoop-annotations 2.7.4
org.apache.hadoop hadoop-auth 2.7.4
org.apache.hadoop hadoop-client 2.7.4
org.apache.hadoop hadoop-common 2.7.4
org.apache.hadoop hadoop-hdfs 2.7.4
org.apache.hadoop hadoop-mapreduce-client-app 2.7.4
org.apache.hadoop hadoop-mapreduce-client-common 2.7.4
org.apache.hadoop hadoop-mapreduce-client-core 2.7.4
org.apache.hadoop hadoop-mapreduce-client-jobclient 2.7.4
org.apache.hadoop hadoop-mapreduce-client-shuffle 2.7.4
org.apache.hadoop hadoop-yarn-api 2.7.4
org.apache.hadoop hadoop-yarn-client 2.7.4
org.apache.hadoop hadoop-yarn-common 2.7.4
org.apache.hadoop hadoop-yarn-server-common 2.7.4
org.apache.hive hive-beeline 2.3.7
org.apache.hive hive-cli 2.3.7
org.apache.hive hive-jdbc 2.3.7
org.apache.hive hive-llap-client 2.3.7
org.apache.hive hive-llap-common 2.3.7
org.apache.hive hive-serde 2.3.7
org.apache.hive hive-shims 2.3.7
org.apache.hive hive-storage-api 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.7
org.apache.hive.shims hive-shims-common 2.3.7
org.apache.hive.shims hive-shims-scheduler 2.3.7
org.apache.htrace htrace-core 3.1.0-inkubační
org.apache.httpcomponents httpclient 4.5.6
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy Ivy 2.4.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.5.12
org.apache.orc orc-mapreduce 1.5.12
org.apache.orc orc-shims 1.5.12
org.apache.parquet parquet-column 1.10.1-databricks9
org.apache.parquet parquet-common 1.10.1-databricks9
org.apache.parquet kódování parquet 1.10.1-databricks9
org.apache.parquet parquet-format 2.4.0
org.apache.parquet parquet-hadoop 1.10.1-databricks9
org.apache.parquet parquet-jackson 1.10.1-databricks9
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm7-shaded 4.15
org.apache.yetus cílové skupiny a poznámky 0.5.0
org.apache.zookeeper zookeeper 3.4.14
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-jaxrs 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.jackson jackson-xc 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino Janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.42.v20210604
org.eclipse.jetty pokračování jetty 9.4.42.v20210604
org.eclipse.jetty jetty-http 9.4.42.v20210604
org.eclipse.jetty jetty-io 9.4.42.v20210604
org.eclipse.jetty jetty-jndi 9.4.42.v20210604
org.eclipse.jetty jetty-plus 9.4.42.v20210604
org.eclipse.jetty jetty-proxy 9.4.42.v20210604
org.eclipse.jetty jetty-security 9.4.42.v20210604
org.eclipse.jetty jetty-server 9.4.42.v20210604
org.eclipse.jetty jetty-servlet 9.4.42.v20210604
org.eclipse.jetty jetty-servlets 9.4.42.v20210604
org.eclipse.jetty jetty-util 9.4.42.v20210604
org.eclipse.jetty jetty-util-ajax 9.4.42.v20210604
org.eclipse.jetty jetty-webapp 9.4.42.v20210604
org.eclipse.jetty jetty-xml 9.4.42.v20210604
org.eclipse.jetty.websocket websocket-api 9.4.42.v20210604
org.eclipse.jetty.websocket websocket-client 9.4.42.v20210604
org.eclipse.jetty.websocket websocket – společné 9.4.42.v20210604
org.eclipse.jetty.websocket websocket-server 9.4.42.v20210604
org.eclipse.jetty.websocket websocket-servlet 9.4.42.v20210604
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.30
org.glassfish.jersey.containers jersey-container-servlet-core 2.30
org.glassfish.jersey.core jersey-client 2.30
org.glassfish.jersey.core žerzejové společné 2.30
org.glassfish.jersey.core jersey-server 2.30
org.glassfish.jersey.inject jersey-hk2 2.30
org.glassfish.jersey.media jersey-media-jaxb 2.30
org.hibernate.validator Hibernate-validator 6.1.0.Final
org.javassist Javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M5
org.json4s json4s-core_2.12 3.7.0-M5
org.json4s json4s-jackson_2.12 3.7.0-M5
org.json4s json4s-scalap_2.12 3.7.0-M5
org.lz4 lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-client 2.2.5
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap RoaringBitmap 0.9.14
org.roaringbitmap Podložky 0.9.14
org.rocksdb rocksdbjni 6.20.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.10
org.scala-lang scala-library_2.12 2.12.10
org.scala-lang scala-reflect_2.12 2.12.10
org.scala-lang.modules scala-collection-compat_2.12 2.1.1
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1.0
org.scalanlp breeze_2.12 1.0
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark Nepoužité 1.0.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.threeten threeten-extra 1.5.0
org.tukaani Xz 1.5
org.typelevel algebra_2.12 2.0.0-M2
org.typelevel kočky-kernel_2.12 2.0.0-M4
org.typelevel machinist_2.12 0.6.8
org.typelevel makro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0-M1
org.typelevel spire-platform_2.12 0.17.0-M1
org.typelevel spire-util_2.12 0.17.0-M1
org.typelevel spire_2.12 0.17.0-M1
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.2
org.yaml snakeyaml 1,24
Oro Oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1
xmlenc xmlenc 0,52