Databricks Runtime 7.3 LTS (stöds inte)
Databricks släppte den här bilden i september 2020. Det förklarades som långsiktigt stöd (LTS) i oktober 2020.
Följande viktig information innehåller information om Databricks Runtime 7.3 LTS, som drivs av Apache Spark 3.0.
Hjälp med migrering från Databricks Runtime 6.x finns i Migreringsguiden för Databricks Runtime 7.x (stöds inte).
Nya funktioner
Funktioner och förbättringar i Delta Lake
Den här versionen innehåller följande Delta Lake-funktioner och förbättringar:
I detta avsnitt
- Prestandaoptimeringar i Delta Lake minskar avsevärt omkostnaderna
- Klonade mått är nu tillgängliga
- Förbättringar av Delta Lake
MERGE INTO - Ange den inledande positionen för Delta Lake Structured Streaming-källan
Prestandaoptimeringar i Delta Lake minskar avsevärt omkostnaderna
Den här versionen möjliggör en samling optimeringar som minskar kostnaderna för Delta Lake-åtgärder från sekunder till tiotals millisekunder. För att aktivera dessa optimeringar måste du uppgradera alla kluster som skriver till och läser deltatabellen till Databricks Runtime 7.3 LTS eller senare.
Mer information och varningar finns i Förbättrade kontrollpunkter för frågor med låg svarstid.
Klonade mått är nu tillgängliga
Mått för klonåtgärder registreras nu och kan visas när du kör DESCRIBE HISTORY. Mer information finns i Granska Delta Lake-tabellinformation med beskrivande information.
Förbättringar av Delta Lake MERGE INTO
- Sammanslagning stöder nu valfritt antal
MATCHEDochNOT MATCHEDsatser. - Sammanfoga frågor som ovillkorligt tar bort matchade rader genererar inte längre fel på flera matchningar.
Ange den inledande positionen för Delta Lake Structured Streaming-källan
Delta Lake Structured Streaming-anslutningsappen stöder startingVersion nu och startingTimestamp alternativ för att ange startpunkten för strömningsfrågan utan att bearbeta hela tabellen. Mer information finns i Ange inledande position.
Adaptiv frågekörning
Adaptiv frågekörning (AQE) är ett ramverk för omoptimering av frågor som dynamiskt justerar frågeplaner under körning baserat på insamlad körningsstatistik. AQE är aktiverat som standard i Databricks Runtime 7.3 LTS. Nu kan du prova alla AQE-funktioner. Mer information finns i Körning av anpassningsbara frågor.
Förbättringar
Auto Loader
- Har nu stöd för Azure Data Lake Storage Gen1 i kataloglistningsläge
- Om filformatet är
textellerbinaryFileom du inte längre behöver ange schemat. Eftersom de två filformaten har ett fast schema kan Auto Loader automatiskt använda ett fast schema.
Ny kolumnlängdskontroll för Azure Synapse Analytics-anslutningsappen
Nu kan du använda en ny parameter maxbinlength för att styra kolumnlängden BinaryType för kolumner. Den här parametern översätts som VARBINARY(maxbinlength).
Det tidigare (okonfigurerbara) standardvärdet var VARBINARY(MAX), vilket orsakade problem när du skapade tabeller med binära kolumner och standardindexeringsschemat. Mer specifikt skulle tabellskapandet misslyckas, eftersom standardkolumnlagringsindexet inte stöder MAX i strängen och binära kolumner.
Pandas till Spark DataFrame-konvertering förenklad
Om du vill aktivera följande förbättringar anger du Spark-konfigurationen spark.databricks.execution.pandasZeroConfConversion.enabled:
createDataFrame(pandas_df)har optimerats på Azure Databricks.- En varning visas om konverteringen inte kan utföras effektivt eller inte är möjlig.
Nytt maxResultSize i toPandas() samtal
Med en ny konfigurationsinställning (spark.databricks.driver.localMaxResultSize) kan du styra maxResultSize för ett df.toPandas() anrop. Gränsen ändras tillfälligt till max(spark.driver.maxResultSize, spark.databricks.driver.localMaxResultSize). Standardvärdet för konfigurationsinställningen är den fysiska minnesstorleken dividerad med 4.
En varning visas om resultatstorleken df.toPandas() är större än spark.driver.maxResultSize och mindre än spark.databricks.driver.localMaxResultSize.
Den här konfigurationsinställningen påverkar endast DataFrames som skapats av ett df.toPandas() anrop.
Kommentar
spark.databricks.driver.localMaxResultSize börjar gälla endast när spark.databricks.execution.pandasZeroConfConversion.enabled är sant.
Debuggability av Pandas och PySpark UDF:er
När en Pandas- eller PySpark UDF misslyckas i en Azure Databricks-anteckningsbok innehåller felmeddelandet nu radnumret där koden misslyckades och information om rotorsaken.
Biblioteksuppgraderingar
- Uppgraderade Python-bibliotek:
- koalas uppgraderade från 1.1.0 till 1.2.0.
- pyarrow uppgraderad från 0.15.1 till 1.0.1.
- Uppgraderade flera installerade R-bibliotek. Se Installerade R-bibliotek.
- OpenJDK 8-versionen ändras från Ubuntu OpenJDK 8 till Zulu OpenJDK 8.
Apache Spark
Databricks Runtime 7.3 LTS innehåller Apache Spark 3.0.1. Den här versionen innehåller alla Spark-korrigeringar och förbättringar som ingår i Databricks Runtime 7.2 (stöds inte) samt följande ytterligare felkorrigeringar och förbättringar som gjorts i Spark:
- [SPARK-32302][SPARK-28169] [SQL] Delvis push-ned disjunctive predikat via Join/Partitions
- [SPARK-32337] [SQL] Visa den första planen i trädsträngen för AQE-plan
- [SPARK-30662] Lägg tillbaka API-ändringarna för HasBlockSize
- [SPARK-32620] [SQL] Återställa måttet numPartitions när DPP är aktiverat
- [SPARK-32646] [SQL] ORC-predikat-pushdown bör fungera med skiftlägesokänslig analys
- [SPARK-32676] [ML] Åtgärda dubbel cachelagring i KMeans/BiKMeans
- [SPARK-32092] [ML] [PYSPARK] FoldCol-relaterad kod har tagits bort
- [SPARK-32594] [SQL] Åsidosätt
get()och använd Julian days inDaysWritable - [SPARK-32608] [SQL] Värdet FÖR DELIMIT-format för skripttransformeringsRAD bör formatera värdet
- [SPARK-32092] [ML] [PYSPARK] Åtgärda parametrar som inte kopieras i CrossValidatorModel.copy(), read() och write()
- [SPARK-32672] [SQL] Åtgärda skadade data i komprimering av boolesk bituppsättning
- [SPARK-32663] [CORE] Undvik individuell stängning av poolade TransportClients (som måste stängas genom poolen)
- [SPARK-32621] [SQL]-sökvägens alternativ kan orsaka problem vid slutsatsdragning av schema i CSV/JSON-datakällor
- [SPARK-28863] [SQL] Återanvänd inte den fysiska planen
- [SPARK-32608] [SQL] Värdet FÖR DELIMIT-format för skripttransformeringsRAD bör formatera värdet
- [SPARK-28863] [SQL] Introducera AlreadyPlanned för att förhindra omanalys av V1FallbackWriters
- [SPARK-32451] [R] Stöd för Apache Arrow 1.0.0
- [SPARK-32652] [SQL] ObjectSerializerPruning misslyckas för RowEncoder
- [SPARK-32518] [CORE] CoarseGrainedSchedulerBackend.maxNumConcurrentTasks bör överväga alla typer av resurser
- [SPARK-32559] [SQL] Korrigera trimlogik i UTF8String.toInt/toLong hanterade inte icke-ASCII-tecken korrekt
- [SPARK-32625] [SQL] Logga felmeddelande när du återgår till tolkläge
- [SPARK-32543] [R] Ta bort pil::as_tibble användning i SparkR
- [SPARK-31703] [SQL] Parquet RLE float/double läse felaktigt på stora endianska plattformar
- [SPARK-32586] [SQL] Åtgärda felmeddelandet NumberFormatException när ansi är aktiverat
- [SPARK-32456] [SS] Kontrollera Distinct genom att anta att den är aggregerad för strukturerad direktuppspelning
- [SPARK-32576] [SQL] Stöd för PostgreSQL-typ
bpcharoch matris av teckentyp - [SPARK-32559] [SQL] Korrigera trimlogik i UTF8String.toInt/toLong hanterade inte icke-ASCII-tecken korrekt
- [SPARK-32560] [SQL] Förbättra undantagsmeddelandet i InsertIntoHiveTable.processInsert
- [SPARK-32546] [SQL] Hämta tabellnamn direkt från Hive-tabeller
- [SPARK-32529] [CORE] Korrigering av Historyserver-logggenomsökningen avbröts av ändring av programstatus
- [SPARK-32003] [CORE] När extern shuffle-tjänst används avregistrerar du utdata för executor vid hämtningsfel efter att kören har förlorats
- [SPARK-32160] [CORE] [PYSPARK] Ändra konfigurationsnamnet för att växla allow/disallow SparkContext i executors
- [SPARK-32160] [CORE] [PYSPARK] Lägg till en konfiguration för att växla tillåt/tillåt inte att skapa SparkContext i köre
- [SPARK-32083] [SQL] AQE bör inte slå samman partitioner för SinglePartition
- [SPARK-32509] [SQL] Ignorera oanvänt DPP True-filter i canonicalization
- [SPARK-32332] [SQL] Stöd för kolumnutbyten
- [SPARK-32227] Åtgärda regressionsfel i load-spark-env.cmd med Spark 3.0.0
- [SPARK-32478] [R] [SQL] Felmeddelande om att schemat inte matchar i gapply med pilvektorisering
- [SPARK-32030] [SQL] Stöd för obegränsade MATCHED- och NOT MATCHED-satser i MERGE INTO i SQL-parsern
- [SPARK-32175] [CORE] Åtgärda ordningen mellan initiering för ExecutorPlugin och start av pulsslagstråd
- [SPARK-32283] [CORE] Kryo bör ha stöd för flera användarregistratorer
- [SPARK-32424] [SQL] Åtgärda tyst dataändring för tidsstämpelparsning om f spill inträffar
- [SPARK-32430] [SQL] Utöka SparkSessionExtensions för att mata in regler i förberedelse av AQE-frågesteg
- [SPARK-32310] [ML] [PYSPARK] STANDARDvärdeparitet för ML-params
- [SPARK-32237] [SQL] Lösa tips i CTE
- [SPARK-32280][SPARK-32372] [SQL] ResolveReferences.dedupRight bör endast skriva om attribut för överordnade noder i konfliktplanen
- [SPARK-32364] [SQL] Lägg till toMap för att returnera originalKarta och dokumentation
- [SPARK-32364] [SQL] Använda CaseInsensitiveMap för DataFrameReader/Writer-alternativ
- [SPARK-32377] [SQL] CaseInsensitiveMap bör vara deterministisk för addition
- [SPARK-32365] [SQL] Lägg till ett gränsvillkor för negativt index i regexp_extract
- [SPARK-32368] [SQL] pathGlobFilter, rekursiveFileLookup och basePath bör respektera skiftlägeskänslighet
- [SPARK-32344] [SQL] Outvärderbar expr är inställd på FIRST/LAST ignoreNullsExpr i distinkta aggregeringar
- [SPARK-32234] [SQL] Spark sql-kommandon misslyckas med att välja orc-tabellerna
Underhållsuppdateringar
Se Underhållsuppdateringar för Databricks Runtime 7.3 LTS.
Systemmiljö
- Operativsystem: Ubuntu 18.04.5 LTS
- Java: Zulu 8.48.0.53-CA-linux64 (version 1.8.0_265-b11)
- Scala: 2.12.10
- Python: 3.7.5
- R: R version 3.6.3 (2020-02-29)
- Delta Lake 0.7.0
Installerade Python-bibliotek
| Bibliotek | Version | Bibliotek | Version | Bibliotek | Version |
|---|---|---|---|---|---|
| asn1crypto | 1.3.0 | backcall | 0.1.0 | boto3 | 1.12.0 |
| botocore | 1.15.0 | Certifi | 2020.6.20 | Cffi | 1.14.0 |
| Chardet | 3.0.4 | Kryptografi | 2.8 | Apparat | 0.10.0 |
| Cython | 0.29.15 | Dekoratör | 4.4.1 | Docutils | 0.15.2 |
| entrypoints | 0,3 | idna | 2.8 | ipykernel | 5.1.4 |
| Ipython | 7.12.0 | ipython-genutils | 0.2.0 | Jedi | 0.14.1 |
| jmespath | 0.10.0 | joblib | 0.14.1 | jupyter-client | 5.3.4 |
| jupyter-core | 4.6.1 | kiwisolver | 1.1.0 | Koalas | 1.2.0 |
| matplotlib | 3.1.3 | Numpy | 1.18.1 | Pandas | 1.0.1 |
| parso | 0.5.2 | Patsy | 0.5.1 | Pexpect | 4.8.0 |
| pickleshare | 0.7.5 | Pip | 20.0.2 | prompt-toolkit | 3.0.3 |
| psycopg2 | 2.8.4 | ptyprocess | 0.6.0 | pyarrow | 1.0.1 |
| pycparser | 2,19 | Pygments | 2.5.2 | Pygobject | 3.26.1 |
| Pyopenssl | 19.1.0 | Pyparsing | 2.4.6 | PySocks | 1.7.1 |
| python-apt | 1.6.5+ubuntu0.3 | python-dateutil | 2.8.1 | pytz | 2019.3 |
| pyzmq | 18.1.1 | begäranden | 2.22.0 | s3transfer | 0.3.3 |
| scikit-learn | 0.22.1 | Scipy | 1.4.1 | seaborn | 0.10.0 |
| Setuptools | 45.2.0 | Sex | 1.14.0 | ssh-import-id | 5.7 |
| statsmodels | 0.11.0 | Tornado | 6.0.3 | traitlets | 4.3.3 |
| obevakade uppgraderingar | 0,1 | urllib3 | 1.25.8 | Virtualenv | 16.7.10 |
| wcwidth | 0.1.8 | Hjul | 0.34.2 |
Installerade R-bibliotek
R-bibliotek installeras från Microsoft CRAN-ögonblicksbilden 2020-07-14.
| Bibliotek | Version | Bibliotek | Version | Bibliotek | Version |
|---|---|---|---|---|---|
| Askpass | 1,1 | assertthat | 0.2.1 | Backports | 1.1.8 |
| bas | 3.6.3 | base64enc | 0.1-3 | BH | 1.72.0-3 |
| bit | 1.1-15.2 | bit64 | 0.9-7 | blob | 1.2.1 |
| start | 1.3-25 | Brygga | 1.0-6 | Kvast | 0.7.0 |
| anropare | 3.4.3 | textmarkör | 6.0-86 | cellranger | 1.1.0 |
| Chron | 2.3-55 | klass | 7.3-17 | cli | 2.0.2 |
| clipr | 0.7.0 | cluster | 2.1.0 | Codetools | 0.2-16 |
| Färgrymd | 1.4-1 | commonmark | 1,7 | Kompilator | 3.6.3 |
| config | 0,3 | covr | 3.5.0 | Krita | 1.3.4 |
| Överhörning | 1.1.0.1 | Curl | 4.3 | data.table | 1.12.8 |
| datauppsättningar | 3.6.3 | DBI | 1.1.0 | dbplyr | 1.4.4 |
| Desc | 1.2.0 | Devtools | 2.3.0 | Digest | 0.6.25 |
| dplyr | 0.8.5 | DT | 0,14 | ellips | 0.3.1 |
| evaluate (utvärdera) | 0,14 | fansi | 0.4.1 | farver | 2.0.3 |
| fastmap | 1.0.1 | forcats | 0.5.0 | foreach | 1.5.0 |
| Utländska | 0.8-76 | Forge | 0.2.0 | Fs | 1.4.2 |
| Generika | 0.0.2 | ggplot2 | 3.3.2 | Gh | 1.1.0 |
| git2r | 0.27.1 | glmnet | 3.0-2 | Globals | 0.12.5 |
| Lim | 1.4.1 | Gower | 0.2.2 | grafik | 3.6.3 |
| grDevices | 3.6.3 | Rutnät | 3.6.3 | gridExtra | 2.3 |
| gsubfn | 0,7 | gtable | 0.3.0 | Tillflyktsort | 2.3.1 |
| highr | 0,8 | Hms | 0.5.3 | htmltools | 0.5.0 |
| htmlwidgets | 1.5.1 | httpuv | 1.5.4 | httr | 1.4.1 |
| hwriter | 1.3.2 | hwriterPlus | 1.0-3 | Ini | 0.3.1 |
| Ipred | 0.9-9 | isoband | 0.2.2 | Iteratorer | 1.0.12 |
| jsonlite | 1.7.0 | Kernsmooth | 2.23-17 | stickning | 1,29 |
| Märkning | 0,3 | Senare | 1.1.0.1 | Galler | 0.20-41 |
| Lava | 1.6.7 | lazyeval | 0.2.2 | livscykel | 0.2.0 |
| lubridate | 1.7.9 | magrittr | 1.5 | Markdown | 1,1 |
| MASSACHUSETTS | 7.3-52 | Matris | 1.2-18 | pmise | 1.1.0 |
| metoder | 3.6.3 | Mgcv | 1.8-32 | Mime | 0,9 |
| ModelMetrics | 1.2.2.2 | modelr | 0.1.8 | munsell | 0.5.0 |
| Nlme | 3.1-149 | Nnet | 7.3-14 | numDeriv | 2016.8-1.1 |
| openssl | 1.4.2 | parallel | 3.6.3 | Pelaren | 1.4.6 |
| pkgbuild | 1.1.0 | Pkgconfig | 2.0.3 | pkgload | 1.1.0 |
| plogr | 0.2.0 | plyr | 1.8.6 | Beröm | 1.0.0 |
| prettyunits | 1.1.1 | Proc | 1.16.2 | processx | 3.4.3 |
| prodlim | 2019.11.13 | Förlopp | 1.2.2 | Löften | 1.1.1 |
| Proto | 1.0.0 | Ps | 1.3.3 | Purrr | 0.3.4 |
| r2d3 | 0.2.3 | R6 | 2.4.1 | randomForest | 4.6-14 |
| rappdirs | 0.3.1 | rcmdcheck | 1.3.3 | Rcolorbrewer | 1.1-2 |
| Rcpp | 1.0.5 | readr | 1.3.1 | readxl | 1.3.1 |
| recept | 0.1.13 | Returmatch | 1.0.1 | rematch2 | 2.1.2 |
| Fjärrkontroller | 2.1.1 | reprex | 0.3.0 | omforma2 | 1.4.4 |
| Rex | 1.2.0 | rjson | 0.2.20 | rlang | 0.4.7 |
| rmarkdown | 2.3 | RODBC | 1.3-16 | roxygen2 | 7.1.1 |
| Rpart | 4.1-15 | rprojroot | 1.3-2 | Rserve | 1.8-7 |
| RSQLite | 2.2.0 | rstudioapi | 0,11 | rversioner | 2.0.2 |
| rvest | 0.3.5 | Skalor | 1.1.1 | väljare | 0.4-2 |
| sessioninfo | 1.1.1 | Form | 1.4.4 | Blanka | 1.5.0 |
| sourcetools | 0.1.7 | sparklyr | 1.3.1 | SparkR | 3.0.0 |
| Rumsliga | 7.3-11 | Splines | 3.6.3 | sqldf | 0.4-11 |
| SQUAREM | 2020.3 | Statistik | 3.6.3 | stats4 | 3.6.3 |
| stringi | 1.4.6 | stringr | 1.4.0 | Överlevnad | 3.1-12 |
| sys | 3.3 | Tcltk | 3.6.3 | TeachingDemos | 2.10 |
| testthat | 2.3.2 | Tibble | 3.0.3 | tidyr | 1.1.0 |
| avmarkera | 1.1.0 | tidyverse | 1.3.0 | Timedate | 3043.102 |
| tinytex | 0,24 | verktyg | 3.6.3 | usethis | 1.6.1 |
| utf8 | 1.1.4 | verktyg | 3.6.3 | uuid | 0.1-4 |
| vctrs | 0.3.1 | viridisLite | 0.3.0 | Morrhår | 0,4 |
| withr | 2.2.0 | xfun | 0,15 | xml2 | 1.3.2 |
| xopen | 1.0.0 | xtable | 1.8-4 | Yaml | 2.2.1 |
Installerade Java- och Scala-bibliotek (Scala 2.12-klusterversion)
| Grupp-ID | Artefakt-ID | Version |
|---|---|---|
| Antlr | Antlr | 2.7.7 |
| com.amazonaws | amazon-kinesis-client | 1.12.0 |
| com.amazonaws | aws-java-sdk-autoscaling | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.655 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.655 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.655 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.655 |
| com.amazonaws | aws-java-sdk-config | 1.11.655 |
| com.amazonaws | aws-java-sdk-core | 1.11.655 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.655 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.655 |
| com.amazonaws | aws-java-sdk-directory | 1.11.655 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.655 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.655 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.655 |
| com.amazonaws | aws-java-sdk-efs | 1.11.655 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.655 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.655 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.655 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.655 |
| com.amazonaws | aws-java-sdk-emr | 1.11.655 |
| com.amazonaws | aws-java-sdk-glacier | 1.11.655 |
| com.amazonaws | aws-java-sdk-iam | 1.11.655 |
| com.amazonaws | aws-java-sdk-importexport | 1.11.655 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.655 |
| com.amazonaws | aws-java-sdk-kms | 1.11.655 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.655 |
| com.amazonaws | aws-java-sdk-logs | 1.11.655 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.11.655 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.655 |
| com.amazonaws | aws-java-sdk-rds | 1.11.655 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.655 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.655 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.655 |
| com.amazonaws | aws-java-sdk-ses | 1.11.655 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.655 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.655 |
| com.amazonaws | aws-java-sdk-sns | 1.11.655 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.655 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.655 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.11.655 |
| com.amazonaws | aws-java-sdk-sts | 1.11.655 |
| com.amazonaws | aws-java-sdk-support | 1.11.655 |
| com.amazonaws | aws-java-sdk-swf-libraries | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.655 |
| com.amazonaws | jmespath-java | 1.11.655 |
| com.chuusai | shapeless_2.12 | 2.3.3 |
| com.clearspring.analytics | Stream | 2.9.6 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.12 | 0.4.15-10 |
| com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
| com.esotericsoftware | kryo-skuggad | 4.0.2 |
| com.esotericsoftware | Minlog | 1.3.0 |
| com.fasterxml | Klasskamrat | 1.3.4 |
| com.fasterxml.jackson.core | jackson-anteckningar | 2.10.0 |
| com.fasterxml.jackson.core | jackson-core | 2.10.0 |
| com.fasterxml.jackson.core | jackson-databind | 2.10.0 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.10.0 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.10.0 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.10.0 |
| com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.10.0 |
| com.github.ben-manes.koffein | Koffein | 2.3.4 |
| com.github.fommil | jniloader | 1,1 |
| com.github.fommil.netlib | kärna | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1,1 |
| com.github.fommil.netlib | native_ref-java-natives | 1,1 |
| com.github.fommil.netlib | native_system-java | 1,1 |
| com.github.fommil.netlib | native_system-java-natives | 1,1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1,1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1,1 |
| com.github.joshelser | dropwizard-metrics-hadoop-metrics2-reporter | 0.1.2 |
| com.github.luben | zstd-jni | 1.4.4-3 |
| com.github.wendykierp | JTransforms | 3.1 |
| com.google.code.findbugs | jsr305 | 3.0.0 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.flatbuffers | flatbuffers-java | 1.9.0 |
| com.google.guava | Guava | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.h2database | h2 | 1.4.195 |
| com.helger | profilerare | 1.1.1 |
| com.jcraft | Jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.RELEASE |
| com.lihaoyi | sourcecode_2.12 | 0.1.9 |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.2.8 |
| com.microsoft.sqlserver | mssql-jdbc | 8.2.1.jre8 |
| com.ning | compress-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.tdunning | json | 1.8 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
| com.twitter | chill-java | 0.9.5 |
| com.twitter | chill_2.12 | 0.9.5 |
| com.twitter | util-app_2.12 | 7.1.0 |
| com.twitter | util-core_2.12 | 7.1.0 |
| com.twitter | util-function_2.12 | 7.1.0 |
| com.twitter | util-jvm_2.12 | 7.1.0 |
| com.twitter | util-lint_2.12 | 7.1.0 |
| com.twitter | util-registry_2.12 | 7.1.0 |
| com.twitter | util-stats_2.12 | 7.1.0 |
| com.typesafe | config | 1.2.1 |
| com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
| com.univocity | univocity-parsers | 2.8.3 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.9.4 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1.10 |
| commons-collections | commons-collections | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-fileupload | commons-fileupload | 1.3.3 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.4 |
| commons-lang | commons-lang | 2,6 |
| commons-logging | commons-logging | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
| io.airlift | aircompressor | 0.10 |
| io.dropwizard.metrics | metrics-core | 4.1.1 |
| io.dropwizard.metrics | metrics-graphite | 4.1.1 |
| io.dropwizard.metrics | metrics-healthchecks | 4.1.1 |
| io.dropwizard.metrics | metrics-jetty9 | 4.1.1 |
| io.dropwizard.metrics | metrics-jmx | 4.1.1 |
| io.dropwizard.metrics | metrics-json | 4.1.1 |
| io.dropwizard.metrics | metrics-jvm | 4.1.1 |
| io.dropwizard.metrics | metrics-servlets | 4.1.1 |
| io.netty | netty-all | 4.1.47.Final |
| jakarta.annotation | jakarta.annotation-api | 1.3.5 |
| jakarta.validation | jakarta.validation-api | 2.0.2 |
| jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
| javax.activation | aktivering | 1.1.1 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | Jta | 1,1 |
| javax.transaction | transaction-api | 1,1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| Jline | Jline | 2.14.6 |
| joda-time | joda-time | 2.10.5 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| net.razorvine | pyrolit | 4.30 |
| net.sf.jpam | jpam | 1,1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | snowflake-ingest-sdk | 0.9.6 |
| net.snowflake | snowflake-jdbc | 3.12.8 |
| net.snowflake | spark-snowflake_2.12 | 2.8.1-spark_3.0 |
| net.sourceforge.f2j | arpack_combined_all | 0,1 |
| org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.5.2 |
| org.antlr | antlr4-runtime | 4.7.1 |
| org.antlr | stringtemplate | 3.2.1 |
| org.apache.ant | Ant | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.arrow | pilformat | 0.15.1 |
| org.apache.arrow | pilminne | 0.15.1 |
| org.apache.arrow | pilvektor | 0.15.1 |
| org.apache.avro | Avro | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.commons | commons-compress | 1.8.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.9 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.commons | commons-text | 1.6 |
| org.apache.curator | curator-client | 2.7.1 |
| org.apache.curator | curator-framework | 2.7.1 |
| org.apache.curator | curator-recept | 2.7.1 |
| org.apache.derby | Derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-anteckningar | 2.7.4 |
| org.apache.hadoop | hadoop-auth | 2.7.4 |
| org.apache.hadoop | hadoop-client | 2.7.4 |
| org.apache.hadoop | hadoop-common | 2.7.4 |
| org.apache.hadoop | hadoop-hdfs | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-common | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-core | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.4 |
| org.apache.hive | hive-beeline | 2.3.7 |
| org.apache.hive | hive-cli | 2.3.7 |
| org.apache.hive | hive-common | 2.3.7 |
| org.apache.hive | hive-exec-core | 2.3.7 |
| org.apache.hive | hive-jdbc | 2.3.7 |
| org.apache.hive | hive-llap-client | 2.3.7 |
| org.apache.hive | hive-llap-common | 2.3.7 |
| org.apache.hive | hive-metaarkiv | 2.3.7 |
| org.apache.hive | hive-serde | 2.3.7 |
| org.apache.hive | hive-shims | 2.3.7 |
| org.apache.hive | hive-storage-api | 2.7.1 |
| org.apache.hive | hive-vector-code-gen | 2.3.7 |
| org.apache.hive.shims | hive-shims-0.23 | 2.3.7 |
| org.apache.hive.shims | hive-shims-common | 2.3.7 |
| org.apache.hive.shims | hive-shims-scheduler | 2.3.7 |
| org.apache.htrace | htrace-core | 3.1.0-inkubering |
| org.apache.httpcomponents | httpclient | 4.5.6 |
| org.apache.httpcomponents | httpcore | 4.4.12 |
| org.apache.ivy | Ivy | 2.4.0 |
| org.apache.orc | orc-core | 1.5.10 |
| org.apache.orc | orc-mapreduce | 1.5.10 |
| org.apache.orc | orc-shims | 1.5.10 |
| org.apache.parquet | parquet-column | 1.10.1-databricks6 |
| org.apache.parquet | parquet-common | 1.10.1-databricks6 |
| org.apache.parquet | parquet-kodning | 1.10.1-databricks6 |
| org.apache.parquet | parquet-format | 2.4.0 |
| org.apache.parquet | parquet-hadoop | 1.10.1-databricks6 |
| org.apache.parquet | parquet-jackson | 1.10.1-databricks6 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.12.0 |
| org.apache.velocity | hastighet | 1.5 |
| org.apache.xbean | xbean-asm7-shaded | 4.15 |
| org.apache.yetus | åhörarkommentarer | 0.5.0 |
| org.apache.zookeeper | zookeeper | 3.4.14 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-compiler | 3.0.16 |
| org.codehaus.janino | Janino | 3.0.16 |
| org.datanucleus | datanucleus-api-jdo | 4.2.4 |
| org.datanucleus | datanucleus-core | 4.1.17 |
| org.datanucleus | datanucleus-rdbms | 4.1.19 |
| org.datanucleus | javax.jdo | 3.2.0-m3 |
| org.eclipse.jetty | jetty-client | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-fortsättning | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-http | 9.4.18.v20190429 |
| org.eclipse.jetty | brygga-io | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-jndi | 9.4.18.v20190429 |
| org.eclipse.jetty | brygga plus | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-proxy | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-security | 9.4.18.v20190429 |
| org.eclipse.jetty | brygga-server | 9.4.18.v20190429 |
| org.eclipse.jetty | brygga-servlet | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-servlets | 9.4.18.v20190429 |
| org.eclipse.jetty | brygga-util | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-webapp | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-xml | 9.4.18.v20190429 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.6.1 |
| org.glassfish.hk2 | hk2-locator | 2.6.1 |
| org.glassfish.hk2 | hk2-utils | 2.6.1 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.3 |
| org.glassfish.hk2.external | aopalliance-repackaged | 2.6.1 |
| org.glassfish.hk2.external | jakarta.inject | 2.6.1 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.30 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.30 |
| org.glassfish.jersey.core | jersey-client | 2.30 |
| org.glassfish.jersey.core | jersey-common | 2.30 |
| org.glassfish.jersey.core | jersey-server | 2.30 |
| org.glassfish.jersey.inject | jersey-hk2 | 2.30 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.30 |
| org.hibernate.validator | vilolägesverifierare | 6.1.0.Final |
| org.javassist | javassist | 3.25.0-GA |
| org.jboss.logging | jboss-logging | 3.3.2.Final |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1,7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.12 | 3.6.6 |
| org.json4s | json4s-core_2.12 | 3.6.6 |
| org.json4s | json4s-jackson_2.12 | 3.6.6 |
| org.json4s | json4s-scalap_2.12 | 3.6.6 |
| org.lz4 | lz4-java | 1.7.1 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.7.45 |
| org.roaringbitmap | Shims | 0.7.45 |
| org.rocksdb | rocksdbjni | 6.2.2 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.12 | 2.12.10 |
| org.scala-lang | scala-library_2.12 | 2.12.10 |
| org.scala-lang | scala-reflect_2.12 | 2.12.10 |
| org.scala-lang.modules | scala-collection-compat_2.12 | 2.1.1 |
| org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
| org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
| org.scala-sbt | test-interface | 1.0 |
| org.scalacheck | scalacheck_2.12 | 1.14.2 |
| org.scalactic | scalactic_2.12 | 3.0.8 |
| org.scalanlp | breeze-macros_2.12 | 1.0 |
| org.scalanlp | breeze_2.12 | 1.0 |
| org.scalatest | scalatest_2.12 | 3.0.8 |
| org.slf4j | jcl-over-slf4j | 1.7.30 |
| org.slf4j | jul-to-slf4j | 1.7.30 |
| org.slf4j | slf4j-api | 1.7.30 |
| org.slf4j | slf4j-log4j12 | 1.7.30 |
| org.spark-project.spark | Oanvända | 1.0.0 |
| org.springframework | spring-core | 4.1.4.RELEASE |
| org.springframework | spring-test | 4.1.4.RELEASE |
| org.threeten | threeten-extra | 1.5.0 |
| org.tukaani | Xz | 1.5 |
| org.typelevel | algebra_2.12 | 2.0.0-M2 |
| org.typelevel | cats-kernel_2.12 | 2.0.0-M4 |
| org.typelevel | machinist_2.12 | 0.6.8 |
| org.typelevel | macro-compat_2.12 | 1.1.1 |
| org.typelevel | spire-macros_2.12 | 0.17.0-M1 |
| org.typelevel | spire-platform_2.12 | 0.17.0-M1 |
| org.typelevel | spire-util_2.12 | 0.17.0-M1 |
| org.typelevel | spire_2.12 | 0.17.0-M1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.7.5 |
| org.yaml | snakeyaml | 1,24 |
| oro | oro | 2.0.8 |
| pl.edu.icm | JLargeArrays | 1.5 |
| software.amazon.ion | ion-java | 1.0.2 |
| Stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0,52 |