Databricks Runtime 6.3 (stöds inte)

  • Artikel

Databricks släppte den här bilden i januari 2020.

Följande viktig information innehåller information om Databricks Runtime 6.3, som drivs av Apache Spark.

Nya funktioner

Data Lake

Den här versionen introducerar förbättrad samtidighet. De viktigaste funktionerna är:

  • Förbättrad samtidighet för alla Delta Lake-åtgärder – Nu kan du köra fler Delta Lake-åtgärder samtidigt. Delta Lake optimistiska samtidighetskontroll har förbättrats genom att göra konfliktidentifieringen mer detaljerad. Det gör det enklare att köra komplexa arbetsflöden i Delta-tabeller. Till exempel:

    • Kör borttagningar (till exempel för GDPR-efterlevnad) samtidigt på äldre partitioner medan nyare partitioner läggs till.
    • Uppdateringar och sammanslagningar körs samtidigt på olika uppsättningar partitioner.
    • Kör filkomprimering samtidigt med tillägg.

    Se Isoleringsnivåer och skrivkonflikter i Azure Databricks.

  • Förbättrat stöd för filkomprimering – Nu kan du komprimera filer genom att skriva om dem med DataFrameWriter alternativet dataChange inställt på false. Med det här alternativet kan en komprimeringsåtgärd köras samtidigt med andra batch- och strömningsåtgärder. Mer information finns i Komprimera filer .

  • Förbättrade prestanda för sammanfogning endast för infogning – Delta Lake ger nu mer optimerade prestanda för sammanslagningsåtgärder som bara har infogningssatser och inga uppdateringssatser. Dessutom säkerställer Delta Lake att skrivningar från sådana infogade sammanslagningar endast lägger till nya data i tabellen. Därför kan du nu använda Structured Streaming och infogade sammanslagningar för att utföra kontinuerlig deduplicering av data (till exempel loggar). Mer information finns i Datadeduplicering när du skriver till Delta-tabeller .

Lägg till ytterligare portar för att tillåta listan när processisolering är aktiverat

Kommentar

Den här artikeln innehåller referenser till termen vitlista, en term som Azure Databricks inte använder. När termen tas bort från programvaran tar vi bort den från den här artikeln.

När du aktiverar säkerhetsfunktioner som tabell-ACL:er eller genomströmning av autentiseringsuppgifter i klustret kan du nu ange ytterligare utgående portar som du vill att Python-processer ska kunna komma åt genom att ställa in Spark-konfigurationenspark.databricks.pyspark.iptable.outbound.whitelisted.ports på de portar som ska tillåtas. Det format som stöds för konfigurationsvärdet är [port[:port][,port[:port]]...], till exempel: 21,22,9000:9999. Porten måste ligga inom det giltiga intervallet, dvs. 0–65535.

Inaktivera jobbutdata för Scala-jobb

Jobbutdata, till exempel loggutdata som skickas till stdout, omfattas av en storleksgräns på 20 MB. Du kan förhindra att stdout returneras från drivrutinen till Azure Databricks genom att ange Spark-konfigurationen spark.databricks.driver.disableScalaOutput till true. Flaggan styr cellutdata för Scala JAR-jobb och Scala-notebook-filer. Se Storleksgränser för utdata för JAR-jobb.

Infogade Matplotlib-siffror stöds nu i Azure Databricks-notebook-filer (offentlig förhandsversion)

Nu kan du automatiskt visa Matplotlib-siffror utan att behöva skicka figuren display till metoden. Mer information finns i Matplotlib.

Ny parameter har lagts till i Azure Synapse Analytics

Parametern applicationName anges som standard till Databricks-User-Query. Standardvärdet hindrar Azure DB-övervakningsverktyget från att skapa falska SQL-inmatningsaviseringar mot frågor. Om det inte anges eller om värdet är en tom sträng läggs standardvärdet för taggen till i JDBC-URL:en. Se Alternativreferens för Azure Databricks Synapse-anslutningsprogram.

Förbättringar

  • shutil.copytree fungerar nu för /dbfs.
  • När du kör produktionsjobb för strukturerad direktuppspelning i kluster med hög samtidighet misslyckas ibland omstarter av ett jobb, eftersom det jobb som tidigare kördes inte avslutades korrekt. För att säkerställa att den föregående körningen stoppas anger du SQL-konfigurationen spark.sql.streaming.stopActiveRunOnRestart true i klustret. Om strömmen inte kan stoppas korrekt utlöses ett timeout-undantag om 15 sekunder. I det här fallet rekommenderar vi att du startar om klustret.
  • Uppgraderade flera installerade R-bibliotek. Se Installerade R-bibliotek.

Apache Spark

Databricks Runtime 6.3 innehåller Apache Spark 2.4.4. Den här versionen innehåller alla Spark-korrigeringar och förbättringar som ingår i Databricks Runtime 6.2 (stöds inte) samt följande ytterligare felkorrigeringar och förbättringar som gjorts i Spark:

  • [SPARK-30198][CORE] BytesToBytesMap växer inte den interna långa matrisen som förväntat
  • [SPARK-29918][SQL] RecordBinaryComparator bör kontrollera endianness jämfört med lång
  • [SPARK-30274][CORE] Undvik bytesToBytesMap-sökningen låser sig för alltid när du håller nycklar som når maximal kapacitet
  • [SPARK-25392][CORE] [WEBUI] Förhindra felsida vid åtkomst till poolsidan från historikservern
  • [SPARK-30263][CORE] Logga inte potentiellt känsliga värden för icke-Spark-egenskaper som ignoreras i spark-submit
  • [SPARK-28637][SQL] Stödintervalltyp för Thriftserver
  • [SPARK-30238][SQL] hive-partitionsrensning kan bara stödja sträng- och integraltyper
  • [SPARK-30198][CORE] BytesToBytesMap växer inte den interna långa matrisen som förväntat
  • [SPARK-24666][ML] Åtgärda oändlighetsvektorer som skapas av Word2Vec när numIterations är stora
  • [SPARK-30129][CORE] Ange klientens ID i TransportClient efter lyckad autentisering
  • [SPARK-30050][SQL] analysera tabellen och byt namn på tabellen bör inte radera information om hive-tabell bucketing
  • [SPARK-28152][SQL] Mappade ShortType till SMALLINT och FloatType till REAL för MsSqlServerDialect
  • [SPARK-29971][CORE] Åtgärda buffertläckor i TransportFrameDecoder/TransportCipher
  • [SPARK-29970][WEBUI] Bevarar öppet/nära tillstånd för tidslinjevy
  • [SPARK-29949][SQL] Åtgärda formatering av tidsstämplar av JSON/CSV-datakällor
  • [SPARK-27558][CORE] Rensningsaktiviteten rensas korrekt när den misslyckas med OOM-undantag
  • [SPARK-29758][SQL] Åtgärda trunkering av begärda strängfält i json_tuple
  • [SPARK-29949][SQL] Åtgärda formatering av tidsstämplar av JSON/CSV-datakällor
  • [SPARK-29936][R] Åtgärda Fel med SparkR-lint och lägg till Lint-r GitHub Action
  • [SPARK-29904][SQL] Parsa tidsstämplar i mikrosekunders precision av JSON/CSV-datakällor
  • [SPARK-29904][SQL] Parsa tidsstämplar i mikrosekunders precision av JSON/CSV-datakällor
  • [SPARK-26499][SQL] JdbcUtils.makeGetter hanterar inte ByteType
  • [SPARK-29682][SQL] Lösa attribut som är i konflikt i Expandera korrekt
  • [SPARK-29875][PYTHON] [SQL] Undvik att använda inaktuella pyarrow.open_stream API i Spark 2.4.x
  • [SPARK-29850][SQL] sort-merge-join en tom tabell bör inte ha minnesläckage
  • [SPARK-28939][SQL] Sprida SQLConf för planer som körs av toRdd

Underhållsuppdateringar

Se Underhållsuppdateringar för Databricks Runtime 6.3.

Systemmiljö

  • Operativsystem: Ubuntu 16.04.6 LTS
  • Java: 1.8.0_252
  • Scala: 2.11.12
  • Python: 3.7.3
  • R: R version 3.6.2 (2019-12-12)
  • Delta lake: 0.5.0

Kommentar

Scala 2.12 är tillgängligt som en experimentell funktion i Apache Spark 2.4, men stöds inte i Databricks Runtime 6.3.

I detta avsnitt:

Installerade Python-bibliotek

Bibliotek Version Bibliotek Version Bibliotek Version
asn1crypto 0.24.0 backcall 0.1.0 Boto 2.49.0
boto3 1.9.162 botocore 1.12.163 Certifi 2019.3.9
Cffi 1.12.2 Chardet 3.0.4 Kryptografi 2.6.1
Apparat 0.10.0 Cython 0.29.6 Dekoratör 4.4.0
Docutils 0,14 idna 2.8 ipykernel 5.1.0
Ipython 7.4.0 ipython-genutils 0.2.0 Jedi 0.13.3
jmespath 0.9.4 jupyter-client 5.2.4 jupyter-core 4.4.0
kiwisolver 1.1.0 matplotlib 3.0.3 Numpy 1.16.2
Pandas 0.24.2 parso 0.3.4 Patsy 0.5.1
Pexpect 4.6.0 pickleshare 0.7.5 Pip 19.0.3
prompt-toolkit 2.0.9 psycopg2 2.7.6.1 ptyprocess 0.6.0
pyarrow 0.13.0 pycparser 2,19 Pycurl 7.43.0
Pygments 2.3.1 Pygobject 3.20.0 Pyopenssl 19.0.0
Pyparsing 2.4.6 PySocks 1.6.8 python-apt 1.1.0.b1+ubuntu0.16.04.5
python-dateutil 2.8.0 pytz 2018.9 pyzmq 18.0.0
begäranden 2.21.0 s3transfer 0.2.1 scikit-learn 0.20.3
Scipy 1.2.1 seaborn 0.9.0 Setuptools 40.8.0
Sex 1.12.0 ssh-import-id 5,5 statsmodels 0.9.0
Tornado 6.0.2 traitlets 4.3.2 obevakade uppgraderingar 0,1
urllib3 1.24.1 Virtualenv 16.4.1 wcwidth 0.1.7
Hjul 0.33.1

Installerade R-bibliotek

Bibliotek Version Bibliotek Version Bibliotek Version
Abind 1.4-5 Askpass 1,1 assertthat 0.2.1
Backports 1.1.5 bas 3.6.2 base64enc 0.1-3
BH 1.69.0-1 bit 1.1-14 bit64 0.9-7
Bitops 1.0-6 blob 1.2.0 start 1.3-23
Brygga 1.0-6 anropare 3.3.2 car 3.0-4
carData 3.0-2 textmarkör 6.0-84 cellranger 1.1.0
Chron 2.3-54 klass 7.3-15 cli 1.1.0
clipr 0.7.0 clisymbols 1.2.0 cluster 2.1.0
Codetools 0.2-16 Färgrymd 1.4-1 commonmark 1,7
Kompilator 3.6.2 config 0,3 covr 3.3.2
Krita 1.3.4 Överhörning 1.0.0 Curl 4.2
data.table 1.12.6 datauppsättningar 3.6.2 DBI 1.0.0
dbplyr 1.4.2 Desc 1.2.0 Devtools 2.2.1
Digest 0.6.22 doMC 1.3.6 dplyr 0.8.3
DT 0,9 ellips 0.3.0 evaluate (utvärdera) 0,14
fansi 0.4.0 fastmap 1.0.1 forcats 0.4.0
foreach 1.4.7 Utländska 0.8-74 Forge 0.2.0
Fs 1.3.1 Gbm 2.1.5 Generika 0.0.2
ggplot2 3.2.1 Gh 1.0.1 git2r 0.26.1
glmnet 2.0-18 Lim 1.3.1 Gower 0.2.1
grafik 3.6.2 grDevices 3.6.2 Rutnät 3.6.2
gridExtra 2.3 gsubfn 0,7 gtable 0.3.0
H2o 3.26.0.2 Tillflyktsort 2.1.1 Hms 0.5.1
htmltools 0.4.0 htmlwidgets 1.5.1 httpuv 1.5.2
httr 1.4.1 hwriter 1.3.2 hwriterPlus 1.0-3
Ini 0.3.1 Ipred 0.9-9 Iteratorer 1.0.12
jsonlite 1.6 Kernsmooth 2.23-16 Märkning 0,3
Senare 1.0.0 Galler 0.20-38 Lava 1.6.6
lazyeval 0.2.2 livscykel 0.1.0 Littler 0.3.9
lme4 1.1-21 lubridate 1.7.4 magrittr 1.5
Mapproj 1.2.6 Kartor 3.3.0 maptools 0.9-8
MASSACHUSETTS 7.3-51.5 Matris 1.2-18 MatrixModels 0.4-1
pmise 1.1.0 metoder 3.6.2 Mgcv 1.8-31
Mime 0,7 minqa 1.2.4 ModelMetrics 1.2.2
munsell 0.5.0 Mvtnorm 1.0-11 Nlme 3.1-143
nloptr 1.2.1 Nnet 7.3-12 numDeriv 2016.8-1.1
openssl 1.4.1 openxlsx 4.1.2 parallel 3.6.2
pbkrtest 0.4-7 Pelaren 1.4.2 pkgbuild 1.0.6
Pkgconfig 2.0.3 pkgKitten 0.1.5 pkgload 1.0.2
plogr 0.2.0 plyr 1.8.4 Beröm 1.0.0
prettyunits 1.0.2 Proc 1.15.3 processx 3.4.1
prodlim 2018.04.18 Förlopp 1.2.2 Löften 1.1.0
Proto 1.0.0 Ps 1.3.0 Purrr 0.3.3
quantreg 5.51 R.methodsS3 1.7.1 R.oo 1.22.0
R.utils 2.9.0 r2d3 0.2.3 R6 2.4.0
randomForest 4.6-14 rappdirs 0.3.1 rcmdcheck 1.3.3
Rcolorbrewer 1.1-2 Rcpp 1.0.2 RcppEigen 0.3.3.5.0
RCurl 1.95-4.12 readr 1.3.1 readxl 1.3.1
recept 0.1.7 Returmatch 1.0.1 Fjärrkontroller 2.1.0
omforma2 1.4.3 Rex 1.1.2 Rio 0.5.16
rlang 0.4.1 RODBC 1.3-16 roxygen2 6.1.1
Rpart 4.1-15 rprojroot 1.3-2 Rserve 1.8-6
RSQLite 2.1.2 rstudioapi 0.10 rversioner 2.0.0
Skalor 1.0.0 sessioninfo 1.1.1 Blanka 1.4.0
sourcetools 0.1.7 Sp 1.3-1 sparklyr 1.0.4
SparkR 2.4.5 SparseM 1.77 Rumsliga 7.3-11
Splines 3.6.2 sqldf 0.4-11 SQUAREM 2017.10-1
statmod 1.4.32 Statistik 3.6.2 stats4 3.6.2
stringi 1.4.3 stringr 1.4.0 Överlevnad 2.44-1.1
sys 3.3 Tcltk 3.6.2 TeachingDemos 2.10
testthat 2.2.1 Tibble 2.1.3 tidyr 1.0.0
avmarkera 0.2.5 Timedate 3043.102 verktyg 3.6.2
usethis 1.5.1 utf8 1.1.4 verktyg 3.6.2
vctrs 0.2.0 viridisLite 0.3.0 Morrhår 0,4
withr 2.1.2 xml2 1.2.2 xopen 1.0.0
xtable 1.8-4 Yaml 2.2.0 zeallot 0.1.0
Zip 2.0.4

Installerade Java- och Scala-bibliotek (Scala 2.11-klusterversion)

Grupp-ID Artefakt-ID Version
Antlr Antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.8.10
com.amazonaws aws-java-sdk-autoscaling 1.11.595
com.amazonaws aws-java-sdk-cloudformation 1.11.595
com.amazonaws aws-java-sdk-cloudfront 1.11.595
com.amazonaws aws-java-sdk-cloudhsm 1.11.595
com.amazonaws aws-java-sdk-cloudsearch 1.11.595
com.amazonaws aws-java-sdk-cloudtrail 1.11.595
com.amazonaws aws-java-sdk-cloudwatch 1.11.595
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.595
com.amazonaws aws-java-sdk-codedeploy 1.11.595
com.amazonaws aws-java-sdk-cognitoidentity 1.11.595
com.amazonaws aws-java-sdk-cognitosync 1.11.595
com.amazonaws aws-java-sdk-config 1.11.595
com.amazonaws aws-java-sdk-core 1.11.595
com.amazonaws aws-java-sdk-datapipeline 1.11.595
com.amazonaws aws-java-sdk-directconnect 1.11.595
com.amazonaws aws-java-sdk-directory 1.11.595
com.amazonaws aws-java-sdk-dynamodb 1.11.595
com.amazonaws aws-java-sdk-ec2 1.11.595
com.amazonaws aws-java-sdk-ecs 1.11.595
com.amazonaws aws-java-sdk-efs 1.11.595
com.amazonaws aws-java-sdk-elasticache 1.11.595
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.595
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.595
com.amazonaws aws-java-sdk-elastictranscoder 1.11.595
com.amazonaws aws-java-sdk-emr 1.11.595
com.amazonaws aws-java-sdk-glacier 1.11.595
com.amazonaws aws-java-sdk-glue 1.11.595
com.amazonaws aws-java-sdk-iam 1.11.595
com.amazonaws aws-java-sdk-importexport 1.11.595
com.amazonaws aws-java-sdk-kinesis 1.11.595
com.amazonaws aws-java-sdk-kms 1.11.595
com.amazonaws aws-java-sdk-lambda 1.11.595
com.amazonaws aws-java-sdk-logs 1.11.595
com.amazonaws aws-java-sdk-machinelearning 1.11.595
com.amazonaws aws-java-sdk-opsworks 1.11.595
com.amazonaws aws-java-sdk-rds 1.11.595
com.amazonaws aws-java-sdk-redshift 1.11.595
com.amazonaws aws-java-sdk-route53 1.11.595
com.amazonaws aws-java-sdk-s3 1.11.595
com.amazonaws aws-java-sdk-ses 1.11.595
com.amazonaws aws-java-sdk-simpledb 1.11.595
com.amazonaws aws-java-sdk-simpleworkflow 1.11.595
com.amazonaws aws-java-sdk-sns 1.11.595
com.amazonaws aws-java-sdk-sqs 1.11.595
com.amazonaws aws-java-sdk-ssm 1.11.595
com.amazonaws aws-java-sdk-storagegateway 1.11.595
com.amazonaws aws-java-sdk-sts 1.11.595
com.amazonaws aws-java-sdk-support 1.11.595
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.595
com.amazonaws jmespath-java 1.11.595
com.carrotsearch hppc 0.7.2
com.chuusai shapeless_2.11 2.3.2
com.clearspring.analytics Stream 2.7.0
com.databricks Rserve 1.8-3
com.databricks dbml-local_2.11 0.5.0-db8-spark2.4
com.databricks dbml-local_2.11-tests 0.5.0-db8-spark2.4
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.11 0.4.15-9
com.databricks.scalapb scalapb-runtime_2.11 0.4.15-9
com.esotericsoftware kryo-skuggad 4.0.2
com.esotericsoftware Minlog 1.3.0
com.fasterxml Klasskamrat 1.0.0
com.fasterxml.jackson.core jackson-anteckningar 2.6.7
com.fasterxml.jackson.core jackson-core 2.6.7
com.fasterxml.jackson.core jackson-databind 2.6.7.1
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.6.7
com.fasterxml.jackson.datatype jackson-datatype-joda 2.6.7
com.fasterxml.jackson.module jackson-module-paranamer 2.6.7
com.fasterxml.jackson.module jackson-module-scala_2.11 2.6.7.1
com.github.fommil jniloader 1,1
com.github.fommil.netlib kärna 1.1.2
com.github.fommil.netlib native_ref-java 1,1
com.github.fommil.netlib native_ref-java-natives 1,1
com.github.fommil.netlib native_system-java 1,1
com.github.fommil.netlib native_system-java-natives 1,1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1,1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1,1
com.github.luben zstd-jni 1.3.2-2
com.github.rwl jtransforms 2.4.0
com.google.code.findbugs jsr305 2.0.1
com.google.code.gson gson 2.2.4
com.google.guava Guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.googlecode.javaewah JavaEWAH 0.3.2
com.h2database h2 1.3.174
com.jcraft Jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.microsoft.azure azure-data-lake-store-sdk 2.2.8
com.microsoft.azure azure-lagring 7.0.0
com.microsoft.sqlserver mssql-jdbc 6.2.2.jre8
com.ning compress-lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.11 0,3
com.twitter chill-java 0.9.3
com.twitter chill_2.11 0.9.3
com.twitter parquet-hadoop-bundle 1.6.0
com.twitter util-app_2.11 6.23.0
com.twitter util-core_2.11 6.23.0
com.twitter util-jvm_2.11 6.23.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging-api_2.11 2.1.2
com.typesafe.scala-logging scala-logging-slf4j_2.11 2.1.2
com.univocity univocity-parsers 2.7.3
com.vlkan flatbuffers 1.2.0-3f79e055
com.zaxxer HikariCP 3.1.0
commons-beanutils commons-beanutils 1.9.4
commons-cli commons-cli 1.2
commons-codec commons-codec 1.10
commons-collections commons-collections 3.2.2
commons-configuration commons-configuration 1.6
commons-dbcp commons-dbcp 1.4
commons-digester commons-digester 1.8
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.4
commons-lang commons-lang 2,6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
info.ganglia.gmetric4j gmetric4j 1.0.7
io.airlift aircompressor 0.10
io.dropwizard.metrics metrics-core 3.1.5
io.dropwizard.metrics metrics-ganglia 3.1.5
io.dropwizard.metrics metrics-graphite 3.1.5
io.dropwizard.metrics metrics-healthchecks 3.1.5
io.dropwizard.metrics metrics-jetty9 3.1.5
io.dropwizard.metrics metrics-json 3.1.5
io.dropwizard.metrics metrics-jvm 3.1.5
io.dropwizard.metrics metrics-log4j 3.1.5
io.dropwizard.metrics metrics-servlets 3.1.5
io.netty Netty 3.9.9.Final
io.netty netty-all 4.1.42.Final
javax.activation aktivering 1.1.1
javax.annotation javax.annotation-api 1.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transaction Jta 1,1
javax.validation validation-api 1.1.0.Final
javax.ws.rs javax.ws.rs-api 2.0.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
Jline Jline 2.14.6
joda-time joda-time 2.9.3
Junit Junit 4.12
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
net.hydromatic eigenbase-properties 1.1.5
net.razorvine pyrolit 4.13
net.sf.jpam jpam 1,1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.12.0
net.snowflake spark-snowflake_2.11 2.5.9-spark_2.4
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt oncrpc 1.0.7
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.4
org.antlr antlr4-runtime 4.7
org.antlr stringtemplate 3.2.1
org.apache.ant Ant 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow pilformat 0.10.0
org.apache.arrow pilminne 0.10.0
org.apache.arrow pilvektor 0.10.0
org.apache.avro Avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.calcite calcite-avatica 1.2.0-inkubering
org.apache.calcite calcite-core 1.2.0-inkubering
org.apache.calcite calcite-linq4j 1.2.0-inkubering
org.apache.commons commons-compress 1.8.1
org.apache.commons commons-crypto 1.0.0
org.apache.commons commons-lang3 3.5
org.apache.commons commons-math3 3.4.1
org.apache.curator curator-client 2.7.1
org.apache.curator curator-framework 2.7.1
org.apache.curator curator-recept 2.7.1
org.apache.derby Derby 10.12.1.1
org.apache.directory.api api-asn1-api 1.0.0-M20
org.apache.directory.api api-util 1.0.0-M20
org.apache.directory.server apacheds-i18n 2.0.0-M15
org.apache.directory.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop hadoop-anteckningar 2.7.3
org.apache.hadoop hadoop-auth 2.7.3
org.apache.hadoop hadoop-client 2.7.3
org.apache.hadoop hadoop-common 2.7.3
org.apache.hadoop hadoop-hdfs 2.7.3
org.apache.hadoop hadoop-mapreduce-client-app 2.7.3
org.apache.hadoop hadoop-mapreduce-client-common 2.7.3
org.apache.hadoop hadoop-mapreduce-client-core 2.7.3
org.apache.hadoop hadoop-mapreduce-client-jobclient 2.7.3
org.apache.hadoop hadoop-mapreduce-client-shuffle 2.7.3
org.apache.hadoop hadoop-yarn-api 2.7.3
org.apache.hadoop hadoop-yarn-client 2.7.3
org.apache.hadoop hadoop-yarn-common 2.7.3
org.apache.hadoop hadoop-yarn-server-common 2.7.3
org.apache.htrace htrace-core 3.1.0-inkubering
org.apache.httpcomponents httpclient 4.5.6
org.apache.httpcomponents httpcore 4.4.10
org.apache.ivy Ivy 2.4.0
org.apache.orc orc-core-nohive 1.5.5
org.apache.orc orc-mapreduce-nohive 1.5.5
org.apache.orc orc-shims 1.5.5
org.apache.parquet parquet-column 1.10.1.2-databricks4
org.apache.parquet parquet-common 1.10.1.2-databricks4
org.apache.parquet parquet-kodning 1.10.1.2-databricks4
org.apache.parquet parquet-format 2.4.0
org.apache.parquet parquet-hadoop 1.10.1.2-databricks4
org.apache.parquet parquet-jackson 1.10.1.2-databricks4
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.9.3
org.apache.xbean xbean-asm6-shaded 4.8
org.apache.zookeeper zookeeper 3.4.6
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-jaxrs 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.jackson jackson-xc 1.9.13
org.codehaus.janino commons-compiler 3.0.10
org.codehaus.janino Janino 3.0.10
org.datanucleus datanucleus-api-jdo 3.2.6
org.datanucleus datanucleus-core 3.2.10
org.datanucleus datanucleus-rdbms 3.2.9
org.eclipse.jetty jetty-client 9.3.27.v20190418
org.eclipse.jetty jetty-fortsättning 9.3.27.v20190418
org.eclipse.jetty jetty-http 9.3.27.v20190418
org.eclipse.jetty brygga-io 9.3.27.v20190418
org.eclipse.jetty jetty-jndi 9.3.27.v20190418
org.eclipse.jetty brygga plus 9.3.27.v20190418
org.eclipse.jetty jetty-proxy 9.3.27.v20190418
org.eclipse.jetty jetty-security 9.3.27.v20190418
org.eclipse.jetty brygga-server 9.3.27.v20190418
org.eclipse.jetty brygga-servlet 9.3.27.v20190418
org.eclipse.jetty jetty-servlets 9.3.27.v20190418
org.eclipse.jetty brygga-util 9.3.27.v20190418
org.eclipse.jetty jetty-webapp 9.3.27.v20190418
org.eclipse.jetty jetty-xml 9.3.27.v20190418
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.4.0-b34
org.glassfish.hk2 hk2-locator 2.4.0-b34
org.glassfish.hk2 hk2-utils 2.4.0-b34
org.glassfish.hk2 osgi-resource-locator 1.0.1
org.glassfish.hk2.external aopalliance-repackaged 2.4.0-b34
org.glassfish.hk2.external javax.inject 2.4.0-b34
org.glassfish.jersey.bundles.repackaged jersey-guava 2.22.2
org.glassfish.jersey.containers jersey-container-servlet 2.22.2
org.glassfish.jersey.containers jersey-container-servlet-core 2.22.2
org.glassfish.jersey.core jersey-client 2.22.2
org.glassfish.jersey.core jersey-common 2.22.2
org.glassfish.jersey.core jersey-server 2.22.2
org.glassfish.jersey.media jersey-media-jaxb 2.22.2
org.hamcrest hamcrest-core 1.3
org.hamcrest hamcrest-library 1.3
org.hibernate vilolägesverifierare 5.1.1.Final
org.iq80.snappy Snappy 0.2
org.javassist javassist 3.18.1-GA
org.jboss.logging jboss-logging 3.1.3.GA
org.jdbi jdbi 2.63.1
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.11 3.5.3
org.json4s json4s-core_2.11 3.5.3
org.json4s json4s-jackson_2.11 3.5.3
org.json4s json4s-scalap_2.11 3.5.3
org.lz4 lz4-java 1.4.0
org.mariadb.jdbc mariadb-java-client 2.1.2
org.mockito mockito-core 1.10.19
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap RoaringBitmap 0.7.45
org.roaringbitmap Shims 0.7.45
org.rocksdb rocksdbjni 6.2.2
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.11 2.11.12
org.scala-lang scala-library_2.11 2.11.12
org.scala-lang scala-reflect_2.11 2.11.12
org.scala-lang.modules scala-parser-combinators_2.11 1.1.0
org.scala-lang.modules scala-xml_2.11 1.0.5
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.11 1.12.5
org.scalactic scalactic_2.11 3.0.3
org.scalanlp breeze-macros_2.11 0.13.2
org.scalanlp breeze_2.11 0.13.2
org.scalatest scalatest_2.11 3.0.3
org.slf4j jcl-over-slf4j 1.7.16
org.slf4j jul-to-slf4j 1.7.16
org.slf4j slf4j-api 1.7.16
org.slf4j slf4j-log4j12 1.7.16
org.spark-project.hive hive-beeline 1.2.1.spark2
org.spark-project.hive hive-cli 1.2.1.spark2
org.spark-project.hive hive-jdbc 1.2.1.spark2
org.spark-project.hive hive-metaarkiv 1.2.1.spark2
org.spark-project.spark Oanvända 1.0.0
org.spire-math spire-macros_2.11 0.13.0
org.spire-math spire_2.11 0.13.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.tukaani Xz 1.5
org.typelevel machinist_2.11 0.6.1
org.typelevel macro-compat_2.11 1.1.1
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.7.3
org.yaml snakeyaml 1.16
oro oro 2.0.8
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1
xmlenc xmlenc 0,52