Databricks Runtime 7.4 (stöds inte)
Databricks släppte den här bilden i november 2020.
Följande viktig information innehåller information om Databricks Runtime 7.4, som drivs av Apache Spark 3.0.
Nya funktioner
I detta avsnitt:
- Funktioner och förbättringar i Delta Lake
- Automatisk inläsare stöder nu delegering av filaviseringsresurser som konfigurerats till administratörer
- Ny
USAGEbehörighet ger administratörer större kontroll över behörigheter för dataåtkomst - DBFS FUSE har nu aktiverats för genomströmningsaktiverade kluster
Funktioner och förbättringar i Delta Lake
Den här versionen innehåller följande Delta Lake-funktioner och förbättringar:
- Med det nya API:et kan Delta Lake verifiera att data som läggs till i en tabell uppfyller begränsningarna
- Med det nya API:et kan du återställa en Delta-tabell till en äldre version av tabellen
- Ny startversion tillåter att endast de senaste ändringarna returneras i en Delta Lake-strömningskälla
- Förbättrad stabilitet i
OPTIMIZE
Med det nya API:et kan Delta Lake verifiera att data som läggs till i en tabell uppfyller begränsningarna
Delta Lake stöder CHECK nu begränsningar. När detta anges verifierar Delta Lake automatiskt att data som läggs till i en tabell uppfyller det angivna uttrycket.
Om du vill lägga till CHECK begränsningar använder du ALTER TABLE ADD CONSTRAINTS kommandot . Mer information finns i Begränsningar för Azure Databricks.
Med det nya API:et kan du återställa en Delta-tabell till en äldre version av tabellen
Nu kan du återställa deltatabellerna till äldre versioner med hjälp RESTORE av kommandot :
SQL
RESTORE <table> TO VERSION AS OF n;
RESTORE <table> TO TIMESTAMP AS OF 'yyyy-MM-dd HH:mm:ss';
Python
from delta.tables import DeltaTable
DeltaTable.forPath(spark, path).restoreToVersion(n)
DeltaTable.forPath(spark, path).restoreToTimestamp('yyyy-MM-dd')
Scala
import io.delta.tables.DeltaTable
DeltaTable.forPath(spark, path).restoreToVersion(n)
DeltaTable.forPath(spark, path).restoreToTimestamp("yyyy-MM-dd")
RESTORE skapar en ny incheckning som återställer alla ändringar som gjorts i tabellen sedan den version som du vill återställa. Alla befintliga data och metadata återställs, vilket inkluderar schemat, begränsningar, strömmande transaktions-ID: er, COPY INTO metadata och tabellprotokollversionen. Mer information finns i Återställa en Delta-tabell.
Ny startversion tillåter att endast de senaste ändringarna returneras i en Delta Lake-strömningskälla
Om du bara vill returnera de senaste ändringarna anger du startingVersion som latest. Mer information finns i Ange inledande position.
Förbättrad stabilitet i OPTIMIZE
OPTIMIZE (utan partitionspredikat) kan skalas till att köras på tabeller med tiotals miljoner små filer. Tidigare kunde Apache Spark-drivrutinen få slut på minne och OPTIMIZE skulle inte slutföras.OPTIMIZE hanterar nu mycket stora tabeller med tiotals miljoner filer.
Automatisk inläsare stöder nu delegering av filaviseringsresurser som konfigurerats till administratörer
Med ett nytt Scala-API kan administratörer konfigurera filaviseringsresurser för automatisk inläsning. Datatekniker kan nu använda sina automatiska inläsningsströmmar med färre behörigheter genom att delegera den första resurskonfigurationen till sina administratörer. Se Konfigurera eller hantera filaviseringsresurser manuellt.
Ny USAGE behörighet ger administratörer större kontroll över behörigheter för dataåtkomst
Om du vill utföra en åtgärd på ett objekt i en databas måste du nu beviljas behörighet för databasen USAGE utöver de behörigheter som krävs för att utföra åtgärden. Behörigheten USAGE beviljas för en databas eller en katalog. Med introduktionen av behörigheten USAGE kan en tabellägare inte längre ensidigt bestämma sig för att dela den med en annan användare. Användaren måste också ha behörigheten USAGE för databasen som innehåller tabellen.
I arbetsytor som har tabellåtkomstkontroll aktiverad users har gruppen automatiskt behörigheten USAGE för roten CATALOG.
Mer information finns i ANVÄNDNINGsprivilegier.
DBFS FUSE har nu aktiverats för genomströmningsaktiverade kluster
Nu kan du läsa och skriva från DBFS med fuse-monteringen när /dbfs/ du använder ett kluster med hög samtidighet aktiverat för genomströmning av autentiseringsuppgifter. Vanliga monteringar stöds. Monteringar som kräver autentiseringsuppgifter för genomströmning stöds inte.
Förbättringar
Spark SQL stöder IFF och CHARINDEX som synonymer för IF och POSITION
I Databricks Runtime IF() är en synonym för CASE WHEN <cond> THEN <expr1> ELSE <expr2> END
Databricks Runtime stöder IFF() nu som synonym för IF()
SELECT IFF(c1 = 1, 'Hello', 'World'), c1 FROM (VALUES (1), (2)) AS T(c1)
=> (Hello, 1)
(World, 2)
CHARINDEX är ett alternativt namn för POSITION funktionen. CHARINDEX hittar positionen för den första förekomsten av en sträng i en annan sträng med ett valfritt startindex.
VALUES(CHARINDEX('he', 'hello from hell', 2))
=> 12
Flera utdata per cell aktiverat för Python-notebook-filer som standard
Databricks Runtime 7.1 introducerade stöd för flera utdata per cell i Python-notebook-filer (och %python-celler i icke-Python-notebook-filer), men du var skyldig att aktivera funktionen för din notebook-fil. Den här funktionen är aktiverad som standard i Databricks Runtime 7.4. Se Visa flera utdata per cell.
Komplettera automatiskt förbättringar för Python-notebook-filer
Automatisk komplettering för Python visar ytterligare typinformation som genereras från statisk analys av koden med hjälp av Jedi-biblioteket. Du kan trycka på tabbtangenten för att se en lista med alternativ.
Förbättrade display Spark ML-vektorer i förhandsversionen av Spark DataFrame
Formatet display visar nu etiketter för vektortyp (gles eller tät), längd, index (för glesa vektorer) och värden.
Andra korrigeringar
- Ett hämtningsproblem har åtgärdats med
collections.namedtuplei notebook-filer. - Ett hämtningsproblem med interaktivt definierade klasser och metoder har åtgärdats.
- Åtgärdade ett fel som gjorde att
mlflow.start_run()anrop misslyckades vid genomströmning eller kluster som aktiverats för tabellåtkomstkontroll.
Biblioteksuppgraderingar
- Uppgraderade Python-bibliotek:
- jedi uppgraderade från 0.14.1 till 0.17.2.
- koalas uppgraderade från 1.2.0 till 1.3.0.
- parso uppgraderad från 0.5.2 till 0.7.0.
- Uppgraderade flera installerade R-bibliotek. Se Installerade R-bibliotek.
Apache Spark
Databricks Runtime 7.4 innehåller Apache Spark 3.0.1. Den här versionen innehåller alla Spark-korrigeringar och förbättringar som ingår i Databricks Runtime 7.3 LTS (stöds inte) samt följande ytterligare felkorrigeringar och förbättringar som gjorts i Spark:
- [SPARK-33170] [SQL] Lägga till SQL-konfiguration för att styra beteende vid snabba fel i FileFormatWriter
- [SPARK-33136] [SQL] Åtgärda felaktigt växlad parameter i V2WriteCommand.outputResolved
- [SPARK-33134] [SQL] Returnera endast partiella resultat för JSON-rotobjekt
- [SPARK-33038] [SQL] Kombinera AQE initial och aktuell plan s...
- [SPARK-33118] [SQL] SKAPA TILLFÄLLIG TABELL misslyckas med platsen
- [SPARK-33101] [ML] Gör så att LibSVM-format sprider Hadoop-konfiguration från DS-alternativ till underliggande HDFS-filsystem
- [SPARK-33035] [SQL] Uppdateringar föråldrade poster för attributmappning i QueryPlan#transformUpWithNewOutput
- [SPARK-33091] [SQL] Undvik att använda karta i stället för foreach för att undvika potentiell biverkning hos anropare av OrcUtils.readCatalystSchema
- [SPARK-33073] [PYTHON] Förbättra felhanteringen på Fel vid Konvertering av Pandas till Pil
- [SPARK-33043] [ML] Hantera spark.driver.maxResultSize=0 i RowMatrix heuristisk beräkning
- [SPARK-29358] [SQL] Gör unionByName valfritt att fylla saknade kolumner med null-värden
- [SPARK-32996] [WEB-UI] Hantera tomma ExecutorMetrics i ExecutorMetricsJsonSerializer
- [SPARK-32585] [SQL] Stöd för scala-uppräkning i ScalaReflection
- [SPARK-33019] [CORE] Använd spark.hadoop.mapreduce.fileoutputcommitter.algorithm.version=1 som standard
- [SPARK-33018] [SQL] Åtgärda problem med uppskattningsstatistik om underordnad har 0 byte
- [SPARK-32901] [CORE] Allokera inte minne när du spiller UnsafeExternalSorter
- [SPARK-33015] [SQL] Använda millisToDays() i ComputeCurrentTime-regeln
- [SPARK-33015] [SQL] Beräkna det aktuella datumet endast en gång
- [SPARK-32999] [SQL] Använd Utils.getSimpleName för att undvika att träffa felaktigt klassnamn i TreeNode
- [SPARK-32659] [SQL] Broadcast-matris i stället för Ange i InSubqueryExec
- [SPARK-32718] [SQL] Ta bort onödiga nyckelord för intervallenheter
- [SPARK-32886] [WEBUI] åtgärdar länken "odefinierad" i händelsetidsvyn
- [SPARK-32898] [CORE] Åtgärda fel executorRunTime när aktiviteten avlivas före verklig start
- [SPARK-32635] [SQL] Lägga till ett nytt testfall i katalysatormodulen
- [SPARK-32930] [CORE] Ersätt inaktuella isFile/isDirectory-metoder
- [SPARK-32906] [SQL] Struct-fältnamn bör inte ändras efter normalisering av flyttal
- [SPARK-24994] [SQL] Lägg till UnwrapCastInBinaryComparison-optimeraren för att förenkla integralliteral
- [SPARK-32635] [SQL] Åtgärda vikbar spridning
- [SPARK-32738] [CORE] Bör minska antalet aktiva trådar om ett allvarligt fel inträffar i
Inbox.process - [SPARK-32900] [CORE] Tillåt att UnsafeExternalSorter spills när det finns null-värden
- [SPARK-32897] [PYTHON] Visa inte en utfasningsvarning på SparkSession.builder.getOrCreate
- [SPARK-32715] [CORE] Åtgärda minnesläcka när det inte gick att lagra sändningsdelar
- [SPARK-32715] [CORE] Åtgärda minnesläcka när det inte gick att lagra sändningsdelar
- [SPARK-32872] [CORE] Förhindra att BytesToBytesMap vid MAX_CAPACITY överskrider tröskelvärdet för tillväxt
- [SPARK-32876] [SQL] Ändra standardåterställningsversioner till 3.0.1 och 2.4.7 i HiveExternalCatalogVersionsSuite
- [SPARK-32840] [SQL] Ogiltigt intervallvärde kan hända att det bara är lim med enheten
- [SPARK-32819] [SQL] ignoreNullability-parametern bör vara effektiv rekursivt
- [SPARK-32832] [SS] Använda CaseInsensitiveMap för DataStreamReader/Writer-alternativ
- [SPARK-32794] [SS] Ett sällsynt hörnfallsfel har åtgärdats i mikrobatchmotorn med vissa tillståndskänsliga frågor + no-data-batchar + V1-källor
- [SPARK-32813] [SQL] Hämta standardkonfigurationen för ParquetSource-vektoriserad läsare om det inte finns någon aktiv SparkSession
- [SPARK-32823] [WEBBGRÄNSSNITT] Åtgärda huvudrapportering för användargränssnittsresurser
- [SPARK-32824] [CORE] Förbättra felmeddelandet när användaren glömmer .amount i en resurskonfiguration
- [SPARK-32614] [SQL] Använd inte kommentarsbearbetning om kommentaren inte har tagits bort för CSV
- [SPARK-32638] [SQL] Korrigerar referenser när du lägger till alias i WidenSetOperationTypes
- [SPARK-32810] [SQL] CSV/JSON-datakällor bör undvika att globba sökvägar vid slutsatsdragning av schema
- [SPARK-32815] [ML] Åtgärda inläsningsfel för LibSVM-datakälla på filsökvägar med globmetadiagram
- [SPARK-32753] [SQL] Kopiera endast taggar till nod utan taggar
- [SPARK-32785] [SQL] Intervall med dinglande delar bör inte resultera i null
- [SPARK-32764] [SQL] -0.0 ska vara lika med 0,0
- [SPARK-32810] [SQL] CSV/JSON-datakällor bör undvika att globba sökvägar vid slutsatsdragning av schema
- [SPARK-32779] [SQL] Undvik att använda synkroniserat API för SessionCatalog i withClient-flödet, detta leder till DeadLock
- [SPARK-32791] [SQL] Tabellmått som inte är partitionerade bör inte ha dynamisk partitionsrensningstid
- [SPARK-32767] [SQL] Bucketkoppling bör fungera om spark.sql.shuffle.partitions är större än bucketnummer
- [SPARK-32788] [SQL] icke-partitionerad tabellgenomsökning bör inte ha partitionsfilter
- [SPARK-32776] [SS] Gränsen för direktuppspelning bör inte optimeras bort av PropagateEmptyRelation
- [SPARK-32624] [SQL] Åtgärda regression i CodegenContext.addReferenceObj på kapslade Scala-typer
- [SPARK-32659] [SQL] Förbättra testet för beskärning av DPP på icke-atomisk typ
- [SPARK-31511] [SQL] Gör BytesToBytesMap-iteratorer trådsäkra
- [SPARK-32693] [SQL] Jämför två dataramar med samma schema förutom egenskapen nullable
- [SPARK-28612] [SQL] Rätt metoddokument för DataFrameWriterV2.replace()
Underhållsuppdateringar
Se Underhållsuppdateringar för Databricks Runtime 7.4.
Systemmiljö
- Operativsystem: Ubuntu 18.04.5 LTS
- Java: Zulu 8.48.0.53-CA-linux64 (version 1.8.0_265-b11)
- Scala: 2.12.10
- Python: 3.7.5
- R: R version 3.6.3 (2020-02-29)
- Delta Lake 0.7.0
Installerade Python-bibliotek
| Bibliotek | Version: | Bibliotek | Version: | Bibliotek | Version: |
|---|---|---|---|---|---|
| asn1crypto | 1.3.0 | backcall | 0.1.0 | boto3 | 1.12.0 |
| botocore | 1.15.0 | Certifi | 2020.6.20 | Cffi | 1.14.0 |
| Chardet | 3.0.4 | Kryptografi | 2.8 | Apparat | 0.10.0 |
| Cython | 0.29.15 | Dekoratör | 4.4.1 | Docutils | 0.15.2 |
| entrypoints | 0,3 | idna | 2.8 | ipykernel | 5.1.4 |
| Ipython | 7.12.0 | ipython-genutils | 0.2.0 | Jedi | 0.17.2 |
| jmespath | 0.10.0 | joblib | 0.14.1 | jupyter-client | 5.3.4 |
| jupyter-core | 4.6.1 | kiwisolver | 1.1.0 | Koalas | 1.3.0 |
| matplotlib | 3.1.3 | Numpy | 1.18.1 | Pandas | 1.0.1 |
| parso | 0.7.0 | Patsy | 0.5.1 | Pexpect | 4.8.0 |
| pickleshare | 0.7.5 | Pip | 20.0.2 | prompt-toolkit | 3.0.3 |
| psycopg2 | 2.8.4 | ptyprocess | 0.6.0 | pyarrow | 1.0.1 |
| pycparser | 2,19 | Pygments | 2.5.2 | Pygobject | 3.26.1 |
| Pyopenssl | 19.1.0 | Pyparsing | 2.4.6 | PySocks | 1.7.1 |
| python-apt | 1.6.5+ubuntu0.3 | python-dateutil | 2.8.1 | pytz | 2019.3 |
| pyzmq | 18.1.1 | begäranden | 2.22.0 | s3transfer | 0.3.3 |
| scikit-learn | 0.22.1 | Scipy | 1.4.1 | seaborn | 0.10.0 |
| Setuptools | 45.2.0 | Sex | 1.14.0 | ssh-import-id | 5.7 |
| statsmodels | 0.11.0 | Tornado | 6.0.3 | traitlets | 4.3.3 |
| obevakade uppgraderingar | 0,1 | urllib3 | 1.25.8 | Virtualenv | 16.7.10 |
| wcwidth | 0.1.8 | Hjul | 0.34.2 |
Installerade R-bibliotek
R-bibliotek installeras från Microsoft CRAN-ögonblicksbild på XXXX-XX-XX.
| Bibliotek | Version: | Bibliotek | Version: | Bibliotek | Version: |
|---|---|---|---|---|---|
| Askpass | 1,1 | assertthat | 0.2.1 | Backports | 1.1.8 |
| bas | 3.6.3 | base64enc | 0.1-3 | BH | 1.72.0-3 |
| bit | 1.1-15.2 | bit64 | 0.9-7 | blob | 1.2.1 |
| start | 1.3-25 | Brygga | 1.0-6 | Kvast | 0.7.0 |
| anropare | 3.4.3 | textmarkör | 6.0-86 | cellranger | 1.1.0 |
| Chron | 2.3-55 | klass | 7.3-17 | cli | 2.0.2 |
| clipr | 0.7.0 | cluster | 2.1.0 | Codetools | 0.2-16 |
| Färgrymd | 1.4-1 | commonmark | 1,7 | Kompilator | 3.6.3 |
| config | 0,3 | covr | 3.5.0 | Krita | 1.3.4 |
| Överhörning | 1.1.0.1 | Curl | 4.3 | data.table | 1.12.8 |
| datauppsättningar | 3.6.3 | DBI | 1.1.0 | dbplyr | 1.4.4 |
| Desc | 1.2.0 | Devtools | 2.3.0 | Digest | 0.6.25 |
| dplyr | 0.8.5 | DT | 0,14 | ellips | 0.3.1 |
| evaluate (utvärdera) | 0,14 | fansi | 0.4.1 | farver | 2.0.3 |
| fastmap | 1.0.1 | forcats | 0.5.0 | för varje | 1.5.0 |
| Utländska | 0.8-76 | Forge | 0.2.0 | Fs | 1.4.2 |
| Generika | 0.0.2 | ggplot2 | 3.3.2 | Gh | 1.1.0 |
| git2r | 0.27.1 | glmnet | 3.0-2 | Globals | 0.12.5 |
| Lim | 1.4.1 | Gower | 0.2.2 | grafik | 3.6.3 |
| grDevices | 3.6.3 | Rutnät | 3.6.3 | gridExtra | 2.3 |
| gsubfn | 0,7 | gtable | 0.3.0 | Tillflyktsort | 2.3.1 |
| highr | 0,8 | Hms | 0.5.3 | htmltools | 0.5.0 |
| htmlwidgets | 1.5.1 | httpuv | 1.5.4 | httr | 1.4.1 |
| hwriter | 1.3.2 | hwriterPlus | 1.0-3 | Ini | 0.3.1 |
| Ipred | 0.9-9 | isoband | 0.2.2 | Iteratorer | 1.0.12 |
| jsonlite | 1.7.0 | Kernsmooth | 2.23-17 | stickning | 1,29 |
| Märkning | 0,3 | Senare | 1.1.0.1 | Galler | 0.20-41 |
| Lava | 1.6.7 | lazyeval | 0.2.2 | livscykel | 0.2.0 |
| lubridate | 1.7.9 | magrittr | 1.5 | Markdown | 1,1 |
| MASSACHUSETTS | 7.3-53 | Matris | 1.2-18 | pmise | 1.1.0 |
| metoder | 3.6.3 | Mgcv | 1.8-33 | Mime | 0,9 |
| ModelMetrics | 1.2.2.2 | modelr | 0.1.8 | munsell | 0.5.0 |
| Nlme | 3.1-149 | Nnet | 7.3-14 | numDeriv | 2016.8-1.1 |
| openssl | 1.4.2 | parallel | 3.6.3 | Pelaren | 1.4.6 |
| pkgbuild | 1.1.0 | Pkgconfig | 2.0.3 | pkgload | 1.1.0 |
| plogr | 0.2.0 | plyr | 1.8.6 | Beröm | 1.0.0 |
| prettyunits | 1.1.1 | Proc | 1.16.2 | processx | 3.4.3 |
| prodlim | 2019.11.13 | Förlopp | 1.2.2 | Löften | 1.1.1 |
| Proto | 1.0.0 | Ps | 1.3.3 | Purrr | 0.3.4 |
| r2d3 | 0.2.3 | R6 | 2.4.1 | randomForest | 4.6-14 |
| rappdirs | 0.3.1 | rcmdcheck | 1.3.3 | Rcolorbrewer | 1.1-2 |
| Rcpp | 1.0.5 | readr | 1.3.1 | readxl | 1.3.1 |
| recept | 0.1.13 | Returmatch | 1.0.1 | rematch2 | 2.1.2 |
| Fjärrkontroller | 2.1.1 | reprex | 0.3.0 | omforma2 | 1.4.4 |
| Rex | 1.2.0 | rjson | 0.2.20 | rlang | 0.4.7 |
| rmarkdown | 2.3 | RODBC | 1.3-16 | roxygen2 | 7.1.1 |
| Rpart | 4.1-15 | rprojroot | 1.3-2 | Rserve | 1.8-7 |
| RSQLite | 2.2.0 | rstudioapi | 0,11 | rversioner | 2.0.2 |
| rvest | 0.3.5 | Skalor | 1.1.1 | väljare | 0.4-2 |
| sessioninfo | 1.1.1 | Form | 1.4.4 | Blanka | 1.5.0 |
| sourcetools | 0.1.7 | sparklyr | 1.3.1 | SparkR | 3.0.0 |
| Rumsliga | 7.3-11 | Splines | 3.6.3 | sqldf | 0.4-11 |
| SQUAREM | 2020.3 | Statistik | 3.6.3 | stats4 | 3.6.3 |
| stringi | 1.4.6 | stringr | 1.4.0 | Överlevnad | 3.2-7 |
| sys | 3.3 | Tcltk | 3.6.3 | TeachingDemos | 2.10 |
| testthat | 2.3.2 | Tibble | 3.0.3 | tidyr | 1.1.0 |
| avmarkera | 1.1.0 | tidyverse | 1.3.0 | Timedate | 3043.102 |
| tinytex | 0,24 | tools | 3.6.3 | usethis | 1.6.1 |
| utf8 | 1.1.4 | verktyg | 3.6.3 | uuid | 0.1-4 |
| vctrs | 0.3.1 | viridisLite | 0.3.0 | Morrhår | 0,4 |
| withr | 2.2.0 | xfun | 0,15 | xml2 | 1.3.2 |
| xopen | 1.0.0 | xtable | 1.8-4 | Yaml | 2.2.1 |
Installerade Java- och Scala-bibliotek (Scala 2.12-klusterversion)
| Grupp-ID | Artefakt-ID | Version: |
|---|---|---|
| Antlr | Antlr | 2.7.7 |
| com.amazonaws | amazon-kinesis-client | 1.12.0 |
| com.amazonaws | aws-java-sdk-autoscaling | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.655 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.655 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.655 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.655 |
| com.amazonaws | aws-java-sdk-config | 1.11.655 |
| com.amazonaws | aws-java-sdk-core | 1.11.655 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.655 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.655 |
| com.amazonaws | aws-java-sdk-directory | 1.11.655 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.655 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.655 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.655 |
| com.amazonaws | aws-java-sdk-efs | 1.11.655 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.655 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.655 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.655 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.655 |
| com.amazonaws | aws-java-sdk-emr | 1.11.655 |
| com.amazonaws | aws-java-sdk-glacier | 1.11.655 |
| com.amazonaws | aws-java-sdk-iam | 1.11.655 |
| com.amazonaws | aws-java-sdk-importexport | 1.11.655 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.655 |
| com.amazonaws | aws-java-sdk-kms | 1.11.655 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.655 |
| com.amazonaws | aws-java-sdk-logs | 1.11.655 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.11.655 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.655 |
| com.amazonaws | aws-java-sdk-rds | 1.11.655 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.655 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.655 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.655 |
| com.amazonaws | aws-java-sdk-ses | 1.11.655 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.655 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.655 |
| com.amazonaws | aws-java-sdk-sns | 1.11.655 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.655 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.655 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.11.655 |
| com.amazonaws | aws-java-sdk-sts | 1.11.655 |
| com.amazonaws | aws-java-sdk-support | 1.11.655 |
| com.amazonaws | aws-java-sdk-swf-libraries | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.655 |
| com.amazonaws | jmespath-java | 1.11.655 |
| com.chuusai | shapeless_2.12 | 2.3.3 |
| com.clearspring.analytics | Stream | 2.9.6 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.12 | 0.4.15-10 |
| com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
| com.esotericsoftware | kryo-skuggad | 4.0.2 |
| com.esotericsoftware | Minlog | 1.3.0 |
| com.fasterxml | Klasskamrat | 1.3.4 |
| com.fasterxml.jackson.core | jackson-anteckningar | 2.10.0 |
| com.fasterxml.jackson.core | jackson-core | 2.10.0 |
| com.fasterxml.jackson.core | jackson-databind | 2.10.0 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.10.0 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.10.0 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.10.0 |
| com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.10.0 |
| com.github.ben-manes.koffein | Koffein | 2.3.4 |
| com.github.fommil | jniloader | 1,1 |
| com.github.fommil.netlib | kärna | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1,1 |
| com.github.fommil.netlib | native_ref-java-natives | 1,1 |
| com.github.fommil.netlib | native_system-java | 1,1 |
| com.github.fommil.netlib | native_system-java-natives | 1,1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1,1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1,1 |
| com.github.joshelser | dropwizard-metrics-hadoop-metrics2-reporter | 0.1.2 |
| com.github.luben | zstd-jni | 1.4.4-3 |
| com.github.wendykierp | JTransforms | 3.1 |
| com.google.code.findbugs | jsr305 | 3.0.0 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.flatbuffers | flatbuffers-java | 1.9.0 |
| com.google.guava | Guava | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.h2database | h2 | 1.4.195 |
| com.helger | profilerare | 1.1.1 |
| com.jcraft | Jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.RELEASE |
| com.lihaoyi | sourcecode_2.12 | 0.1.9 |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.2.8 |
| com.microsoft.sqlserver | mssql-jdbc | 8.2.1.jre8 |
| com.ning | compress-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.tdunning | json | 1.8 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
| com.twitter | chill-java | 0.9.5 |
| com.twitter | chill_2.12 | 0.9.5 |
| com.twitter | util-app_2.12 | 7.1.0 |
| com.twitter | util-core_2.12 | 7.1.0 |
| com.twitter | util-function_2.12 | 7.1.0 |
| com.twitter | util-jvm_2.12 | 7.1.0 |
| com.twitter | util-lint_2.12 | 7.1.0 |
| com.twitter | util-registry_2.12 | 7.1.0 |
| com.twitter | util-stats_2.12 | 7.1.0 |
| com.typesafe | config | 1.2.1 |
| com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
| com.univocity | univocity-parsers | 2.9.0 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.9.4 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1.10 |
| commons-collections | commons-collections | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-fileupload | commons-fileupload | 1.3.3 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.4 |
| commons-lang | commons-lang | 2,6 |
| commons-logging | commons-logging | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
| io.airlift | aircompressor | 0.10 |
| io.dropwizard.metrics | metrics-core | 4.1.1 |
| io.dropwizard.metrics | metrics-graphite | 4.1.1 |
| io.dropwizard.metrics | metrics-healthchecks | 4.1.1 |
| io.dropwizard.metrics | metrics-jetty9 | 4.1.1 |
| io.dropwizard.metrics | metrics-jmx | 4.1.1 |
| io.dropwizard.metrics | metrics-json | 4.1.1 |
| io.dropwizard.metrics | metrics-jvm | 4.1.1 |
| io.dropwizard.metrics | metrics-servlets | 4.1.1 |
| io.netty | netty-all | 4.1.47.Final |
| jakarta.annotation | jakarta.annotation-api | 1.3.5 |
| jakarta.validation | jakarta.validation-api | 2.0.2 |
| jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
| javax.activation | aktivering | 1.1.1 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | Jta | 1,1 |
| javax.transaction | transaction-api | 1,1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| Jline | Jline | 2.14.6 |
| joda-time | joda-time | 2.10.5 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| net.razorvine | pyrolit | 4.30 |
| net.sf.jpam | jpam | 1,1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | snowflake-ingest-sdk | 0.9.6 |
| net.snowflake | snowflake-jdbc | 3.12.8 |
| net.snowflake | spark-snowflake_2.12 | 2.8.1-spark_3.0 |
| net.sourceforge.f2j | arpack_combined_all | 0,1 |
| org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.5.2 |
| org.antlr | antlr4-runtime | 4.7.1 |
| org.antlr | stringtemplate | 3.2.1 |
| org.apache.ant | Ant | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.arrow | pilformat | 0.15.1 |
| org.apache.arrow | pilminne | 0.15.1 |
| org.apache.arrow | pilvektor | 0.15.1 |
| org.apache.avro | Avro | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.commons | commons-compress | 1.8.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.9 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.commons | commons-text | 1.6 |
| org.apache.curator | curator-client | 2.7.1 |
| org.apache.curator | curator-framework | 2.7.1 |
| org.apache.curator | curator-recept | 2.7.1 |
| org.apache.derby | Derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-anteckningar | 2.7.4 |
| org.apache.hadoop | hadoop-auth | 2.7.4 |
| org.apache.hadoop | hadoop-client | 2.7.4 |
| org.apache.hadoop | hadoop-common | 2.7.4 |
| org.apache.hadoop | hadoop-hdfs | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-common | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-core | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.4 |
| org.apache.hive | hive-beeline | 2.3.7 |
| org.apache.hive | hive-cli | 2.3.7 |
| org.apache.hive | hive-common | 2.3.7 |
| org.apache.hive | hive-exec-core | 2.3.7 |
| org.apache.hive | hive-jdbc | 2.3.7 |
| org.apache.hive | hive-llap-client | 2.3.7 |
| org.apache.hive | hive-llap-common | 2.3.7 |
| org.apache.hive | hive-metaarkiv | 2.3.7 |
| org.apache.hive | hive-serde | 2.3.7 |
| org.apache.hive | hive-shims | 2.3.7 |
| org.apache.hive | hive-storage-api | 2.7.1 |
| org.apache.hive | hive-vector-code-gen | 2.3.7 |
| org.apache.hive.shims | hive-shims-0.23 | 2.3.7 |
| org.apache.hive.shims | hive-shims-common | 2.3.7 |
| org.apache.hive.shims | hive-shims-scheduler | 2.3.7 |
| org.apache.htrace | htrace-core | 3.1.0-inkubering |
| org.apache.httpcomponents | httpclient | 4.5.6 |
| org.apache.httpcomponents | httpcore | 4.4.12 |
| org.apache.ivy | Ivy | 2.4.0 |
| org.apache.orc | orc-core | 1.5.10 |
| org.apache.orc | orc-mapreduce | 1.5.10 |
| org.apache.orc | orc-shims | 1.5.10 |
| org.apache.parquet | parquet-column | 1.10.1-databricks6 |
| org.apache.parquet | parquet-common | 1.10.1-databricks6 |
| org.apache.parquet | parquet-kodning | 1.10.1-databricks6 |
| org.apache.parquet | parquet-format | 2.4.0 |
| org.apache.parquet | parquet-hadoop | 1.10.1-databricks6 |
| org.apache.parquet | parquet-jackson | 1.10.1-databricks6 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.12.0 |
| org.apache.velocity | hastighet | 1.5 |
| org.apache.xbean | xbean-asm7-shaded | 4.15 |
| org.apache.yetus | åhörarkommentarer | 0.5.0 |
| org.apache.zookeeper | zookeeper | 3.4.14 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-compiler | 3.0.16 |
| org.codehaus.janino | Janino | 3.0.16 |
| org.datanucleus | datanucleus-api-jdo | 4.2.4 |
| org.datanucleus | datanucleus-core | 4.1.17 |
| org.datanucleus | datanucleus-rdbms | 4.1.19 |
| org.datanucleus | javax.jdo | 3.2.0-m3 |
| org.eclipse.jetty | jetty-client | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-fortsättning | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-http | 9.4.18.v20190429 |
| org.eclipse.jetty | brygga-io | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-jndi | 9.4.18.v20190429 |
| org.eclipse.jetty | brygga plus | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-proxy | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-security | 9.4.18.v20190429 |
| org.eclipse.jetty | brygga-server | 9.4.18.v20190429 |
| org.eclipse.jetty | brygga-servlet | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-servlets | 9.4.18.v20190429 |
| org.eclipse.jetty | brygga-util | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-webapp | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-xml | 9.4.18.v20190429 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.6.1 |
| org.glassfish.hk2 | hk2-locator | 2.6.1 |
| org.glassfish.hk2 | hk2-utils | 2.6.1 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.3 |
| org.glassfish.hk2.external | aopalliance-repackaged | 2.6.1 |
| org.glassfish.hk2.external | jakarta.inject | 2.6.1 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.30 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.30 |
| org.glassfish.jersey.core | jersey-client | 2.30 |
| org.glassfish.jersey.core | jersey-common | 2.30 |
| org.glassfish.jersey.core | jersey-server | 2.30 |
| org.glassfish.jersey.inject | jersey-hk2 | 2.30 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.30 |
| org.hibernate.validator | vilolägesverifierare | 6.1.0.Final |
| org.javassist | javassist | 3.25.0-GA |
| org.jboss.logging | jboss-logging | 3.3.2.Final |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1,7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.12 | 3.6.6 |
| org.json4s | json4s-core_2.12 | 3.6.6 |
| org.json4s | json4s-jackson_2.12 | 3.6.6 |
| org.json4s | json4s-scalap_2.12 | 3.6.6 |
| org.lz4 | lz4-java | 1.7.1 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.7.45 |
| org.roaringbitmap | Shims | 0.7.45 |
| org.rocksdb | rocksdbjni | 6.2.2 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.12 | 2.12.10 |
| org.scala-lang | scala-library_2.12 | 2.12.10 |
| org.scala-lang | scala-reflect_2.12 | 2.12.10 |
| org.scala-lang.modules | scala-collection-compat_2.12 | 2.1.1 |
| org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
| org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
| org.scala-sbt | test-interface | 1.0 |
| org.scalacheck | scalacheck_2.12 | 1.14.2 |
| org.scalactic | scalactic_2.12 | 3.0.8 |
| org.scalanlp | breeze-macros_2.12 | 1.0 |
| org.scalanlp | breeze_2.12 | 1.0 |
| org.scalatest | scalatest_2.12 | 3.0.8 |
| org.slf4j | jcl-over-slf4j | 1.7.30 |
| org.slf4j | jul-to-slf4j | 1.7.30 |
| org.slf4j | slf4j-api | 1.7.30 |
| org.slf4j | slf4j-log4j12 | 1.7.30 |
| org.spark-project.spark | Oanvända | 1.0.0 |
| org.springframework | spring-core | 4.1.4.RELEASE |
| org.springframework | spring-test | 4.1.4.RELEASE |
| org.threeten | threeten-extra | 1.5.0 |
| org.tukaani | Xz | 1.5 |
| org.typelevel | algebra_2.12 | 2.0.0-M2 |
| org.typelevel | cats-kernel_2.12 | 2.0.0-M4 |
| org.typelevel | machinist_2.12 | 0.6.8 |
| org.typelevel | macro-compat_2.12 | 1.1.1 |
| org.typelevel | spire-macros_2.12 | 0.17.0-M1 |
| org.typelevel | spire-platform_2.12 | 0.17.0-M1 |
| org.typelevel | spire-util_2.12 | 0.17.0-M1 |
| org.typelevel | spire_2.12 | 0.17.0-M1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.7.5 |
| org.yaml | snakeyaml | 1,24 |
| oro | oro | 2.0.8 |
| pl.edu.icm | JLargeArrays | 1.5 |
| software.amazon.ion | ion-java | 1.0.2 |
| Stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0,52 |