Notitie
Voor toegang tot deze pagina is autorisatie vereist. U kunt proberen u aan te melden of mappen te wijzigen.
Voor toegang tot deze pagina is autorisatie vereist. U kunt proberen om mappen te wijzigen.
Notitie
Deze Databricks Runtime-versie heeft het einde van de levensduur bereikt en is niet meer beschikbaar. Zie End-of-Support en end-of-life history voor einddatums. Zie de ondersteuningslevenscycli van Databricks Runtime voor informatie over het ondersteuningsbeleid en de planning van Databricks.
Databricks heeft deze versie uitgebracht in oktober 2019.
De volgende releaseopmerkingen bevatten informatie over Databricks Runtime 6.1, mogelijk gemaakt door Apache Spark.
Nieuwe functies
Verbeteringen in Delta Lake
Python-API's voor Delta-tabellen (openbare preview)
U kunt nu gegevens verwijderen uit en upsert in Delta-tabellen, tabellen opschonen en tabelgeschiedenis ophalen met behulp van Python-API's.
Zie Wat is Delta Lake in Azure Databricks? voor meer informatie.
Dynamic File Pruning (DFP) standaard ingeschakeld
DFP maakt gebruik van metagegevens van Delta-tabellen (bijvoorbeeld minimale/maximale kolomstatistieken in een bestand) verbetert de prestaties van veel query's aanzienlijk door bestanden met kolomwaarden buiten het bereik over te slaan. In tegenstelling tot DPP (Dynamic Partition Pruning), werkt DFP ook voor niet-gepartitioneerde kolommen. DFP kan nuttig zijn voor workloads die worden samengevoegd op niet-gepartitioneerde sleutels.
Clusters configureren met uw eigen containerafbeelding met behulp van Databricks Containerservices
Databricks Container Services laat je een cluster configureren met je eigen containerafbeelding. U kunt complexe omgevingen vooraf verpakken binnen een container, deze publiceren naar een populaire containerregistratie zoals ACR, ECR of Docker Hub, en vervolgens laten Databricks de image ophalen om een cluster te bouwen. Enkele voorbeelden van gebruiksvoorbeelden zijn:
- Bibliotheekaanpassing: u hebt volledige controle over de systeembibliotheken die u wilt installeren
- Golden containeromgeving - uw Docker-image is een vergrendelde omgeving die nooit verandert
- Docker CI/CD-integratie: u kunt Azure Databricks integreren met uw Docker CI/CD-pijplijnen
Er zijn veel andere use cases, variërend van het opgeven van configuratie tot het installeren van machine learning-pakketten.
Zie Containers aanpassen met Databricks Container Service voor meer informatie.
Spark-configuratie-eigenschappen en omgevingsvariabelen verwijzen naar geheimen (openbare preview)
Vanaf de onderhoudsupdate van 7 november van Databricks Runtime 6.1 is de mogelijkheid om te verwijzen naar een geheim in een Spark-configuratie-eigenschap of -omgevingsvariabele in openbare preview. Zie Een geheim gebruiken in een Spark-configuratie-eigenschap of omgevingsvariabele voor meer informatie.
Ganglia metrieken zijn nu beschikbaar op clusters met tabel-ACL's en inloggegevens-doorvoer.
Eerder werden Ganglia-metrieken niet ondersteund op clusters waar toegangscontrole voor tabellen of referentiedoorvoer is ingeschakeld. Ze zijn nu beschikbaar.
Verbeteringen
- Netty-all bijgewerkt van 4.1.17.Final naar 4.1.39.Final
- Snowflake-connector bijgewerkt van 2.4.10 naar 2.5.3
Referentie-doorgifte
- Microsoft Entra ID-referenties worden nu doorgegeven in notebooks die worden uitgevoerd met behulp van
dbutils.notebook.run(). - Alle PySpark ML-klassen worden nu ondersteund.
- De Ganglia-gebruikersinterface is nu beschikbaar.
Zie Toegang tot Azure Data Lake Storage met behulp van Microsoft Entra ID credential passthrough (verouderd) voor meer informatie.
Apache Spark
Databricks Runtime 6.1 bevat Apache Spark 2.4.4. Deze release bevat alle Spark-oplossingen en -verbeteringen die zijn opgenomen in Databricks Runtime 6.0 (EoL) en de volgende aanvullende bugfixes en verbeteringen in Spark:
- [SPARK-28782][SQL] Generatorondersteuning in aggregatie-expressies
- [SPARK-19147][CORE] Fout in taak op een beheerste manier afhandelen na het stoppen van de uitvoerder
- [SPARK-26003][SQL] Prestaties van SQLAppStatusListener.aggregateMetrics verbeteren
- [SPARK-29101][SQL] Telfunctie voor CSV-bestand herstellen wanneer de DROPMALFORMED-modus is geselecteerd
- [SPARK-29042][CORE] RDD op basis van steekproeven met niet-geordende invoer moet INDETERMINATE zijn
- [SPARK-29124][CORE] MurmurHash3 bytesHash(data, seed) gebruiken in plaats van bytesHash(data)
- [SPARK-26713][CORE] Pijplijn-IO-threads onderbreken in PipedRDD bij voltooiing van de taak
- [SPARK-29046][SQL] NPE in SQLConf.get herstellen wanneer actieve SparkContext wordt gestopt
- [SPARK-28483] Vastlopen van de taak in barrièremodus bij barrière() wanneer de taak wordt beëindigd
- [SPARK-29087][CORE][STREAMING] DelegatingServletContextHandler gebruiken om CCE te voorkomen
- [SPARK-27122][CORE] Jetty-klassen mogen niet worden geretourneerd via getters in org.apache.spark.ui.WebUI
- [SPARK-11150][SQL] Dynamische partities verwijderen
- [SPARK-27592][SQL] Stel de bucketed gegevensbron-tabel SerDe correct in
- [SPARK-23519][SQL] View maken moet werken met query's met dubbele uitvoerkolommen
- [SPARK-29011][BUILD] Bijwerken van netty-all van versie 4.1.17-Final naar versie 4.1.39-Final
- [SPARK-28912] Probleem opgelost met MatchError in getCheckpointFiles()
- [SPARK-26046][SS] StreamingQueryManager.listListeners() toevoegen
- [SPARK-3137][CORE] Vervang de wereldwijde TorrentBroadcast-vergrendeling door fijnkorrelige KeyLock (6.x)
- [SPARK-28709][DSTREAMS] StreamingContext-lek via streaming oplossen
- [SPARK-22955][DSTREAMS] - een gecontroleerde afsluiting mag niet leiden tot taakgeneratie...
- [SPARK-28730][SPARK-28495] AnSI-archieftoewijzingsbeleid introduceren voor tabelinvoeging
- [SPARK-27992][SPARK-28881][PYTHON] Toestaan dat Python wordt samengevoegd met verbindingsthread om fouten door te geven
- [SPARK-28025][SS] FileContextBasedCheckpointFileManager repareren dat crc-bestanden laat lekken
- [SPARK-28699][CORE] Een hoekcase herstellen voor het afbreken van onbepaalde fase
- [SPARK-28780][ML] LinearSVCModel.setWeightCol als verouderd markeren
- [SPARK-28844][SQL] Typfout in SQLConf-FILE_COMRESSION_FACTOR opgelost
- [SPARK-26895][CORE] prepareSubmitEnvironment moet worden aangeroepen binnen doAs voor proxygebruikers
Onderhoudsupdates
Zie onderhoudsupdates voor Databricks Runtime 6.1.
Systeemomgeving
- Besturingssysteem: Ubuntu 16.04.6 LTS
- Java: 1.8.0_232
- Scala: 2.11.12
- Python: 3.7.3
- R: R versie 3.6.1 (2019-07-05)
- Delta Lake: 0.4.0
Notitie
Hoewel Scala 2.12 beschikbaar is als experimentele functie in Apache Spark 2.4, wordt dit niet ondersteund in Databricks Runtime 6.1.
Geïnstalleerde Python-bibliotheken
| Bibliotheek | Versie | Bibliotheek | Versie | Bibliotheek | Versie |
|---|---|---|---|---|---|
| asn1crypto | 0.24.0 | terugroepactie | 0.1.0 | boto | 2.49.0 |
| boto3 | 1.9.162 | botocore | 1.12.163 | certificaat | 9-3-2019 |
| cffi | 1.12.2 | chardet | 3.0.4 | cryptografie | 2.6.1 |
| wielrijder | 0.10.0 | Cython | 0.29.6 | decorateur | 4.4.0 |
| docutils | 0,14 | IDNA | 2.8 | ipython | 7.4.0 |
| ipython-genutils | 0.2.0 | Jedi | 0.13.3 | jmespath | 0.9.4 |
| kiwisolver | 1.1.0 | matplotlib | 3.0.3 | numpy | 1.16.2 |
| Pandas | 0.24.2 | parso | 0.3.4 | Patsy | 0.5.1 |
| pexpect | 4.6.0 | pickleshare | 0.7.5 | pip | 19.0.3 |
| prompt-hulpmiddelenpakket | 2.0.9 | psycopg2 | 2.7.6.1 | ptyprocess | 0.6.0 |
| pyarrow | 0.13.0 | pycparser | 2.19 | pycurl | 7.43.0 |
| Pygments | 2.3.1 | PyGObject | 3.20.0 | pyOpenSSL | 19.0.0 |
| pyparsing | 2.4.2 | PySocks | 1.6.8 | python-apt | 1.1.0.b1+ubuntu0.16.04.5 |
| python-dateutil (een bibliotheek voor datum- en tijdgebaseerde functionaliteit in Python) | 2.8.0 | pytz | 2018.9 | Verzoeken | 2.21.0 |
| s3transfer | 0.2.1 | scikit-learn | 0.20.3 | Scipy (een wetenschappelijke bibliotheek voor Python) | 1.2.1 |
| geboren op zee | 0.9.0 | setuptools (een Python-pakket voor het beheren van installatie en distributie van pakketten) | 40.8.0 | Zes | 1.12.0 |
| ssh-import-id | 5.5 | statsmodels | 0.9.0 | Traitlets (Python library voor het configureren van Python-objecten) | 4.3.2 |
| upgrades zonder toezicht | 0,1 | urllib3 | 1.24.1 | virtualenv | 16.4.1 |
| wcwidth | 0.1.7 | wiel | 0.33.1 |
Geïnstalleerde R-bibliotheken
| Bibliotheek | Versie | Bibliotheek | Versie | Bibliotheek | Versie |
|---|---|---|---|---|---|
| Combine | 1.4-5 | wachtwoord vragen | 1.1 | verzeker dat | 0.2.1 |
| terugimporten | 1.1.3 | basis | 3.6.1 | base64enc | 0.1-3 |
| BH | 1.69.0-1 | beetje | 1.1-14 | 64-bitsysteem | 0.9-7 |
| bitops | 1.0-6 | Druppel | 1.1.1 | opstarten | 1.3-23 |
| brouwsel | 1.0-6 | beller | 3.2.0 | auto | 3.0-2 |
| autoGegevens | 3.0-2 | Caret | 6.0-82 | cellranger (softwaretool voor genetische analyse) | 1.1.0 |
| Chron | 2.3-53 | klasse | 7.3-15 | CLI | 1.1.0 |
| Clipr | 0.5.0 | CLI-symbolen | 1.2.0 | groep | 2.1.0 |
| codetools | 0.2-16 | kleurenruimte | 1.4-1 | commonmark | 1,7 |
| programmacompileerder | 3.6.1 | configuratie | 0,3 | kleurpotlood | 1.3.4 |
| curl | 3.3 | gegevenstabel | 1.12.0 | gegevenssets | 3.6.1 |
| DBI | 1.0.0 | dbplyr | 1.3.0 | Beschrijving | 1.2.0 |
| devtools | 2.0.1 | verwerken | 0.6.18 | doMC | 1.3.5 |
| dplyr (een R-pakket voor gegevensmanipulatie) | 0.8.0.1 | beletselteken | 0.1.0 | fans | 0.4.0 |
| dwangarbeiders | 0.4.0 | foreach | 1.4.4 | buitenlands | 0.8-72 |
| smeden | 0.2.0 | fs | 1.2.7 | gbm | 2.1.5 |
| Generics | 0.0.2 | ggplot2 | 3.1.0 | Gh | 1.0.1 |
| git2r | 0.25.2 | glmnet | 2.0-16 | lijm | 1.3.1 |
| Gower | 0.2.0 | afbeeldingen | 3.6.1 | grDevices | 3.6.1 |
| netwerk | 3.6.1 | gridExtra | 2.3 | gsubfn | 0,7 |
| gtable | 0.3.0 | H2O | 3.22.1.1 | toevluchtsoord/schuilplaats | 2.1.0 |
| hms | 0.4.2 | htmltools | 0.3.6 | htmlwidgets | 1.3 |
| httr | 1.4.0 | hwriter | 1.3.2 | hwriterPlus | 1.0-3 |
| ini | 0.3.1 | IPRED | 0.9-8 | Iterators | 1.0.10 |
| jsonlite | 1.6 | KernSmooth | 2.23-15 | etikettering | 0,3 |
| latwerk | 0.20-38 | lava | 1.6.5 | lazyeval | 0.2.2 |
| Littler | 0.3.7 | lme4 | 1.1-21 | lubridate | 1.7.4 |
| magrittr | 1.5 | mapproj | 1.2.6 | Kaarten | 3.3.0 |
| maptools | 0.9-5 | MASSA | 7.3-51.4 | Matrix | 1.2-17 |
| MatrixModels | 0.4-1 | memoriseer | 1.1.0 | methoden | 3.6.1 |
| mgcv | 1.8-29 | Mime | 0,6 | minqa | 1.2.4 |
| ModelMetrics | 1.2.2 | munsell | 0.5.0 | mvtnorm | 1.0-10 |
| nlme | 3.1-141 | nloptr | 1.2.1 | nnet | 7.3-12 |
| numDeriv | 2016.8-1 | OpenSSL-software | 1.3 | openxlsx | 4.1.0 |
| evenwijdig | 3.6.1 | pbkrtest | 0.4-7 | pilaar | 1.3.1 |
| pkgbuild | 1.0.3 | pkgconfig | 2.0.2 | pkgKitten | 0.1.4 |
| pkgload | 1.0.2 | plogr | 0.2.0 | plyr | 1.8.4 |
| prijzen | 1.0.0 | prettyunits | 1.0.2 | pROC | 1.14.0 |
| Processx | 3.3.0 | prodlim | 2018.04.18 | Voortgang | 1.2.0 |
| Proto | 1.0.0 | P.S. | 1.3.0 | purrr | 0.3.2 |
| quantreg | 5.38 | R.methodsS3 | 1.7.1 | R.oo | 1.22.0 |
| R.utils (een pakket in de R programmeertaal) | 2.8.0 | r2d3 | 0.2.3 | R6 | 2.4.0 |
| randomForest | 4.6-14 | rappdirs | 0.3.1 | rcmdcheck | 1.3.2 |
| RColorBrewer | 1.1-2 | Rcpp | 1.0.1 | RcppEigen | 0.3.3.5.0 |
| RcppRoll | 0.3.0 | RCurl | 1.95-4.12 | readr | 1.3.1 |
| readxl (een programma voor het lezen van Excel-bestanden) | 1.3.1 | recepten | 0.1.5 | Rematch | 1.0.1 |
| Afstandsbedieningen | 2.0.2 | reshape2 | 1.4.3 | Rio | 0.5.16 |
| rlang | 0.3.3 | RODBC | 1.3-15 | roxygen2 | 6.1.1 |
| rpart (een R-pakket voor beslissingsboommodellering) | 4.1-15 | rprojroot | 1.3-2 | Rserve | 1.8-6 |
| RSQLite | 2.1.1 | rstudioapi | 0.10 | weegschaal | 1.0.0 |
| sessiegegevens | 1.1.1 | Sp | 1.3-1 | sparklyr | 1.0.0 |
| SparkR | 2.4.5 | SparseM | 1.77 | ruimtelijk | 7.3-11 |
| Splines | 3.6.1 | sqldf | 0.4-11 | SQUAREM | 2017.10-1 |
| statmod | 1.4.30 | Statistieken | 3.6.1 | statistieken4 | 3.6.1 |
| strings | 1.4.3 | stringr | 1.4.0 | survival | 2.44-1.1 |
| sys | 3.1 | tcltk | 3.6.1 | OnderwijsDemo's | 2.10 |
| testthat | 2.0.1 | tibble | 2.1.1 | tidyr | 0.8.3 |
| tidyselect | 0.2.5 | tijd en datum | 3043.102 | gereedschappen | 3.6.1 |
| gebruik dit | 1.4.0 | utf8 | 1.1.4 | hulpmiddelen | 3.6.1 |
| viridisLite | 0.3.0 | snor | 0.3-2 | verwelken | 2.1.2 |
| xml2 | 1.2.0 | xopen | 1.0.0 | YAML | 2.2.0 |
| zip-bestand | 2.0.1 |
Geïnstalleerde Java- en Scala-bibliotheken (Scala 2.11-clusterversie)
| Groeps-id | Artefact-ID | Versie |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | Amazon Kinesis-client | 1.8.10 |
| com.amazonaws | aws-java-sdk-autoscaling (Amazon Web Services Java Software Development Kit voor automatisch schalen) | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.595 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.595 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.595 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.595 |
| com.amazonaws | aws-java-sdk-config (configuratie) | 1.11.595 |
| com.amazonaws | aws-java-sdk-core | 1.11.595 |
| com.amazonaws | AWS Java SDK Datapipeline | 1.11.595 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.595 |
| com.amazonaws | aws-java-sdk-directory | 1.11.595 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.595 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.595 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.595 |
| com.amazonaws | aws-java-sdk-efs | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.595 |
| com.amazonaws | AWS Java SDK - Elastic Load Balancing | 1.11.595 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.595 |
| com.amazonaws | aws-java-sdk-emr | 1.11.595 |
| com.amazonaws | aws-java-sdk-glacier (AWS Java SDK Glacier) | 1.11.595 |
| com.amazonaws | aws-java-sdk-glue (een softwareontwikkelingskit voor het werken met AWS Glue in Java) | 1.11.595 |
| com.amazonaws | aws-java-sdk-iam | 1.11.595 |
| com.amazonaws | AWS Java SDK Import/Export | 1.11.595 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.595 |
| com.amazonaws | aws-java-sdk-kms | 1.11.595 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.595 |
| com.amazonaws | aws-java-sdk-logbestanden | 1.11.595 |
| com.amazonaws | AWS-Java-SDK-MachineLearning | 1.11.595 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.595 |
| com.amazonaws | aws-java-sdk-rds | 1.11.595 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.595 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.595 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.595 |
| com.amazonaws | aws-java-sdk-ses | 1.11.595 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.595 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.595 |
| com.amazonaws | aws-java-sdk-sns | 1.11.595 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.595 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.595 |
| com.amazonaws | aws-java-sdk-storagegateway (een Java software development kit voor het beheren van opslaggateways in AWS) | 1.11.595 |
| com.amazonaws | aws-java-sdk-sts | 1.11.595 |
| com.amazonaws | aws-java-sdk-ondersteuning | 1.11.595 |
| com.amazonaws | aws-java-sdk-swf-bibliotheken | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.595 |
| com.amazonaws | jmespath-java | 1.11.595 |
| com.carrotsearch | hppc | 0.7.2 |
| com.chuusai | shapeless_2.11 | 2.3.2 |
| com.clearspring.analytics | stroom | 2.7.0 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | dbml-local_2.11 | 0.5.0-db8-spark2.4 |
| com.databricks | dbml-local_2.11-tests | 0.5.0-db8-spark2.4 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.11 | 0.4.15-9 |
| com.databricks.scalapb | scalapb-runtime_2.11 | 0.4.15-9 |
| com.esotericsoftware | kryo-gearceerd | 4.0.2 |
| com.esotericsoftware | minlog | 1.3.0 |
| com.fasterxml | klasgenoot | 1.0.0 |
| com.fasterxml.jackson.core | Jackson-annotaties | 2.6.7 |
| com.fasterxml.jackson.core | jackson-core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-scala_2.11 | 2.6.7.1 |
| com.github.fommil | jniloader | 1.1 |
| com.github.fommil.netlib | kern | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1.1 |
| com.github.fommil.netlib | native_ref-java-natives | 1.1 |
| com.github.fommil.netlib | native_system-java | 1.1 |
| com.github.fommil.netlib | native_systeem-java-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
| com.github.fommil.netlib | netlib-native systeem voor Linux x86_64, inclusief natives | 1.1 |
| com.github.luben | zstd-jni | 1.3.2-2 |
| com.github.rwl | jtransforms | 2.4.0 |
| com.google.code.findbugs | jsr305 | 2.0.1 |
| com.google.code.gson | gson (een Java-bibliotheek voor het converteren van Java-objecten naar JSON en vice versa) | 2.2.4 |
| com.google.guava | guave | 15,0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2database | h2 | 1.3.174 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.UITGAVE |
| com.microsoft.azure | Azure-Data-Lake-Store-SDK | 2.2.8 |
| com.microsoft.azure | Azure-opslag | 7.0.0 |
| com.microsoft.sqlserver | mssql-jdbc | 6.2.2.jre8 |
| com.ning | compress-lzf (een compressie-algoritme) | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenzen_2.11 | 0,3 |
| com.twitter | chill-java | 0.9.3 |
| com.twitter | chill_2.11 | 0.9.3 |
| com.twitter | parquet-hadoop-bundle | 1.6.0 |
| com.twitter | util-app_2.11 | 6.23.0 |
| com.twitter | util-core_2.11 | 6.23.0 |
| com.twitter | util-jvm_2.11 | 6.23.0 |
| com.typesafe | configuratie | 1.2.1 |
| com.typesafe.scala-logging | scala-logging-api_2.11 | 2.1.2 |
| com.typesafe.scala-logging | scala-logging-slf4j_2.11 | 2.1.2 |
| com.univocity | univocity-parsers | 2.7.3 |
| com.vlkan | FlatBuffers | 1.2.0-3f79e055 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.9.3 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1,10 |
| gemeenschappelijke collecties | gemeenschappelijke collecties | 3.2.2 |
| commons-configuratie | commons-configuratie | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2,4 |
| commons-lang | commons-lang | 2.6 |
| gemeenschappelijke-logboekvoorziening | gemeenschappelijke-logboekvoorziening | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool (gemeenschappelijke pool) | commons-pool (gemeenschappelijke pool) | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.airlift | luchtdrukmachine | 0.10 |
| io.dropwizard.metrics | metrische gegevenskern | 3.1.5 |
| io.dropwizard.metrics | metrics-ganglia | 3.1.5 |
| io.dropwizard.metrics | graphite-metriek | 3.1.5 |
| io.dropwizard.metrics | metrische gezondheidscontroles | 3.1.5 |
| io.dropwizard.metrics | metrics-jetty9 (een Jetty-implementatie voor het meten van prestatie-indicatoren) | 3.1.5 |
| io.dropwizard.metrics | metrics-json (metrische gegevens in JSON-formaat) | 3.1.5 |
| io.dropwizard.metrics | metriekgegevens voor JVM | 3.1.5 |
| io.dropwizard.metrics | metrics-log4j | 3.1.5 |
| io.dropwizard.metrics | metrieke gegevens-servlets | 3.1.5 |
| io.netty | netwerkachtig | 3.9.9.Final |
| io.netty | netty-all | 4.1.39.Final |
| javax.activation | activering | 1.1.1 |
| javax.annotatie | javax.annotation-api | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | jta | 1.1 |
| javax.validation | validatie-API | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| Javolution | Javolution | 5.5.1 |
| jline | jline | 2.14.6 |
| joda-time | joda-time | 2.9.3 |
| junit | junit | 4.12 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| net.hydromatic | eigenbase-eigenschappen | 1.1.5 |
| net.razorvine | Pyroliet | 4.13 |
| net.sf.jpam | jpam | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-CSV | 2.2.0 |
| net.sneeuwvlok | snowflake-ingest-sdk | 0.9.6 |
| net.sneeuwvlok | snowflake-jdbc | 3.12.0 |
| net.sneeuwvlok | spark-snowflake_2.11 | 2.5.9-spark_2.4 |
| net.sourceforge.f2j | arpack_combined_all | 0,1 |
| org.acplt | oncrpc | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.4 |
| org.antlr | antlr4-runtime | 4.7 |
| org.antlr | tekenreekstemplate | 3.2.1 |
| org.apache.ant | mier | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | ant-launcher (startprogramma voor Ant) | 1.9.2 |
| org.apache.arrow | pijlnotatie | 0.10.0 |
| org.apache.arrow | pijlgeheugen | 0.10.0 |
| org.apache.arrow | pijlvector | 0.10.0 |
| org.apache.avro | AVRO | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.calcite | calcite-avatica | 1.2.0-incubatie |
| org.apache.calcite | calciet-kern | 1.2.0-incubatie |
| org.apache.calcite | calcite-linq4j | 1.2.0-incubatie |
| org.apache.commons | commons-compress - een bibliotheek voor compressie | 1.8.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.curator | beheerder-cliënt | 2.7.1 |
| org.apache.curator | curatorraamwerk | 2.7.1 |
| org.apache.curator | curator-recepten | 2.7.1 |
| org.apache.derby | Derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-aantekeningen | 2.7.3 |
| org.apache.hadoop | hadoop-authenticatie | 2.7.3 |
| org.apache.hadoop | hadoop-client | 2.7.3 |
| org.apache.hadoop | hadoop-common | 2.7.3 |
| org.apache.hadoop | Hadoop-HDFS (Hadoop Distributed File System) | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-common (gebruikelijk in softwareterminologie) | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-core (kernmodule van hadoop-mapreduce-client) | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common (hadoop-yarn-server-algemeen) | 2.7.3 |
| org.apache.htrace | htrace-core | 3.1.0-incubatie |
| org.apache.httpcomponents | httpclient | 4.5.6 |
| org.apache.httpcomponents | httpcore | 4.4.10 |
| org.apache.ivy | klimop | 2.4.0 |
| org.apache.orc | orc-core-nohive | 1.5.5 |
| org.apache.orc | orc-mapreduce-nohive | 1.5.5 |
| org.apache.orc | orc-shims | 1.5.5 |
| org.apache.parquet | parquet-kolom | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-common | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-codering | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-indeling | 2.4.0 |
| org.apache.parquet | parquet-hadoop | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-jackson | 1.10.1.2-databricks4 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm6-shaded | 4.8 |
| org.apache.zookeeper | dierentuinverzorger | 3.4.6 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-ASL | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | algemene compiler | 3.0.10 |
| org.codehaus.janino | janino | 3.0.10 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | datanucleus-core | 3.2.10 |
| org.datanucleus | datanucleus-rdbms | 3.2.9 |
| org.eclipse.jetty | jetty-client | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-vervolg | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-http | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-io | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-jndi | 9.3.27.v20190418 |
| org.eclipse.jetty | Jetty-plus | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-proxy (een omgekeerde proxy server gebaseerd op Jetty) | 9.3.27.v20190418 |
| org.eclipse.jetty | Jetty-beveiliging | 9.3.27.v20190418 |
| org.eclipse.jetty | Jetty Server | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-servlet | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-servlets | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-util | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-webapp | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-xml | 9.3.27.v20190418 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-lokalisator | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-utils | 2.4.0-b34 |
| org.glassfish.hk2 | osgi-hulpbronnenzoeker | 1.0.1 |
| org.glassfish.hk2.external | aopalliance opnieuw verpakt | 2.4.0-b34 |
| org.glassfish.hk2.external | javax.inject | 2.4.0-b34 |
| org.glassfish.jersey.bundles.repackaged | jersey-guava | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.22.2 |
| org.glassfish.jersey.core | jersey-client | 2.22.2 |
| org.glassfish.jersey.core | Algemene Jersey | 2.22.2 |
| org.glassfish.jersey.core | Jersey-Server | 2.22.2 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.22.2 |
| org.hamcrest | hamcrest-core | 1.3 |
| org.hamcrest | hamcrest-library | 1.3 |
| org.hibernate | hibernate-validator | 5.1.1.Final |
| org.iq80.snappy | vlot | 0,2 |
| org.javassist | javassist | 3.18.1-GA |
| org.jboss.logging | jboss-logging | 3.1.3.GA |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1,7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.11 | 3.5.3 |
| org.json4s | json4s-core_2.11 | 3.5.3 |
| org.json4s | json4s-jackson_2.11 | 3.5.3 |
| org.json4s | json4s-scalap_2.11 | 3.5.3 |
| org.lz4 | lz4-java | 1.4.0 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.mockito | mockito-core | 1.10.19 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.7.45 |
| org.roaringbitmap | vulplaatjes | 0.7.45 |
| org.rocksdb | rocksdbjni | 6.2.2 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.11 | 2.11.12 |
| org.scala-lang | scala-library_2.11 | 2.11.12 |
| org.scala-lang | scala-reflect_2.11 | 2.11.12 |
| org.scala-lang.modules | scala-parser-combinators_2.11 | 1.1.0 |
| org.scala-lang.modules | scala-xml_2.11 | 1.0.5 |
| org.scala-sbt | test-interface | 1.0 |
| org.scalacheck | scalacheck_2.11 | 1.12.5 |
| org.scalactic | scalactic_2.11 | 3.0.3 |
| org.scalanlp | breeze-macros_2.11 | 0.13.2 |
| org.scalanlp | breeze_2.11 | 0.13.2 |
| org.scalatest | scalatest_2.11 | 3.0.3 |
| org.slf4j | jcl-over-slf4j | 1.7.16 |
| org.slf4j | jul-to-slf4j | 1.7.16 |
| org.slf4j | slf4j-api | 1.7.16 |
| org.slf4j | slf4j-log4j12 | 1.7.16 |
| org.spark-project.hive | hive-beeline | 1.2.1.spark2 |
| org.spark-project.hive | hive-cli | 1.2.1.spark2 |
| org.spark-project.hive | hive-jdbc | 1.2.1.spark2 |
| org.spark-project.hive | hive-metastore (metadata opslag voor Hive) | 1.2.1.spark2 |
| org.spark-project.spark | ongebruikt | 1.0.0 |
| org.spire-math | spire-macros_2.11 | 0.13.0 |
| org.spire-math | spire_2.11 | 0.13.0 |
| org.springframework | kern van Spring | 4.1.4.RELEASE |
| org.springframework | lente-test | 4.1.4.RELEASE |
| org.tukaani | xz | 1.5 |
| org.typelevel | machinist_2.11 | 0.6.1 |
| org.typelevel | macro-compat_2.11 | 1.1.1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.7.3 |
| org.yaml | snakeyaml | 1.16 |
| oro | oro | 2.0.8 |
| software.amazon.ion | ion-java | 1.0.2 |
| stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0,52 |