Notitie
Voor toegang tot deze pagina is autorisatie vereist. U kunt proberen u aan te melden of mappen te wijzigen.
Voor toegang tot deze pagina is autorisatie vereist. U kunt proberen om mappen te wijzigen.
Notitie
Deze Databricks Runtime-versie heeft het einde van de levensduur bereikt en is niet meer beschikbaar. Zie End-of-Support en end-of-life history voor einddatums. Zie de ondersteuningslevenscycli van Databricks Runtime voor informatie over het ondersteuningsbeleid en de planning van Databricks.
Databricks heeft deze versie uitgebracht in februari 2020.
Notitie
Ondersteuning voor Databricks Runtime 6.4 is beëindigd op 1 april 2021 vanwege het einde van de ondersteuning voor het onderliggende Ubuntu-besturingssysteem. Databricks raadt u aan om een upgrade uit te voeren naar Databricks Runtime 7.x of 8.x om de voordelen van Apache Spark 3.x en de vele nieuwe functies en verbeteringen die zijn ingebouwd in deze nieuwere runtimes te krijgen.
U hebt de mogelijkheid om te migreren naar Uitgebreide ondersteuning voor Databricks Runtime 6.4, die identiek is aan Databricks Runtime 6.4, afgezien van de besturingssysteemversie, JDK en een klein aantal R- en Python-bibliotheken. Zie Uitgebreide ondersteuning voor Databricks Runtime 6.4 (EoS).
De volgende releaseopmerkingen bevatten informatie over Databricks Runtime 6.4, mogelijk gemaakt door Apache Spark.
Nieuwe functies
Nieuwe gegevensbestanden incrementeel verwerken met automatisch laden (openbare preview)
Auto Loader biedt u een efficiëntere manier om nieuwe gegevensbestanden incrementeel te verwerken wanneer ze binnenkomen in een cloud-blobarchief tijdens ETL. Dit is een verbetering ten opzichte van gestructureerd streamen op basis van bestanden, waarmee nieuwe bestanden worden geïdentificeerd door herhaaldelijk de cloudmap weer te geven en de bestanden bij te houden die zijn gezien en die zeer inefficiënt kunnen zijn naarmate de map groeit. Automatisch laden is ook handiger en effectiever dan gestructureerd streamen op basis van bestandsmeldingen. Hiervoor moet u handmatig bestandsmeldingsservices configureren in de cloud en kunt u bestaande bestanden niet opnieuw doorvoeren. Zie Wat is Automatisch laadprogramma? voor meer informatie.
Gegevens laden in Delta Lake met idempotente herhaalde pogingen (publieke preview)
Met de COPY INTO SQL-opdracht kunt u gegevens in Delta Lake laden met herhaalde idempotente bewerkingen. Als u gegevens vandaag wilt laden in Delta Lake, moet u Apache Spark DataFrame-API's gebruiken. Als er fouten optreden tijdens het laden, moet u ze effectief afhandelen. De nieuwe COPY INTO opdracht biedt een vertrouwde declaratieve interface voor SQL-gebruikers om gegevens te laden. Met de opdracht worden eerder geladen bestanden bijgehouden en kunt u deze veilig opnieuw uitvoeren in geval van fouten.
Metrische bewerkingsgegevens voor alle schrijfbewerkingen, updates en verwijderingen in een Delta-tabel worden nu weergegeven in de tabelgeschiedenis
U kunt nu metrische bewerkingsgegevens (bijvoorbeeld het aantal bestanden en rijen gewijzigd) zien voor alle schrijfbewerkingen, updates en verwijderingen in een Delta-tabel in de geschiedenis van de tabel. Het genereren van deze metrische gegevens is standaard uitgeschakeld. Als u het genereren van metrische gegevens wilt inschakelen, stelt u de Spark-configuratie inspark.databricks.delta.history.metricsEnabled op true.
Inline Matplotlib-afbeeldingen zijn nu standaard ingeschakeld in Azure Databricks-notebooks (openbare preview)
Matplotlib-afbeeldingen weergeven zonder dat u de afbeelding aan de display methode hoeft door te geven, is nu standaard ingeschakeld. Zie Matplotlib voor meer informatie.
Verbeteringen
Probleem met Parquet-filter StartsWith opgelost
NullPointerException De oorzaak van het push-downfilter StartWith naar Parquet is opgelost. Het probleem treedt op wanneer het geval is van een kolom in een Parquet-bestand anders dan het geval is van de kolom die is gedefinieerd in een externe tabel.
Apache Spark
Databricks Runtime 6.4 bevat Apache Spark 2.4.5. Deze release bevat alle Spark-oplossingen en -verbeteringen die zijn opgenomen in Databricks Runtime 6.3 (EoL) en de volgende aanvullende bugfixes en verbeteringen in Spark:
- [SPARK-30657][SPARK-30658][SS] Er zijn twee bugs in streaminglimieten opgelost [6.x]
- [SPARK-30433][SQL] Plannen voor het verzamelen van conflicten optimaliseren
- [SPARK-30633][SQL] L toevoegen aan seed wanneer het type LongType is
- [SPARK-29777][[SPARKR] Verwijder geen geldige test meer voor recursieve aanroepen
- [SPARK-30645][[SPARKR] Unicode-testgegevens verplaatsen naar een extern bestand
- [SPARK-30630][ML] numTrees in GBT verwijderen in 2.4.5
- [SPARK-30082][SQL] Afhankelijk van scala-type coercion bij het bouwen van een vervangingsquery
- [SPARK-30556][SQL] SparkContext.localproperties kopiëren naar onderliggende thread inSubqueryExec.executionContext
- [SPARK-30433][SQL] Het oplossen van conflicterende attributen schaalbaarder maken in ResolveReferences
- [SPARK-29708][SQL] Geaggregeerde waarden corrigeren wanneer groeperingssets worden gedupliceerd
- [SPARK-29450][SS] Het aantal uitvoerrijen voor streamingaggregatie meten met de toevoegmodus
-
[SPARK-30312][SQL] Naam van conf wijzigen door toe te voegen
.enabled - [SPARK-30325][CORE] markPartitionCompleted veroorzaakt een inconsistente taakstatus
- [SPARK-30246][CORE] OneForOneStreamManager kan geheugen lekken bij beëindigde verbinding
- [SPARK-28152][SQL] Een verouderde conf toevoegen voor oude MsSqlServerDialect-numerieke toewijzing
- [SPARK-30458][WEBUI] Foute rekentijd voor uitvoerders corrigeren op de pagina Time Line of Stage
- [SPARK-30312][SQL] Behoud padrechten en acl bij het trunceren van een tabel
- [SPARK-30447][SQL] Probleem met constante propagatie betreffende nullbaarheid
- [SPARK-30410][SQL] Het berekenen van de grootte van een tabel met een groot aantal partities veroorzaakt overstromingslogboeken
- [SPARK-30225][CORE] Correct read() gedrag voorbij EOF in NioBufferedFileInputStream
- [SPARK-30285][CORE] Impasse tussen LiveListenerBus#stop en AsyncEventQueue#removeListenerOnError oplossen
- [SPARK-26560][SQL] Spark moet Hive UDF kunnen uitvoeren met behulp van jar, ongeacht de huidige threadcontext classloader
- [SPARK-30339][SQL] Voorkomen dat een tweede mislukking optreedt bij het zoeken naar een functie
- [SPARK-30269][SQL] Moet oude partitiestatistieken gebruiken om te bepalen of statistieken moeten worden bijgewerkt bij het analyseren van de partitie
- [SPARK-30318][CORE] Jetty upgraden naar 9.3.27.v20190418
- [SPARK-17398][SQL] ClassCastException herstellen bij het uitvoeren van query's op een gepartitioneerde JSON-tabel
Onderhoudsupdates
Zie onderhoudsupdates voor Databricks Runtime 6.4.
Systeemomgeving
- Besturingssysteem: Ubuntu 16.04.6 LTS
- Java: 1.8.0_252
- Scala: 2.11.12
- Python: 3.7.3
- R: R versie 3.6.2 (2019-12-12)
- Delta Lake: 0.5.0
Notitie
Hoewel Scala 2.12 beschikbaar is als experimentele functie in Apache Spark 2.4, wordt dit niet ondersteund in Databricks Runtime 6.4.
In deze sectie:
- Geïnstalleerde Python-bibliotheken
- Geïnstalleerde R-bibliotheken
- Geïnstalleerde Java- en Scala-bibliotheken (Scala 2.11-clusterversie)
Geïnstalleerde Python-bibliotheken
| Bibliotheek | Versie | Bibliotheek | Versie | Bibliotheek | Versie |
|---|---|---|---|---|---|
| asn1crypto | 0.24.0 | terugroepactie | 0.1.0 | boto | 2.49.0 |
| boto3 | 1.9.162 | botocore | 1.12.163 | certificaat | 9-3-2019 |
| cffi | 1.12.2 | chardet | 3.0.4 | cryptografie | 2.6.1 |
| wielrijder | 0.10.0 | Cython | 0.29.6 | decorateur | 4.4.0 |
| docutils | 0,14 | IDNA | 2.8 | ipykernel | 5.1.0 |
| ipython | 7.4.0 | ipython-genutils | 0.2.0 | Jedi | 0.13.3 |
| jmespath | 0.9.4 | jupyter-client (softwarepakket voor Jupyter-notebooks) | 5.2.4 | jupyter-core | 4.4.0 |
| kiwisolver | 1.1.0 | matplotlib | 3.0.3 | numpy | 1.16.2 |
| Pandas | 0.24.2 | parso | 0.3.4 | Patsy | 0.5.1 |
| pexpect | 4.6.0 | pickleshare | 0.7.5 | pip | 19.0.3 |
| prompt-hulpmiddelenpakket | 2.0.9 | psycopg2 | 2.7.6.1 | ptyprocess | 0.6.0 |
| pyarrow | 0.13.0 | pycparser | 2.19 | pycurl | 7.43.0 |
| Pygments | 2.3.1 | PyGObject | 3.20.0 | pyOpenSSL | 19.0.0 |
| pyparsing | 2.4.6 | PySocks | 1.6.8 | python-apt | 1.1.0.b1+ubuntu0.16.04.8 |
| python-dateutil (een bibliotheek voor datum- en tijdgebaseerde functionaliteit in Python) | 2.8.0 | pytz | 2018.9 | pyzmq | 18.0.0 |
| Verzoeken | 2.21.0 | s3transfer | 0.2.1 | scikit-learn | 0.20.3 |
| Scipy (een wetenschappelijke bibliotheek voor Python) | 1.2.1 | geboren op zee | 0.9.0 | setuptools (een Python-pakket voor het beheren van installatie en distributie van pakketten) | 40.8.0 |
| Zes | 1.12.0 | ssh-import-id | 5.5 | statsmodels | 0.9.0 |
| tornado | 6.0.2 | Traitlets (Python library voor het configureren van Python-objecten) | 4.3.2 | upgrades zonder toezicht | 0,1 |
| urllib3 | 1.24.1 | virtualenv | 16.4.1 | wcwidth | 0.1.7 |
| wiel | 0.33.1 |
Geïnstalleerde R-bibliotheken
| Bibliotheek | Versie | Bibliotheek | Versie | Bibliotheek | Versie |
|---|---|---|---|---|---|
| Combine | 1.4-5 | wachtwoord vragen | 1.1 | verzeker dat | 0.2.1 |
| terugimporten | 1.1.5 | basis | 3.6.2 | base64enc | 0.1-3 |
| BH | 1.69.0-1 | beetje | 1.1-14 | 64-bitsysteem | 0.9-7 |
| bitops | 1.0-6 | Druppel | 1.2.0 | opstarten | 1.3-23 |
| brouwsel | 1.0-6 | beller | 3.3.2 | auto | 3.0-4 |
| autoGegevens | 3.0-2 | Caret | 6.0-84 | cellranger (softwaretool voor genetische analyse) | 1.1.0 |
| Chron | 2.3-54 | klasse | 7.3-15 | CLI | 1.1.0 |
| Clipr | 0.7.0 | CLI-symbolen | 1.2.0 | groep | 2.1.0 |
| codetools | 0.2-16 | kleurenruimte | 1.4-1 | commonmark | 1,7 |
| programmacompileerder | 3.6.2 | configuratie | 0,3 | covr | 3.3.2 |
| kleurpotlood | 1.3.4 | Overspraak | 1.0.0 | curl | 4.2 |
| gegevenstabel | 1.12.6 | gegevenssets | 3.6.2 | DBI | 1.0.0 |
| dbplyr | 1.4.2 | Beschrijving | 1.2.0 | devtools | 2.2.1 |
| verwerken | 0.6.22 | doMC | 1.3.6 | dplyr (een R-pakket voor gegevensmanipulatie) | 0.8.3 |
| DT | 0,9 | beletselteken | 0.3.0 | beoordelen | 0,14 |
| fans | 0.4.0 | snelle kaart | 1.0.1 | dwangarbeiders | 0.4.0 |
| foreach | 1.4.7 | buitenlands | 0,8-75 | smeden | 0.2.0 |
| fs | 1.3.1 | gbm | 2.1.5 | Generics | 0.0.2 |
| ggplot2 | 3.2.1 | Gh | 1.0.1 | git2r | 0.26.1 |
| glmnet | 2.0-18 | lijm | 1.3.1 | Gower | 0.2.1 |
| afbeeldingen | 3.6.2 | grDevices | 3.6.2 | netwerk | 3.6.2 |
| gridExtra | 2.3 | gsubfn | 0,7 | gtable | 0.3.0 |
| H2O | 3.26.0.2 | toevluchtsoord/schuilplaats | 2.1.1 | hms | 0.5.1 |
| htmltools | 0.4.0 | htmlwidgets | 1.5.1 | httpuv | 1.5.2 |
| httr | 1.4.1 | hwriter | 1.3.2 | hwriterPlus | 1.0-3 |
| ini | 0.3.1 | IPRED | 0.9-9 | Iterators | 1.0.12 |
| jsonlite | 1.6 | KernSmooth | 2.23-16 | etikettering | 0,3 |
| daarna | 1.0.0 | latwerk | 0.20-38 | lava | 1.6.6 |
| lazyeval | 0.2.2 | levenscyclus | 0.1.0 | Littler | 0.3.9 |
| lme4 | 1.1-21 | lubridate | 1.7.4 | magrittr | 1.5 |
| mapproj | 1.2.6 | Kaarten | 3.3.0 | maptools | 0.9-8 |
| MASSA | 7.3-51.5 | Matrix | 1.2-18 | MatrixModels | 0.4-1 |
| memoriseer | 1.1.0 | methoden | 3.6.2 | mgcv | 1.8-31 |
| Mime | 0,7 | minqa | 1.2.4 | ModelMetrics | 1.2.2 |
| munsell | 0.5.0 | mvtnorm | 1.0-11 | nlme | 3.1-144 |
| nloptr | 1.2.1 | nnet | 7.3-12 | numDeriv | 2016.8 tot 1.1 |
| OpenSSL-software | 1.4.1 | openxlsx | 4.1.2 | evenwijdig | 3.6.2 |
| pbkrtest | 0.4-7 | pilaar | 1.4.2 | pkgbuild | 1.0.6 |
| pkgconfig | 2.0.3 | pkgKitten | 0.1.5 | pkgload | 1.0.2 |
| plogr | 0.2.0 | plyr | 1.8.4 | prijzen | 1.0.0 |
| prettyunits | 1.0.2 | pROC | 1.15.3 | Processx | 3.4.1 |
| prodlim | 2018.04.18 | Voortgang | 1.2.2 | Beloften | 1.1.0 |
| Proto | 1.0.0 | P.S. | 1.3.0 | purrr | 0.3.3 |
| quantreg | 5.51 | R.methodsS3 | 1.7.1 | R.oo | 1.22.0 |
| R.utils (een pakket in de R programmeertaal) | 2.9.0 | r2d3 | 0.2.3 | R6 | 2.4.0 |
| randomForest | 4.6-14 | rappdirs | 0.3.1 | rcmdcheck | 1.3.3 |
| RColorBrewer | 1.1-2 | Rcpp | 1.0.2 | RcppEigen | 0.3.3.5.0 |
| RCurl | 1.95-4.12 | readr | 1.3.1 | readxl (een programma voor het lezen van Excel-bestanden) | 1.3.1 |
| recepten | 0.1.7 | Rematch | 1.0.1 | Afstandsbedieningen | 2.1.0 |
| reshape2 | 1.4.3 | Rex | 1.1.2 | Rio | 0.5.16 |
| rlang | 0.4.1 | RODBC | 1.3-16 | roxygen2 | 6.1.1 |
| rpart (een R-pakket voor beslissingsboommodellering) | 4.1-15 | rprojroot | 1.3-2 | Rserve | 1.8-6 |
| RSQLite | 2.1.2 | rstudioapi | 0.10 | rversions | 2.0.0 |
| weegschaal | 1.0.0 | sessiegegevens | 1.1.1 | glanzend en nieuw | 1.4.0 |
| sourcetools | 0.1.7 | Sp | 1.3-1 | sparklyr | 1.0.4 |
| SparkR | 2.4.5 | SparseM | 1.77 | ruimtelijk | 7.3-11 |
| Splines | 3.6.2 | sqldf | 0.4-11 | SQUAREM | 2017.10-1 |
| statmod | 1.4.32 | Statistieken | 3.6.2 | statistieken4 | 3.6.2 |
| strings | 1.4.3 | stringr | 1.4.0 | survival | 2.44-1.1 |
| sys | 3.3 | tcltk | 3.6.2 | OnderwijsDemo's | 2.10 |
| testthat | 2.2.1 | tibble | 2.1.3 | tidyr | 1.0.0 |
| tidyselect | 0.2.5 | tijd en datum | 3043.102 | gereedschappen | 3.6.2 |
| gebruik dit | 1.5.1 | utf8 | 1.1.4 | hulpmiddelen | 3.6.2 |
| vctrs | 0.2.0 | viridisLite | 0.3.0 | snor | 0,4 |
| verwelken | 2.1.2 | xml2 | 1.2.2 | xopen | 1.0.0 |
| xtable | 1.8-4 | YAML | 2.2.0 | zeloot | 0.1.0 |
| zip-bestand | 2.0.4 |
Geïnstalleerde Java- en Scala-bibliotheken (Scala 2.11-clusterversie)
| Groeps-id | Artefact-ID | Versie |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | Amazon Kinesis-client | 1.8.10 |
| com.amazonaws | aws-java-sdk-autoscaling (Amazon Web Services Java Software Development Kit voor automatisch schalen) | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.595 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.595 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.595 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.595 |
| com.amazonaws | aws-java-sdk-config (configuratie) | 1.11.595 |
| com.amazonaws | aws-java-sdk-core | 1.11.595 |
| com.amazonaws | AWS Java SDK Datapipeline | 1.11.595 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.595 |
| com.amazonaws | aws-java-sdk-directory | 1.11.595 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.595 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.595 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.595 |
| com.amazonaws | aws-java-sdk-efs | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.595 |
| com.amazonaws | AWS Java SDK - Elastic Load Balancing | 1.11.595 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.595 |
| com.amazonaws | aws-java-sdk-emr | 1.11.595 |
| com.amazonaws | aws-java-sdk-glacier (AWS Java SDK Glacier) | 1.11.595 |
| com.amazonaws | aws-java-sdk-glue (een softwareontwikkelingskit voor het werken met AWS Glue in Java) | 1.11.595 |
| com.amazonaws | aws-java-sdk-iam | 1.11.595 |
| com.amazonaws | AWS Java SDK Import/Export | 1.11.595 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.595 |
| com.amazonaws | aws-java-sdk-kms | 1.11.595 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.595 |
| com.amazonaws | aws-java-sdk-logbestanden | 1.11.595 |
| com.amazonaws | AWS-Java-SDK-MachineLearning | 1.11.595 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.595 |
| com.amazonaws | aws-java-sdk-rds | 1.11.595 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.595 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.595 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.595 |
| com.amazonaws | aws-java-sdk-ses | 1.11.595 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.595 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.595 |
| com.amazonaws | aws-java-sdk-sns | 1.11.595 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.595 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.595 |
| com.amazonaws | aws-java-sdk-storagegateway (een Java software development kit voor het beheren van opslaggateways in AWS) | 1.11.595 |
| com.amazonaws | aws-java-sdk-sts | 1.11.595 |
| com.amazonaws | aws-java-sdk-ondersteuning | 1.11.595 |
| com.amazonaws | aws-java-sdk-swf-bibliotheken | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.595 |
| com.amazonaws | jmespath-java | 1.11.595 |
| com.carrotsearch | hppc | 0.7.2 |
| com.chuusai | shapeless_2.11 | 2.3.2 |
| com.clearspring.analytics | stroom | 2.7.0 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | dbml-local_2.11 | 0.5.0-db8-spark2.4 |
| com.databricks | dbml-local_2.11-tests | 0.5.0-db8-spark2.4 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.11 | 0.4.15-9 |
| com.databricks.scalapb | scalapb-runtime_2.11 | 0.4.15-9 |
| com.esotericsoftware | kryo-gearceerd | 4.0.2 |
| com.esotericsoftware | minlog | 1.3.0 |
| com.fasterxml | klasgenoot | 1.0.0 |
| com.fasterxml.jackson.core | Jackson-annotaties | 2.6.7 |
| com.fasterxml.jackson.core | jackson-core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-scala_2.11 | 2.6.7.1 |
| com.github.fommil | jniloader | 1.1 |
| com.github.fommil.netlib | kern | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1.1 |
| com.github.fommil.netlib | native_ref-java-natives | 1.1 |
| com.github.fommil.netlib | native_system-java | 1.1 |
| com.github.fommil.netlib | native_systeem-java-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
| com.github.fommil.netlib | netlib-native systeem voor Linux x86_64, inclusief natives | 1.1 |
| com.github.luben | zstd-jni | 1.3.2-2 |
| com.github.rwl | jtransforms | 2.4.0 |
| com.google.code.findbugs | jsr305 | 2.0.1 |
| com.google.code.gson | gson (een Java-bibliotheek voor het converteren van Java-objecten naar JSON en vice versa) | 2.2.4 |
| com.google.guava | guave | 15,0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2database | h2 | 1.3.174 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.UITGAVE |
| com.microsoft.azure | Azure-Data-Lake-Store-SDK | 2.2.8 |
| com.microsoft.azure | Azure-opslag | 7.0.0 |
| com.microsoft.sqlserver | mssql-jdbc | 6.2.2.jre8 |
| com.ning | compress-lzf (een compressie-algoritme) | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenzen_2.11 | 0,3 |
| com.twitter | chill-java | 0.9.3 |
| com.twitter | chill_2.11 | 0.9.3 |
| com.twitter | parquet-hadoop-bundle | 1.6.0 |
| com.twitter | util-app_2.11 | 6.23.0 |
| com.twitter | util-core_2.11 | 6.23.0 |
| com.twitter | util-jvm_2.11 | 6.23.0 |
| com.typesafe | configuratie | 1.2.1 |
| com.typesafe.scala-logging | scala-logging-api_2.11 | 2.1.2 |
| com.typesafe.scala-logging | scala-logging-slf4j_2.11 | 2.1.2 |
| com.univocity | univocity-parsers | 2.7.3 |
| com.vlkan | FlatBuffers | 1.2.0-3f79e055 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.9.4 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1,10 |
| gemeenschappelijke collecties | gemeenschappelijke collecties | 3.2.2 |
| commons-configuratie | commons-configuratie | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2,4 |
| commons-lang | commons-lang | 2.6 |
| gemeenschappelijke-logboekvoorziening | gemeenschappelijke-logboekvoorziening | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool (gemeenschappelijke pool) | commons-pool (gemeenschappelijke pool) | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.airlift | luchtdrukmachine | 0.10 |
| io.dropwizard.metrics | metrische gegevenskern | 3.1.5 |
| io.dropwizard.metrics | metrics-ganglia | 3.1.5 |
| io.dropwizard.metrics | graphite-metriek | 3.1.5 |
| io.dropwizard.metrics | metrische gezondheidscontroles | 3.1.5 |
| io.dropwizard.metrics | metrics-jetty9 (een Jetty-implementatie voor het meten van prestatie-indicatoren) | 3.1.5 |
| io.dropwizard.metrics | metrics-json (metrische gegevens in JSON-formaat) | 3.1.5 |
| io.dropwizard.metrics | metriekgegevens voor JVM | 3.1.5 |
| io.dropwizard.metrics | metrics-log4j | 3.1.5 |
| io.dropwizard.metrics | metrieke gegevens-servlets | 3.1.5 |
| io.netty | netwerkachtig | 3.9.9.Final |
| io.netty | netty-all | 4.1.42.Final |
| javax.activation | activering | 1.1.1 |
| javax.annotatie | javax.annotation-api | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | jta | 1.1 |
| javax.validation | validatie-API | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| Javolution | Javolution | 5.5.1 |
| jline | jline | 2.14.6 |
| joda-time | joda-time | 2.9.3 |
| junit | junit | 4.12 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| net.hydromatic | eigenbase-eigenschappen | 1.1.5 |
| net.razorvine | Pyroliet | 4.13 |
| net.sf.jpam | jpam | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-CSV | 2.2.0 |
| net.sneeuwvlok | snowflake-ingest-sdk | 0.9.6 |
| net.sneeuwvlok | snowflake-jdbc | 3.12.0 |
| net.sneeuwvlok | spark-snowflake_2.11 | 2.5.9-spark_2.4 |
| net.sourceforge.f2j | arpack_combined_all | 0,1 |
| org.acplt | oncrpc | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.4 |
| org.antlr | antlr4-runtime | 4.7 |
| org.antlr | tekenreekstemplate | 3.2.1 |
| org.apache.ant | mier | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | ant-launcher (startprogramma voor Ant) | 1.9.2 |
| org.apache.arrow | pijlnotatie | 0.10.0 |
| org.apache.arrow | pijlgeheugen | 0.10.0 |
| org.apache.arrow | pijlvector | 0.10.0 |
| org.apache.avro | AVRO | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.calcite | calcite-avatica | 1.2.0-incubatie |
| org.apache.calcite | calciet-kern | 1.2.0-incubatie |
| org.apache.calcite | calcite-linq4j | 1.2.0-incubatie |
| org.apache.commons | commons-compress - een bibliotheek voor compressie | 1.8.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.curator | beheerder-cliënt | 2.7.1 |
| org.apache.curator | curatorraamwerk | 2.7.1 |
| org.apache.curator | curator-recepten | 2.7.1 |
| org.apache.derby | Derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-aantekeningen | 2.7.3 |
| org.apache.hadoop | hadoop-authenticatie | 2.7.3 |
| org.apache.hadoop | hadoop-client | 2.7.3 |
| org.apache.hadoop | hadoop-common | 2.7.3 |
| org.apache.hadoop | Hadoop-HDFS (Hadoop Distributed File System) | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-common (gebruikelijk in softwareterminologie) | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-core (kernmodule van hadoop-mapreduce-client) | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common (hadoop-yarn-server-algemeen) | 2.7.3 |
| org.apache.htrace | htrace-core | 3.1.0-incubatie |
| org.apache.httpcomponents | httpclient | 4.5.6 |
| org.apache.httpcomponents | httpcore | 4.4.10 |
| org.apache.ivy | klimop | 2.4.0 |
| org.apache.orc | orc-core-nohive | 1.5.5 |
| org.apache.orc | orc-mapreduce-nohive | 1.5.5 |
| org.apache.orc | orc-shims | 1.5.5 |
| org.apache.parquet | parquet-kolom | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-common | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-codering | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-indeling | 2.4.0 |
| org.apache.parquet | parquet-hadoop | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-jackson | 1.10.1.2-databricks4 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm6-shaded | 4.8 |
| org.apache.zookeeper | dierentuinverzorger | 3.4.6 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-ASL | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | algemene compiler | 3.0.10 |
| org.codehaus.janino | janino | 3.0.10 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | datanucleus-core | 3.2.10 |
| org.datanucleus | datanucleus-rdbms | 3.2.9 |
| org.eclipse.jetty | jetty-client | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-vervolg | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-http | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-io | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-jndi | 9.3.27.v20190418 |
| org.eclipse.jetty | Jetty-plus | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-proxy (een omgekeerde proxy server gebaseerd op Jetty) | 9.3.27.v20190418 |
| org.eclipse.jetty | Jetty-beveiliging | 9.3.27.v20190418 |
| org.eclipse.jetty | Jetty Server | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-servlet | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-servlets | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-util | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-webapp | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-xml | 9.3.27.v20190418 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-lokalisator | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-utils | 2.4.0-b34 |
| org.glassfish.hk2 | osgi-hulpbronnenzoeker | 1.0.1 |
| org.glassfish.hk2.external | aopalliance opnieuw verpakt | 2.4.0-b34 |
| org.glassfish.hk2.external | javax.inject | 2.4.0-b34 |
| org.glassfish.jersey.bundles.repackaged | jersey-guava | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.22.2 |
| org.glassfish.jersey.core | jersey-client | 2.22.2 |
| org.glassfish.jersey.core | Algemene Jersey | 2.22.2 |
| org.glassfish.jersey.core | Jersey-Server | 2.22.2 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.22.2 |
| org.hamcrest | hamcrest-core | 1.3 |
| org.hamcrest | hamcrest-library | 1.3 |
| org.hibernate | hibernate-validator | 5.1.1.Final |
| org.iq80.snappy | vlot | 0,2 |
| org.javassist | javassist | 3.18.1-GA |
| org.jboss.logging | jboss-logging | 3.1.3.GA |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1,7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.11 | 3.5.3 |
| org.json4s | json4s-core_2.11 | 3.5.3 |
| org.json4s | json4s-jackson_2.11 | 3.5.3 |
| org.json4s | json4s-scalap_2.11 | 3.5.3 |
| org.lz4 | lz4-java | 1.4.0 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.mockito | mockito-core | 1.10.19 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.7.45 |
| org.roaringbitmap | vulplaatjes | 0.7.45 |
| org.rocksdb | rocksdbjni | 6.2.2 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.11 | 2.11.12 |
| org.scala-lang | scala-library_2.11 | 2.11.12 |
| org.scala-lang | scala-reflect_2.11 | 2.11.12 |
| org.scala-lang.modules | scala-parser-combinators_2.11 | 1.1.0 |
| org.scala-lang.modules | scala-xml_2.11 | 1.0.5 |
| org.scala-sbt | test-interface | 1.0 |
| org.scalacheck | scalacheck_2.11 | 1.12.5 |
| org.scalactic | scalactic_2.11 | 3.0.3 |
| org.scalanlp | breeze-macros_2.11 | 0.13.2 |
| org.scalanlp | breeze_2.11 | 0.13.2 |
| org.scalatest | scalatest_2.11 | 3.0.3 |
| org.slf4j | jcl-over-slf4j | 1.7.16 |
| org.slf4j | jul-to-slf4j | 1.7.16 |
| org.slf4j | slf4j-api | 1.7.16 |
| org.slf4j | slf4j-log4j12 | 1.7.16 |
| org.spark-project.hive | hive-beeline | 1.2.1.spark2 |
| org.spark-project.hive | hive-cli | 1.2.1.spark2 |
| org.spark-project.hive | hive-jdbc | 1.2.1.spark2 |
| org.spark-project.hive | hive-metastore (metadata opslag voor Hive) | 1.2.1.spark2 |
| org.spark-project.spark | ongebruikt | 1.0.0 |
| org.spire-math | spire-macros_2.11 | 0.13.0 |
| org.spire-math | spire_2.11 | 0.13.0 |
| org.springframework | kern van Spring | 4.1.4.RELEASE |
| org.springframework | lente-test | 4.1.4.RELEASE |
| org.tukaani | xz | 1.5 |
| org.typelevel | machinist_2.11 | 0.6.1 |
| org.typelevel | macro-compat_2.11 | 1.1.1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.7.3 |
| org.yaml | snakeyaml | 1.16 |
| oro | oro | 2.0.8 |
| software.amazon.ion | ion-java | 1.0.2 |
| stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0,52 |