Teilen über


Datenbausteine Laufzeit 9.1 LTS

Die folgenden Versionshinweise enthalten Informationen zu Databricks Runtime 9.1 LTS und Databricks Runtime 9.1 LTS Photon, unterstützt von Apache Spark 3.1.2. Databricks hat diese Version im September 2021 veröffentlicht. Photon ist als Public Preview verfügbar.

Hinweis

LTS bedeutet, dass diese Version langfristig unterstützt wird. Siehe Databricks Runtime LTS-Versionslebenszyklus.

Neue Features und Verbesserungen

Hinweise zum automatischen Loader-Schema funktionieren jetzt mit Array- und Zuordnungstypen

Array- und Zuordnungstypen werden in der Außerkraftsetzung des Schemas mit Schemahinweisen für das automatische Laden unterstützt.

Beispiele für Schemahinweise für Arrays sind:

  1. arr Array<TYPE> ändert den Arraytyp.
  2. arr.element TYPE ändert den Arraytyp (mithilfe des element Schlüsselworts).
  3. arr.element.x TYPE ändert einen geschachtelten Feldtyp in einem Array von Strukturen.

Die ersten beiden Beispiele sind Hinweise, um den Typ des Arrays arr zu TYPEändern, aber sie verwenden unterschiedliche Syntax. Im dritten Beispiel arr handelt es sich um ein Array von Strukturen mit einem Feld x. In diesem Beispiel wird gezeigt, wie Sie den Typ von x "in" TYPEändern.

Beispiele für Schemahinweise für Karten sind:

  1. m Map<KEY-TYPE, VALUE-TYPE> ändert Die Zuordnung von Schlüssel- und Werttypen.
  2. m.key TYPE ändert den Typ der Kartenschlüssel.
  3. m.value TYPE ändert den Typ der Kartenwerte.
  4. m.key.x TYPE ändert den Feldtyp in einem Kartenschlüssel.
  5. m.value.x TYPE ändert den Feldtyp eines Kartenwerts.

Im ersten Beispiel werden sowohl die Schlüssel- als auch die Werttypen der Zuordnung mKEY_TYPEVALUE_TYPE bzw. der Zuordnung geändert. Die zweiten und dritten Beispiele können verwendet werden, wenn nur der Schlüsseltyp oder nur der Werttyp geändert werden muss. In den vierten und fünften Beispielen m handelt es sich um eine Zuordnung mit Schlüssel und Wert von Strukturtypen mit einem Feld x. In diesem Beispiel wird gezeigt, wie Sie den Typ von x "in" TYPEändern.

Avro-Dateiunterstützung für das Seriendruckschema

Das Avro-Dateiformat unterstützt jetzt die mergeSchema Option beim Lesen von Dateien. Wenn sie mergeSchema beim Lesen von Avro-Dateien auf "true" festgelegt wird, wird ein Schema aus einer Reihe von Avro-Dateien und nicht aus einer einzelnen Datei abgeleitet. Dadurch wird die Benutzerfreundlichkeit verbessert, indem sie ein Schema ableiten, das möglicherweise alle Dateien lesen kann, auch wenn sich die einzelnen Schemas unterscheiden. Siehe Konfiguration.

Unterstützung für die inkrementelle Auflistung des automatischen Ladeprogramms (Öffentliche Vorschau)

Im Fall lexikalografischer generierter Dateien nutzt Das automatische Laden? Jetzt nutzt lexikalische Dateibestellung und vorhandene optimierte APIs, um die Verzeichnisauflistung effizienter zu gestalten, indem sie aus zuvor aufgenommenen Dateien auflisten, anstatt das gesamte Verzeichnis aufzulisten. Auto Loader erkennt automatisch, ob ein bestimmtes Verzeichnis standardmäßig für die inkrementelle Auflistung geeignet ist. Um dieses Verhalten explizit zu steuern, legen Sie die neue cloudFiles.useIncrementalListing Option auf ein (true), aus () oder automatisches (falseauto) fest. Wenn Sie dieses Verhalten auf true festlegen, können Sie auch die cloudFiles.backfillInterval Option festlegen, regelmäßige Rückfüllungen über Ihre Daten zu planen, um sicherzustellen, dass alle Ihre Daten vollständig aufgenommen werden.

Delta unterstützt jetzt beliebige ReplaceWhere

In Kombination mit dem Überschreibmodus kann die replaceWhere Option zum gleichzeitigen Überschreiben von Daten verwendet werden, die einem in der Option definierten Prädikat entsprechen. replaceWhere Zuvor wurde ein Prädikat nur über Partitionsspalten unterstützt, kann aber jetzt ein beliebiger Ausdruck sein. Siehe Schreiben in eine Tabelle.

Auto Loader für Google Cloud unterstützt jetzt Dateibenachrichtigungen (Public Preview)

Auto Loader unterstützt jetzt den Dateibenachrichtigungsmodus in Google Cloud. Legen Sie fest .option("cloudFiles.useNotifications", "true") , dass das automatische Laden automatisch Google Cloud Pub/Sub-Ressourcen für Sie einrichtet. Im Dateibenachrichtigungsmodus werden neue Dateien erkannt und aufgenommen, wenn sie eingehen, ohne das Eingabeverzeichnis aufzulisten. Siehe Auto Loader-Datenströme im Dateibenachrichtigungsmodus konfigurieren.

CREATE FUNCTION unterstützt jetzt das Erstellen von Tabellenfunktionen.

Zusätzlich zum Erstellen einer skalaren Funktion, die einen Skalarwert zurückgibt, können Sie jetzt eine Tabellenfunktion erstellen, die eine Reihe von Zeilen zurückgibt. Siehe CREATE FUNCTION (SQL und Python).

Kafka Streaming Source meldet estimatedTotalBytesBehindLatest jetzt Metrik

Die Kafka-Streamingquelle meldet jetzt eine Schätzung, wie viele Bytes der Verbraucher hinter dem neuesten verfügbaren Byte nach jedem Batch liegt. Sie können diese Metrik verwenden, um den Datenstromfortschritt nachzuverfolgen. Siehe Abrufen von Kafka-Metriken.

Beispiel für eine Metrikausgabe:

StreamingQueryProgress {
  "batchId": 0,
  .....
  "sources": [ {
    "description" : "KafkaV2[Subscribe[topic-0]]",
    "metrics":{
      "avgOffsetsBehindLatest" : "1.0",
      "estimatedTotalBytesBehindLatest" : "80.0", // new
      "maxOffsetsBehindLatest" : "1",
      "minOffsetsBehindLatest" : "1"
    } ],
  ....
 }

Für Strukturen innerhalb von Arrays löst Delta MERGE INTO nun Strukturfelder nach Namen auf und entwickelt Strukturschemas.

Delta MERGE INTO unterstützt jetzt die Auflösung von Strukturfeldern nach Namen und automatischer Schemaentwicklung für Arrays von Strukturen. Wenn die automatische Schemaentwicklung durch Festlegen spark.databricks.delta.schema.autoMerge.enabled auf "true" aktiviert ist, UPDATE und INSERT Klauseln lösen Strukturfelder innerhalb eines Arrays anhand des Namens auf, wandeln Sie in den entsprechenden Datentyp um, der im Zielarray definiert ist, und zusätzliche oder fehlende Felder in der Quelle oder dem Ziel mit Nullwerten zu füllen. Wenn die automatische Schemaentwicklung deaktiviert ist und UPDATE Klauseln Strukturfelder innerhalb eines Arrays anhand des Namens auflösen, INSERT aber die zusätzlichen Felder nicht weiterentwickeln können. Siehe Aktualisieren eines Delta Lake-Tabellenschemas.

Fehlerkorrekturen

  • Es wurde ein Speicherverlust im Amazon S3-Connector behoben, der in lang ausgeführten Aufträgen oder Diensten auftreten konnte, die durch die JVM-Funktionalität DeleteOnExit verursacht wurde.

Verbesserungen der Bibliothek

  • Aktualisierte Python-Bibliotheken:
    • zeichnungsmäßig von 4.14.3 bis 5.1.0
  • Aktualisierte R-Bibliotheken:
    • Basis von 4.1.0 bis 4.1.1
    • bslib von 0.2.5.1 bis 0.3.0
    • cachem von 1.0.5 auf 1.0.6
    • Compiler von 4.1.0 bis 4.1.1
    • Datasets von 4.1.0 bis 4.1.1
    • Zukunft von 1.21.0 bis 1.22.1
    • gert von 1.3.1 bis 1.3.2
    • Grafiken von 4.1.0 bis 4.1.1
    • grDevices von 4.1.0 bis 4.1.1
    • Raster von 4.1.0 bis 4.1.1
  • Aktualisierte Java-Bibliotheken:
    • org.eclipse.jetty von 9.4.36.v20210114 bis 9.4.42.v20210604

Apache Spark

Databricks Runtime 9.1 LTS umfasst Apache Spark 3.1.2. Diese Version enthält alle Spark-Fixes und Verbesserungen, die in Databricks Runtime 9.0 (EoS) enthalten sind, sowie die folgenden zusätzlichen Fehlerbehebungen und Verbesserungen, die an Spark vorgenommen wurden:

  • [SPARK-36674][SQL][CHERRY-PICK] Unterstützung von ILIKE - Groß-/Kleinschreibung wird WIE nicht beachtet
  • [SPARK-36353][SQL][3.1] RemoveNoopOperators sollten das Ausgabeschema beibehalten
  • [SPARK-35876][SQL][3.1] ArraysZip sollte Feldnamen beibehalten, um zu vermeiden, dass die Analyse/Optimierer neu geschrieben wird.
  • [SPARK-36398][SQL] Vertrauliche Informationen im Spark Thrift Server-Protokoll redact
  • [SPARK-36498][SQL] Ordnen Sie innere Felder der Eingabeabfrage in byName V2-Schreibzugriff neu an.
  • [SPARK-36614][CORE][UI] Korrigieren des Auslöserverlusts, der durch außerbetriebnahme in der Benutzeroberfläche verursacht wird
  • [SPARK-36012][SQL] Null-Flag hinzufügen in SHOW CREATE TABLE
  • [SPARK-36509][CORE] Beheben Sie das Problem, dass Die Ausführenden nie neu geplant werden, wenn der Worker mit dem eigenständigen Cluster beendet wird
  • [SPARK-36603][CORE] Verwenden Von WeakReference nicht SoftReference in LevelDB
  • [SPARK-36564][CORE] NullPointerException in LiveRDDDistribution.toApi beheben
  • [SPARK-36086][SQL][3.1] CollapseProject-Projekt ersetzen Alias sollte den Namen der Ursprungsspalte verwenden
  • [SPARK-33527][SQL] Erweitern Sie die Decodierungsfunktion so, dass sie mit Mainstreamdatenbanken konsistent ist.
  • [SPARK-36400][SPARK-36398][SQL][WEBUI] Ermöglichen, dass ThriftServer spark.sql.redaction.string.regex erkennt
  • [SPARK-34054][CORE] BlockManagerDecommissioner-Codebereinigung
  • [SPARK-36500][CORE] Beheben sie temp_shuffle Dateilecks, wenn eine Aufgabe unterbrochen wird
  • [SPARK-36489][SQL] Aggregatfunktionen ohne Gruppierungsschlüssel in Tabellen mit einem einzigen Bucket zurückgeben mehrere Zeilen
  • [SPARK-36464][CORE] Beheben der Initialisierung der zugrunde liegenden Größenvariablen in ChunkedByteBufferOutputStream zum Schreiben über 2 GB-Daten
  • [SPARK-36339][SQL][3.0] Verweise auf gruppieren, die nicht Teil der Aggregation sind zu ersetzen
  • [SPARK-36354][CORE] EventLogFileReader sollte rollierende Ereignisprotokollverzeichnisse ohne Protokolle überspringen
  • [SPARK-36242][CORE][3.1] Stellen Sie sicher, dass die Überlaufdatei geschlossen wurde, bevor sie erfolgreich war = true in der ExternalSorter.spillMemoryIteratorToDisk-Methode
  • [SPARK-36211][PYTHON] Korrigieren der Eingabe des Rückgabewerts udf
  • [SPARK-34222][SQL] Verbessern der booleschen Vereinfachungsregel
  • [SPARK-35027][CORE] Schließen Sie den inputStream in FileAppender, wenn writin...
  • [SPARK-36269][SQL] Korrigieren Sie nur das Festlegen von Datenspalten auf die Konfiguration von Strukturspaltennamen.
  • [SPARK-36213][SQL] Normalisieren von PartitionSpec für "Table"-Befehl mit PartitionSpec
  • [SPARK-36210][SQL] Spalteneinfügereihenfolge in Dataset beibehalten.withColumns
  • [SPARK-36079][SQL] Nullbasierte Filterschätzung sollte immer im Bereich [0, 1] liegen.
  • [SPARK-28266][SQL] convertToLogicalRelation sollte beim Lesen von Strukturtabellen keine Eigenschaft interpretieren path

Wartungsupdates

Siehe Databricks Runtime 9.1 LTS-Wartungsupdates.

Systemumgebung

  • Betriebssystem: Ubuntu 20.04.4 LTS
  • Java: Zulu 8.56.0.21-CA-linux64
  • Skala: 2.12.10
  • Python: 3.8.10
  • R: 4.1.1
  • Delta Lake: 1.0.0

Installierte Python-Bibliotheken

Bibliothek Version Bibliothek Version Bibliothek Version
Antergos Linux 2015.10 (ISO-Rolling) AppDirs 1.4.4 Rückruf 0.2.0
Boto3 1.16.7 Botocore 1.19.7 certifi 2020.12.5
Chardet 4.0.0 Fahrradfahrer 0.10.0 Cython 0.29.23
dbus-python 1.2.16 Dekorateur 5.0.6 Distlib 0.3.2
Distro-Informationen 0.23ubuntu1 Übersicht der Facetten 1.0.0 Dateisperrung 3.0.12
idna 2.10 ipykernel 5.3.4 ipython 7.22.0
ipython-genutils 0.2.0 Jedi 0.17.2 jmespath 0.10.0
joblib 1.0.1 Jupyter-Client 6.1.12 jupyter-core 4.7.1
kiwisolver 1.3.1 Koalas 1.8.1 matplotlib 3.4.2
numpy 1.19.2 Pandas 1.2.4 Parso 0.7.0
Sündenbock 0.5.1 pexpect 4.8.0 Gurke-Aktie 0.7.5
Kissen 8.2.0 Kern 21.0.1 Zeichnungsfläche 5.1.0
Prompt-Toolkit 3.0.17 protobuf 3.17.2 psycopg2 2.8.5
ptyprocess 0.7.0 Pyarrow 4.0.0 Pygments 2.8.1
PyGObject 3.36.0 Pyparsing 2.4.7 python-apt 2.0.0+ubuntu0.20.4.5
Python-dateutil 2.8.1 Pytz 2020.5 pyzmq 20.0.0
Aufforderungen 2.25.1 requests-unixsocket 0.2.0 s3transfer 0.3.7
scikit-learn – Maschinelles Lernwerkzeug 0.24.1 SciPy 1.6.2 Seegeboren 0.11.1
setuptools 52.0.0 Sechs 1.15.0 ssh-import-id 5.10
StatistikModelle 0.12.2 Hartnäckigkeit 8.0.1 Threadpoolctl 2.1.0
Tornado 6.1 Traitlets 5.0.5 unbeaufsichtigte Aktualisierungen 0,1
urllib3 1.25.11 virtualenv 20.4.1 wcwidth 0.2.5
Rad 0.36.2

Installierte R-Bibliotheken

R-Bibliotheken werden aus der Microsoft CRAN-Momentaufnahme am 2021-09-08 installiert. Die Momentaufnahme ist nicht mehr verfügbar.

Bibliothek Version Bibliothek Version Bibliothek Version
Askpass 1.1 prüfen, dass 0.2.1 Backports 1.2.1
Basis 4.1.1 base64enc 0.1-3 Bit 4.0.4
Bit64 4.0.5 Klumpen 1.2.2 Stiefel 1.3-28
brauen 1.0-6 Brio 1.1.2 Besen 0.7.9
bslib 0.3.0 cachem 1.0.6 Callr 3.7.0
Caret 6.0-88 CellRanger 1.1.0 Chron 2.3-56
Klasse 7.3-19 cli 3.0.1 Clipr 0.7.1
Gruppe 2.1.2 Codetools 0.2-18 Farbraum 2.0-2
Commonmark 1.7 Kompilierer 4.1.1 Konfiguration 0.3.1
cpp11 0.3.1 Buntstift 1.4.1 Zugangsdaten 1.3.1
Locke 4.3.2 data.table 1.14.0 Datensätze 4.1.1
DBI 1.1.1 dbplyr 2.1.1 Desc 1.3.0
devtools 2.4.2 diffobj 0.3.4 verdauen 0.6.27
dplyr 1.0.7 dtplyr 1.1.0 Ellipse 0.3.2
auswerten 0.14 Fans 0.5.0 farver 2.1.0
fastmap 1.1.0 Forcats 0.5.1 Foreach 1.5.1
Fremd 0.8-81 schmieden 0.2.0 Fs 1.5.0
Zukunft 1.22.1 future.apply 1.8.1 gurgeln 1.2.0
Generika 0.1.0 Gert 1.3.2 ggplot2 3.3.5
Gh 1.3.0 gitcreds 0.1.1 glmnet 4.1-2
Globalen 0.14.0 Klebstoff 1.4.2 googledrive 2.0.0
googlesheets4 1.0.0 Gower 0.2.2 Graphik 4.1.1
grGeräte 4.1.1 Gitter 4.1.1 gridExtra 2.3
gsubfn 0,7 g-Tabelle 0.3.0 Hafen 2.4.3
Highr 0.9 Hms 1.1.0 HTML-Werkzeuge 0.5.2
htmlwidgets 1.5.3 httpuv 1.6.2 httr 1.4.2
Hwriter 1.3.2 hwriterPlus 1.0-3 Ausweise 1.0.1
ini 0.3.1 IPRED 0.9-11 Isobande 0.2.5
Iteratoren 1.0.13 jquerylib 0.1.4 jsonlite 1.7.2
KernSmooth 2.23-20 Knitr 1.33 Etikettierung 0.4.2
später 1.3.0 Gitter 0.20-44 Lava 1.6.10
Lebenszyklus 1.0.0 „listenv“ 0.8.0 Schmiermittel 1.7.10
magrittr 2.0.1 Abschlag 1.1 MASSE 7.3-54
Matrix 1.3-4 Memoise 2.0.0 Methodik 4.1.1
mgcv 1.8-36 Mime-Kunst 0.11 ModelMetrics 1.2.2.2
Modellierer 0.1.8 munsell 0.5.0 nlme 3.1-152
nnet 7.3-16 numDeriv 2016.8 bis 1.1 OpenSSL 1.4.5
parallel 4.1.1 parallel dazu 1.27.0 Säule 1.6.2
pkgbuild 1.2.0 pkgconfig 2.0.3 pkgload 1.2.1
plogr 0.2.0 plyr 1.8.6 loben 1.0.0
prettyunits 1.1.1 Proc 1.18.0 Prozessx 3.5.2
prodlim 2019.11.13 Fortschritt 1.2.2 progressr 0.8.0
Versprechungen 1.2.0.1 ur 1.0.0 P.S. 1.6.0
Löscher 0.3.4 r2d3 0.2.5 R6 2.5.1
randomForest 4.6-14 rappdirs 0.3.3 rcmdcheck 1.3.3
RColorBrewer 1.1-2 Rcpp 1.0.7 READR 2.0.1
readxl (Softwarepaket zum Lesen von Excel-Dateien) 1.3.1 Rezepte 0.1.16 Rückspiel 1.0.1
Rückspiel2 2.1.2 fernbedienungen 2.4.0 Reprex 2.0.1
Umform2 1.4.4 rlang 0.4.11 Rmarkdown 2.10
RODBC 1.3-18 roxygen2 7.1.1 rpart 4.1-15
rprojroot 2.0.2 Rserve 1.8-8 RSQLite 2.2.8
rstudioapi 0,13 rversions 2.1.1 RVEST 1.0.1
Sass 0.4.0 Waage 1.1.1 Auswahl 0.4-2
Sitzungsinformationen 1.1.1 Form 1.4.6 glänzend 1.6.0
sourcetools 0.1.7 Sparklyr 1.7.1 SparkR 3.1.1
räumlich 7.3-11 Splines 4.1.1 sqldf 0.4-11
SQUAREM 2021.1 Statistiken 4.1.1 Statistiken4 4.1.1
Stringi 1.7.4 stringr 1.4.0 Überleben 3.2-13
sys 3.4 tcltk 4.1.1 Lehrdemos 2.10
testthat 3.0.4 Tibble 3.1.4 Räumter 1.1.3
aufräumen 1.1.1 aufräumen 1.3.1 timeDate 3043.102
tinytex 0,33 Werkzeuge 4.1.1 Zeitzonendatenbank (tzdb) 0.1.2
Nutze dies 2.0.1 utf8 1.2.2 Utils 4.1.1
Universelle eindeutige Kennung (UUID) 0.1-4 VCTRS 0.3.8 viridisLite 0.4.0
Vroom 1.5.4 Waldo 0.3.0 Backenbart 0,4
Withr 2.4.2 xfun 0.25 xml2 1.3.2
xopen 1.0.0 xtable 1.8-4 YAML-Dateiformat 2.2.1
schwirren 2.2.0

Installierte Java- und Scala-Bibliotheken (Scala 2.12-Clusterversion)

Gruppen-ID Artefakt-ID Version
antlr antlr 2.7.7
com.amazonaws Amazon-Kinesis-Client 1.12.0
com.amazonaws AWS Java SDK für Auto Scaling 1.11.655
com.amazonaws aws-java-sdk-cloudformation 1.11.655
com.amazonaws aws-java-sdk-cloudfront 1.11.655
com.amazonaws aws-java-sdk-cloudhsm 1.11.655
com.amazonaws aws-java-sdk-cloudsearch (Cloud-Suchdienst) 1.11.655
com.amazonaws aws-java-sdk-cloudtrail 1.11.655
com.amazonaws aws-java-sdk-cloudwatch 1.11.655
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.655
com.amazonaws aws-java-sdk-codedeploy 1.11.655
com.amazonaws aws-java-sdk-cognitoidentity 1.11.655
com.amazonaws aws-java-sdk-cognitosync 1.11.655
com.amazonaws AWS-Java-SDK-Config 1.11.655
com.amazonaws aws-java-sdk-core 1.11.655
com.amazonaws aws-java-sdk-datapipeline 1.11.655
com.amazonaws aws-java-sdk-directconnect 1.11.655
com.amazonaws aws-java-sdk-directory 1.11.655
com.amazonaws aws-java-sdk-db 1.11.655
com.amazonaws aws-java-sdk-ec2 1.11.655
com.amazonaws aws-java-sdk-ecs 1.11.655
com.amazonaws aws-java-sdk-efs 1.11.655
com.amazonaws aws-java-sdk-elasticache 1.11.655
com.amazonaws aws-java-sdk-elasticbeanstalk (Java SDK für Elastic Beanstalk von AWS) 1.11.655
com.amazonaws aws-java-sdk-elasticloadbalancing (Software Development Kit für Elastic Load Balancing in AWS mit Java) 1.11.655
com.amazonaws aws-java-sdk-elastictranscoder (AWS Java SDK für Elastic Transcoder) 1.11.655
com.amazonaws aws-java-sdk-emr 1.11.655
com.amazonaws aws-java-sdk-glacier 1.11.655
com.amazonaws aws-java-sdk-glue (eine Bibliothek für den Glue-Service von Amazon Web Services) 1.11.655
com.amazonaws aws-java-sdk-iam 1.11.655
com.amazonaws aws-java-sdk-importexport 1.11.655
com.amazonaws aws-java-sdk-kinesis 1.11.655
com.amazonaws aws-java-sdk-kms 1.11.655
com.amazonaws aws-java-sdk-lambda 1.11.655
com.amazonaws aws-java-sdk-Protokolle 1.11.655
com.amazonaws aws-java-sdk-machinelearning (Maschinelles Lernen) 1.11.655
com.amazonaws aws-java-sdk-marketplacecommerceanalytics 1.11.655
com.amazonaws aws-java-sdk-marketplacemeteringservice 1.11.655
com.amazonaws aws-java-sdk-opsworks 1.11.655
com.amazonaws aws-java-sdk-rds 1.11.655
com.amazonaws aws-java-sdk-redshift 1.11.655
com.amazonaws aws-java-sdk-route53 1.11.655
com.amazonaws aws-java-sdk-s3 1.11.655
com.amazonaws aws-java-sdk-ses 1.11.655
com.amazonaws aws-java-sdk-simpledb 1.11.655
com.amazonaws aws-java-sdk-simpleworkflow 1.11.655
com.amazonaws aws-java-sdk-sns 1.11.655
com.amazonaws aws-java-sdk-sqs 1.11.655
com.amazonaws aws-java-sdk-ssm 1.11.655
com.amazonaws aws-java-sdk-storagegateway 1.11.655
com.amazonaws aws-java-sdk-sts 1.11.655
com.amazonaws aws-java-sdk-Support (Unterstützung für AWS Java SDK) 1.11.655
com.amazonaws AWS-Java-SDK-SWF-Bibliotheken 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.655
com.amazonaws jmespath-java 1.11.655
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics Datenstrom 2.9.6
com.databricks Rserve 1.8-3
com.databricks Jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo-schattiert 4.0.2
com.esotericsoftware Minlog 1.3.0
com.fasterxml Klassenkamerad 1.3.4
com.fasterxml.jackson.core Jackson-Anmerkungen 2.10.0
com.fasterxml.jackson.core jackson-core 2.10.0
com.fasterxml.jackson.core Jackson-Datenbindung 2.10.0
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.10.0
com.fasterxml.jackson.datatype jackson-datatype-joda 2.10.0
com.fasterxml.jackson.module jackson-module-paranamer 2.10.0
com.fasterxml.jackson.module jackson-module-scala_2.12 2.10.0
com.github.ben-manes.coffein Koffein 2.3.4
com.github.fommil Jniloader 1.1
com.github.fommil.netlib Kern 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.joshelser dropwizard-metrics-hadoop-metrics2-reporter 0.1.2
com.github.luben zstd-jni 1.4.8-1
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.2.4
com.google.crypto.tink Tink 1.6.0
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava Guave 15,0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 1.4.195
com.helger Profiler 1.1.1
com.jcraft jsch 0.1.50
com.jolbox Bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure Azure Data Lake Store SDK (Software Development Kit für Azure Data Lake Store) 2.3.9
com.microsoft.sqlserver mssql-servers 9.2.1.jre8
com.ning compress-lzf (Datenkompression mit LZF-Algorithmus) 1.0.3
com.sun.mail javax.mail 1.5.2
com.tduning json 1.8
com.thoughtworks.paranamer Paranamer 2.8
com.trueaccord.lenses linsen_2.12 0.4.12
com.twitter chill-java 0.9.5
com.twitter chill_2.12 0.9.5
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe Konfiguration 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 3.1.0
commons-beanutils commons-beanutils 1.9.4
commons-cli commons-cli 1.2
commons-codec commons-codec 1.10
commons-collections commons-collections 3.2.2
Commons-Konfiguration Commons-Konfiguration 1.6
commons-dbcp commons-dbcp 1.4
commons-digester commons-digester 1.8
Commons-Dateihochladen Commons-Dateihochladen 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.4
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
hive-2.3__hadoop-2.7 jets3t-0.7 liball_deps_2.12
hive-2.3__hadoop-2.7 Zookeeper-3.4 liball_deps_2.12
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift Luftkompressor 0,10
io.delta delta-sharing-spark_2.12 0.1.0
io.dropwizard.metrics Metrikenkern 4.1.1
io.dropwizard.metrics Metrics-Graphit 4.1.1
io.dropwizard.metrics Metrik-Integritätsüberprüfungen 4.1.1
io.dropwizard.metrics Metrics-Jetty9 4.1.1
io.dropwizard.metrics Metrics-JMX 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics Metrik-Servlets 4.1.1
io.netty nett-all 4.1.51.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx Sammler 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation Aktivierung 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transaction jta 1.1
javax.transaction Transaktions-API 1.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.5
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
Maven-Bäume hive-2.3__hadoop-2.7 liball_deps_2.12
net.java.dev.jna jna 5.8.0
net.razorvine Pyrolit 4,30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv Super-CSV 2.2.0
net.Schneeflocke snowflake-ingest-sdk 0.9.6
net.Schneeflocke Snowflake-JDBC 3.13.3
net.Schneeflocke spark-snowflake_2.12 2.9.0-spark_3.1
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8-1
org.antlr stringtemplate 3.2.1
org.apache.ant Ameise 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant Ant-Startfeld 1.9.2
org.apache.arrow Pfeilformat 2.0.0
org.apache.arrow Pfeilspeicherkern 2.0.0
org.apache.arrow Arrow-memory-netty 2.0.0
org.apache.arrow Pfeil-Vektor 2.0.0
org.apache.avro avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.commons commons-compress 1.20
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.10
org.apache.commons commons-math3 3.4.1
org.apache.commons Commons-Text 1.6
org.apache.curator Kurator-Klient 2.7.1
org.apache.curator Kurator-Framework 2.7.1
org.apache.curator Rezepte des Kurators 2.7.1
org.apache.derby Melone 10.12.1.1
org.apache.directory.api api-asn1-api 1.0.0-M20
org.apache.directory.api api-util 1.0.0-M20
org.apache.directory.server apacheds-i18n 2.0.0-M15
org.apache.directory.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop Hadoop-Anmerkungen 2.7.4
org.apache.hadoop hadoop-auth 2.7.4
org.apache.hadoop Hadoop-Client 2.7.4
org.apache.hadoop hadoop-common 2.7.4
org.apache.hadoop hadoop-hdfs 2.7.4
org.apache.hadoop Hadoop-MapReduce-Client-Anwendung 2.7.4
org.apache.hadoop hadoop-mapreduce-client-common 2.7.4
org.apache.hadoop hadoop-mapreduce-client-core 2.7.4
org.apache.hadoop hadoop-mapreduce-client-jobclient (MapReduce-Client für Jobverwaltung) 2.7.4
org.apache.hadoop hadoop-mapreduce-client-shuffle 2.7.4
org.apache.hadoop hadoop-yarn-api 2.7.4
org.apache.hadoop hadoop-yarn-client 2.7.4
org.apache.hadoop hadoop-yarn-common 2.7.4
org.apache.hadoop hadoop-yarn-server-common 2.7.4
org.apache.hive hive-beeline 2.3.7
org.apache.hive hive-cli 2.3.7
org.apache.hive hive-silk 2.3.7
org.apache.hive hive-llap-Client 2.3.7
org.apache.hive hive-llap-common 2.3.7
org.apache.hive hive-serde 2.3.7
org.apache.hive hive-shims 2.3.7
org.apache.hive hive-storage-api 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.7
org.apache.hive.shims hive-shims-common 2.3.7
org.apache.hive.shims Hive-Shims-Scheduler 2.3.7
org.apache.htrace htrace-core 3.1.0-Inkubieren
org.apache.httpcomponents httpclient 4.5.6
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy Efeu 2.4.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.5.12
org.apache.orc orc-mapreduce 1.5.12
org.apache.orc Orc-Shims 1.5.12
org.apache.parkett Parkettsäule 1.10.1-databricks9
org.apache.parkett Gebräuchlich 1.10.1-databricks9
org.apache.parkett Parkettcodierung 1.10.1-databricks9
org.apache.parkett Parquet-Format 2.4.0
org.apache.parkett Parkett-Hadoop 1.10.1-databricks9
org.apache.parkett Parkett-Jackson 1.10.1-databricks9
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm7-shaded 4.15
org.apache.yetus Benutzergruppenanmerkungen 0.5.0
org.apache.zookeeper Tierpfleger 3.4.14
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-jaxrs 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.jackson jackson-xc 1.9.13
org.codehaus.janino Commons-Compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty Jetty-Client 9.4.42.v20210604
org.eclipse.jetty Jetty-Fortsetzung 9.4.42.v20210604
org.eclipse.jetty Jetty-HTTP 9.4.42.v20210604
org.eclipse.jetty Jetty-io 9.4.42.v20210604
org.eclipse.jetty Jetty-jndi 9.4.42.v20210604
org.eclipse.jetty Jetty-Plus 9.4.42.v20210604
org.eclipse.jetty Jetty-Proxy 9.4.42.v20210604
org.eclipse.jetty Jetty-Sicherheit 9.4.42.v20210604
org.eclipse.jetty Jetty Server 9.4.42.v20210604
org.eclipse.jetty Jetty-servlet 9.4.42.v20210604
org.eclipse.jetty Jetty-Servlets 9.4.42.v20210604
org.eclipse.jetty Jetty-util 9.4.42.v20210604
org.eclipse.jetty Jetty-util-ajax 9.4.42.v20210604
org.eclipse.jetty Jetty-Webanwendung 9.4.42.v20210604
org.eclipse.jetty Jetty-xml 9.4.42.v20210604
org.eclipse.jetty.websocket WebSocket-API 9.4.42.v20210604
org.eclipse.jetty.websocket WebSocket-Client 9.4.42.v20210604
org.eclipse.jetty.websocket websocket-common 9.4.42.v20210604
org.eclipse.jetty.websocket WebSocket-Server 9.4.42.v20210604
org.eclipse.jetty.websocket websocket-servlet 9.4.42.v20210604
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-Ortungssystem 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-neu verpackt 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2,30
org.glassfish.jersey.containers jersey-container-servlet-core 2,30
org.glassfish.jersey.core Jersey-Client 2,30
org.glassfish.jersey.core jersey-common 2,30
org.glassfish.jersey.core Jersey-Server 2,30
org.glassfish.jersey.inject jersey-hk2 2,30
org.glassfish.jersey.media jersey-media-jaxb 2,30
org.hibernate.validator Ruhezustands-Validator 6.1.0.Final
org.javassist Javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M5
org.json4s json4s-core_2.12 3.7.0-M5
org.json4s json4s-jackson_2.12 3.7.0-M5
org.json4s json4s-scalap_2.12 3.7.0-M5
org.lz4 lz4-java 1.7.1
org.mariadb.aspx mariadb-java-client 2.2.5
org.objenesis Objenese 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap RoaringBitmap 0.9.14
org.roaringbitmap Klemmstücke 0.9.14
org.rocksdb rocksdbjni 6.20.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.10
org.scala-lang scala-library_2.12 2.12.10
org.scala-lang scala-reflect_2.12 2.12.10
org.scala-lang.modules scala-collection-compat_2.12 2.1.1
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt Testoberfläche 1,0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1,0
org.scalanlp breeze_2.12 1,0
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark ungenutzt 1.0.0
org.springframework Federkern 4.1.4.RELEASE
org.springframework Frühlingstest 4.1.4.RELEASE
org.threeten 3ten-extra 1.5.0
org.tukaani xz 1.5
org.typelevel algebra_2.12 2.0.0-M2
org.typelevel Katzen-kernel_2.12 2.0.0-M4
org.typelevel Maschinist_2.12 0.6.8
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0-M1
org.typelevel spire-platform_2.12 0.17.0-M1
org.typelevel spire-util_2.12 0.17.0-M1
org.typelevel spire_2.12 0.17.0-M1
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-servers 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.2
org.yaml Schlangenyaml 1,24
Oro Oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1
xmlenc xmlenc 0,52