Share via

Databricks Runtime 10.5 (EoS)

Notitie

Ondersteuning voor deze Databricks Runtime-versie is beëindigd. Zie Beëindiging van ondersteuning en einde levenscyclus geschiedenis voor de einddatum van de ondersteuning. Zie Databricks Runtime-releaseopmerkingen over versies en compatibiliteit voor alle ondersteunde Databricks Runtime-versies.

De volgende releaseopmerkingen bevatten informatie over Databricks Runtime 10.5, mogelijk gemaakt door Apache Spark 3.2.1. Databricks heeft deze versie uitgebracht in mei 2022.

Nieuwe functies en verbeteringen

SQL: Nieuwe functies to_number en try_to_number

Met de to_number functie en try_to_number functie kunt u tekenweergaven van getallen in verschillende notaties converteren naar DECIMAL.

SQL: Nieuwe functie try_sum

In tegenstelling tot sum, retourneert de try_sum statistische functie NULL in plaats van een fout wanneer er een overloop optreedt.

SQL: Bijwerken naar ceil, ceilingen floor functies

De ceil functie, ceiling functie en floor functie ondersteunen nu een tweede optioneel argument om een doelschaal op te geven.

SQL: Nieuwe statistische functies regr_avgx en regr_avgy

De nieuwe regr_avgx statistische functie en regr_avgy statistische functie ondersteunen lineaire regressies.

SQL: Bijwerken naar contains, startswithen endswith functies

De contains functie, startswith functie en endswith functie ondersteunen nu binaire gegevenstypen als invoer naast tekenreeksen.

SQL: Nieuwe functie array_size

Met de nieuwe array_size functie wordt de grootte van een matrix berekend.

Unity Catalog: SQL LIST-uitvoer verwijdert is_directory kolom en voegt achtervoegsel / toe voor directorypaden (openbare preview)

De uitvoer van de SQL LIST-instructie voor het weergeven van paden die worden beheerd door Unity Catalog is gewijzigd. De is_directory kolom wordt niet meer weergegeven. In plaats daarvan eindigen paden die mappen vertegenwoordigen nu met een afsluitende slash (/) voor de kolommen path en name. Deze wijziging is voor consistentie met de uitvoer van de dbutils.fs.ls opdracht.

Automatisch laden: nieuwe SQL-functie CLOUD_FILES_STATE

U kunt de nieuwe CLOUD_FILES_STATE functie gebruiken om de interne status van een Auto Loader-stroom op te vragen. Zie Query's uitvoeren op bestanden die zijn gedetecteerd door de Auto Loader.

Auto Loader: ondersteuning voor bestandsmeldingen is nu officieel beschikbaar

Ondersteuning voor bestandsmeldingen voor Wat is Automatisch laden? in Google Cloud is nu algemeen beschikbaar.

Delta Lake: nieuwe maxRecordsPerFile optie voor maximale records die naar één bestand zijn geschreven

Wanneer u de DataFrame-API's gebruikt om naar een Delta-tabel te schrijven, kunt u de optie maxRecordsPerFile gebruiken om het maximum aantal records op te geven dat naar één bestand moet worden geschreven. Het opgeven van een waarde van nul of een negatieve waarde vertegenwoordigt geen limiet. Zie De grootte van het gegevensbestand beheren.

Veroudering van Koalas

Koalas is nu afgeschaft. Koalas biedt pandas-API's bovenop Apache Spark. Koalas is door de community bijgedragen en is beschikbaar als pandas-API in Spark vanaf Apache Spark 3.2. Koalas blijft vooraf geïnstalleerd voor Databricks Runtime 10.5, maar Koalas wordt niet meer vooraf geïnstalleerd vanaf de volgende Databricks Runtime-versie.

Zie voor meer informatie over pandas-API in Spark:

Nieuwe _metadata kolom voor alle bestandsindelingen

U kunt metagegevensgegevens voor invoerbestanden ophalen met de kolom _metadata. De kolom _metadata is verborgen. Deze kolom is beschikbaar voor alle invoerbestandsindelingen. Als u de _metadata kolom wilt opnemen in een geretourneerde DataFrame, moet u expliciet verwijzen naar deze kolom in uw query. Zie kolom Met metagegevens van bestand.

Uw pijplijn testen met Databricks Runtime 10.5

Databricks Runtime 10.5 is nu de ondersteunde preview versie voor Lakeflow Spark-declaratieve pijplijnen. Als u uw pijplijn wilt testen met Databricks Runtime 10.5, stelt u de channel instelling in op preview in uw pijplijninstellingen.

Bugfixes

  • De weergave van numUpdatedRows en numCopiedRows metriekresultaten verbeterd voor updatebewerkingen in Delta-tabellen met ingeschakelde wijzigingsgegevensopname (CDC).

Bibliotheekupgrades

  • Bijgewerkte Python-bibliotheken:
    • plotly van 5.5.0 naar 5.6.0
  • Bijgewerkte R-bibliotheken:
    • basis van 4.1.2 tot 4.1.3
    • caret van 6,0-90 tot 6,0-91
    • cluster van 2.1.2 tot 2.1.3
    • commonmark van 1.7 naar 1.8.0
    • compiler van 4.1.2 tot 4.1.3
    • krijt van 1.5.0 tot 1.5.1
    • gegevenssets van 4.1.2 tot 4.1.3
    • desc van 1.4.0 tot 1.4.1
    • fansi bijgewerkt van versie 1.0.2 naar 1.0.3
    • lijm van 1.6.1 tot 1.6.2
    • afbeeldingen van 4.1.2 tot 4.1.3
    • grDevices van 4.1.2 tot 4.1.3
    • raster van 4.1.2 tot 4.1.3
    • knitr van 1.37 naar 1.38
    • MASSA van 7.3-55 tot 7.3-56
    • Matrix van 1,4-0 tot 1,4-1
    • methoden van 4.1.2 tot 4.1.3
    • mgcv van 1,8-39 tot 1,8-40
    • nlme van 3.1-155 tot 3.1-157
    • openssl van 1.4.6 tot 2.0.0
    • parallel van 4.1.2 tot 4.1.3
    • plyr bijgewerkt van 1.8.6 naar 1.8.7
    • processx van 3.5.2 tot 3.5.3
    • r2d3 van 0.2.5 tot 0.2.6
    • Rcpp van 1.0.8 tot 1.0.8.3
    • rlang van 1.0.1 tot 1.0.2
    • rmarkdown van 2.11 tot 2.13
    • RSQLite van 2.2.10 tot 2.2.11
    • sass van 0.4.0 tot 0.4.1
    • splines van 4.1.2 tot 4.1.3
    • statistieken van 4.1.2 tot 4.1.3
    • stats4 van 4.1.2 tot 4.1.3
    • tcltk van 4.1.2 tot 4.1.3
    • hulpprogramma's van 4.1.2 tot 4.1.3
    • utils van 4.1.2 tot 4.1.3
    • uuid van 1,0-3 tot 1,0-4
    • waldo van 0.3.1 tot 0.4.0
    • bijwerken van 2.4.3 naar 2.5.0
    • xfun van 0,29 tot 0,30
  • Bijgewerkte Java-bibliotheken:
    • com.h2database.h2 van 1.4.195 tot 2.1.210
    • org.apache.hadoop.hadoop-client-api van 3.3.1-databricks naar 3.3.2-databricks
    • org.apache.hadoop.hadoop-client-runtime van versie 3.3.1 tot 3.3.2
    • org.rocksdb.rocksdbjni van 6.24.2 tot 6.20.3

Apache Spark

Databricks Runtime 10.5 bevat Apache Spark 3.2.1. Deze release bevat alle Spark-oplossingen en -verbeteringen die zijn opgenomen in Databricks Runtime 10.4 LTS (EoS) en de volgende aanvullende bugfixes en verbeteringen in Spark:

  • [SPARK-38354] [SC-97886] Revert "[SQL] Add hash probes metric for shuffled hash join"
  • [SPARK-38484] [SAS-103][sas-111][SAS-113][sc-98102][Cherry-Pick] Instrument PySpark SQL-module met algemene gebruikslogger
  • [SPARK-38333] [SQL] De expressie PlanExpression moet de addExprTree-functie in Executor overslaan
  • [SPARK-38646] [PYTHON][10.x] Een eigenschap ophalen voor Python-functies
  • [SPARK-38674] [FOTON] Een metrische waarde toevoegen aan PhotonSubqueryBroadcastExec
  • [SPARK-38787] [SS] Vervang gevonden waarde door een niet-null-element in de resterende lijst voor sleutel en verwijder resterende null-elementen uit waarden in de keyWithIndexToValue-opslag voor stream-stream-koppelingen.
  • [SPARK-38446] [Core] Impasse opgelost tussen ExecutorClassLoader en FileDownloadCallback veroorzaakt door Log4j
  • [SPARK-38705] [SQL] Functie-id gebruiken in de opdracht 'functie aanmaken' en 'functie verwijderen'
  • [SPARK-38684] [SS] Los correctheidsprobleem op bij stream-stream outer join met RocksDB-statusopslagprovider
  • [SPARK-38655] [SQL] OffsetWindowFunctionFrameBase kan de offsetrij waarvan de invoer niet null is, niet vinden
  • [SPARK-38204] [SS] StatefulOpClusteredDistribution gebruiken voor stateful toepassingen, rekening houdend met achterwaartse compatibiliteit
  • [SPARK-38616] [SQL] SQL-querytekst bijhouden in Catalyst TreeNode
  • [SPARK-38600] [SQL] Opnemen unit in de SQL-tekenreeks van TIMESTAMPADD/DIFF
  • [SPARK-34805] [SQL] Metagegevens van geneste kolommen doorgeven in Alias
  • [SPARK-38535] [SQL] Voeg de datetimeUnit opsomming toe en gebruik deze in TIMESTAMPADD/DIFF
  • [SPARK-38415] [SQL] Werk het resultaattype histogram_numeric (x, y) bij om x == het invoertype te maken
  • [SPARK-38148] [SQL] Voeg geen dynamische partitie-eliminatie toe als er statische partitie-eliminatie bestaat.
  • [SPARK-37527] [SQL] Compileren COVAR_POPen COVAR_SAMPCORR inH2Dialet
  • [SPARK-38510] [SQL] Probeer ClassSymbol.selfType opnieuw om cyclische verwijzingen te omzeilen
  • [SPARK-38509] [SQL] De registratie van de TIMESTAMPADD/DIFF-functies ongedaan maken en DATE_ADD/DIFF verwijderen
  • [SPARK-38504] [SQL] Kan TimestampNTZ niet lezen als TimestampLTZ
  • [SPARK-38526] [SQL] De naam van de misleidende functiealias voor RuntimeReplaceable corrigeren
  • [SPARK-38335] [SQL] Parser-ondersteuning implementeren voor STANDAARDkolomwaarden
  • [SPARK-38593] [SS] Voer de metrische gegevens over van het aantal verwijderde late gebeurtenissen naar SessionWindowStateStoreSaveExec
  • [SPARK-38549] [SS] Toevoegen numRowsDroppedByWatermark aan SessionWindowStateStoreRestoreExec
  • [SPARK-38583] [SQL] Herstel het gedrag van to_timestamp waarmee numerieke typen zijn toegestaan
  • [SPARK-38481] [SQL] Vervang java-overloopuitzondering door TIMESTAMPADD Spark-uitzondering
  • [SPARK-37753] [SQL] Verfijn de logica om broadcast-hash-join te degraderen in DynamicJoinSelection
  • [SPARK-37582] [SPARK-37583][sql] CONTAINS, STARTSWITH, ENDSWITH moet ondersteuning bieden voor zowel tekenreeks- als binaire typen
  • [SPARK-38345] [SQL] Een SQL-functie introduceren ARRAY_SIZE
  • [SPARK-38385] [SQL] Foutberichten van lege instructie en <EOF> in ParseException verbeteren
  • [SPARK-37614] [SQL] Ondersteuning voor ansi-statistische functie: regr_avgx ®r_avgy
  • [SPARK-38560] [SQL] Als Sum, Count, Any samen met distinct worden gebruikt, kan geen gedeeltelijke aggregatie doorgevoerd worden.
  • [SPARK-38360] [SQL][ss][PYTHON] Introduceer een exists functie om TreeNode dubbele codepatronen te elimineren
  • [SPARK-38385] [SQL] Foutberichten van 'niet-overeenkomende invoer' van ANTLR verbeteren
  • [SPARK-38240] [SQL] RuntimeReplaceable verbeteren en een richtlijn toevoegen voor het toevoegen van nieuwe functies
  • [SPARK-38542] [SQL]UnsafeHashedRelation moet numKeys serialiseren
  • [SPARK-38521] [SQL] Wijzigen partitionOverwriteMode van tekenreeks in variabele in Scala
  • [SPARK-38558] [SQL] Verwijder onnodige casts tussen IntegerType en IntDecimal
  • [SPARK-38489] [SQL] Aggregate.groupOnly ondersteunt vouwbare expressies
  • [SPARK-38410] [SQL] Ondersteuning geef het eerste partitienummer op voor herverdeling
  • [SPARK-38107] [SQL] Foutklassen gebruiken in de compilatiefouten van python/pandas UDF's
  • [SPARK-38354] [SQL] Metriek voor hash-probes toevoegen voor geshuffelde hash-join
  • [SPARK-38112] [SQL] Foutklassen gebruiken in de uitvoeringsfouten van de verwerking van datum-/tijdstempels
  • [SPARK-38361] [SQL] Voeg de factorymethode getConnection toe aan JDBCDialect.
  • [SPARK-37865] [SQL] Probleem met fout in samenvoegingsontdubbeling oplossen
  • [SPARK-38298] [SQL][tests] Fix DataExpressionSuite, NullExpressionsSuite, StringExpressionsSuite, complexTypesSuite, CastSuite onder ANSI-modus
  • [SPARK-38407] [SQL] ANSI Cast: versoepel de beperking van het casten van niet-null complexe typen
  • [SPARK-38352] [SQL] Oplossing voor DataFrameAggregateSuite/DataFrameSetOperationsSuite/DataFrameWindowFunctionsSuite onder ANSI-modus
  • [SPARK-38054] [SQL] Ondersteunt lijstnaamruimten in JDBC v2 MySQL dialect
  • [SPARK-37960] [SQL] Een nieuw framework voor katalysatorexpressies in DS v2-API's
  • [SPARK-38103] [SQL] Parseringsfouten van transformatie migreren naar het nieuwe foutframework
  • [SPARK-38519] [SQL] Uitzondering voor AQE-throw moet SparkFatalException respecteren
  • [SPARK-38528] [SQL] Gretig herhalen over de aggregatiesreeks bij het bouwen van een projectlijst in ExtractGenerator
  • [SPARK-38320] [SS] Probleem met timeout van flatMapGroupsWithState in batch opgelost met gegevens voor sleutel
  • [SPARK-38442] [SQL] Fix ConstantFoldingSuite/ColumnExpressionSuite/DataFrameSuite/AdaptiveQueryExecSuite onder ANSI-modus
  • [SPARK-38268] [SQL] Het veld failOnError verbergen in de toString-methode van Abs/CheckOverflow
  • [SPARK-37949] [SQL] Schatting van statistieken voor opnieuw verdelen verbeteren
  • [SPARK-38450] [SQL] HiveQuerySuite//PushFoldableIntoBranchesSuite/TransposeWindowSuite in ANSI-modus herstellen
  • [SPARK-38501] [SQL] Thriftserver-testfouten onder ANSI-modus oplossen
  • [SPARK-37895] [SQL] Filter kolom met gequote kolommen omlaag duwen
  • [SPARK-38449] [SQL] Vermijd aanroepen van createTable wanneer ignoreIfExists=true en de tabel bestaat
  • [SPARK-38406] [SQL] Prestaties van ShufflePartitionsUtil createSkewPartitionSpecs verbeteren
  • [SPARK-37947] [SQL] Extraheer generator uit GeneratorOuter-expressie bevat in een Generator-operator.
  • [SPARK-38309] [CORE] ShS shuffleTotalReads - en shuffleTotalBlocks percentielgegevens herstellen
  • [SPARK-38412] [SS] De gewisselde reeks van en naar in StateSchemaCompatibilityChecker herstellen
  • [SPARK-38267] [CORE][sql][SS] Patroonovereenkomsten vervangen voor booleaanse expressies door voorwaardelijke instructies
  • [SPARK-38104] [SQL] Migreer vensterparseringsfouten naar het nieuwe foutframework
  • [SPARK-38434] [SQL] De semantische methode CheckAnalysis.getDataTypesAreCompatibleFn corrigeren
  • [SPARK-38033] [SS] De SS-verwerking kan niet worden gestart omdat de com...
  • [SPARK-38378] [SQL] Herstructureren van de ANTLR-grammaticadefinitie in afzonderlijke Parser- en Lexer-bestanden
  • [SPARK-37475] [SQL] Schaalparameter toevoegen aan vloer- en ceil-functies
  • [SPARK-38411] [CORE] Gebruiken UTF-8 wanneer gebeurtenislogboeken doMergeApplicationListingInternal worden gelezen
  • [SPARK-36553] [ML] KMeans vermijden rekenhulpstatistieken voor grote K
  • [SPARK-38393] [SQL] Afgeschaft gebruik van GenSeq/GenMap
  • [SPARK-38389] [SQL] Voeg de DATEDIFF() en DATE_DIFF() aliassen toe voor TIMESTAMPDIFF()
  • [SPARK-33206] [CORE][3.2] Gewichtberekening van de shuffle-indexcache corrigeren voor kleine indexbestanden
  • [SPARK-38353] [PYTHON] Implementeer de magic-methoden __enter__ en __exit__ voor de Pandas API op Spark
  • [SPARK-38323] [SQL][streaming] Ondersteuning voor de metagegevens van verborgen bestanden in Streaming
  • [SPARK-38138] [SQL] QueryPlan-subquery's materialiseren
  • [SPARK-38094] Overeenkomende schemakolomnamen inschakelen op basis van veld-id's
  • [SPARK-37923] [SQL] Partitietransformaties genereren voor BucketSpec binnen parser
  • [SPARK-38363] [SQL] Runtimefout voorkomen in Dataset.summary()/Dataset.describe() wanneer de ANSI-modus is ingeschakeld
  • [SPARK-38284] [SQL] De TIMESTAMPDIFF() functie toevoegen
  • [SPARK-38251] [SQL] Cast.toString wijzigen als cast in plaats van 'ansi_cast' onder ANSI-modus
  • [SPARK-38314] [SQL] Oplossing voor het niet lezen van Parquet-bestanden na het schrijven van de metagegevens van het verborgen bestand in

Zie onderhoudsupdates voor Databricks Runtime 10.5.

Systeemomgeving

  • Besturingssysteem: Ubuntu 20.04.4 LTS
  • Java: Zulu 8.56.0.21-CA-linux64
  • Scala: 2.12.14
  • Python: 3.8.10
  • R: 4.1.3
  • Delta Lake: 1.2.1

Geïnstalleerde Python-bibliotheken

Bibliotheek Versie Bibliotheek Versie Bibliotheek Versie
Antergos Linux 2015.10 (ISO-Rolling) Appdirs (een hulpprogramma voor het beheren van applicatiedirectories) 1.4.4 argon2-cffi 20.1.0
async-generator 1,10 kenmerken 20.3.0 terugroepactie 0.2.0
bidict 0.21.4 bleekmiddel 3.3.0 boto3 1.16.7
botocore 1.19.7 certificaat 2020.12.5 cffi 1.14.5
chardet 4.0.0 wielrijder 0.10.0 Cython 0.29.23
dbus-python 1.2.16 decorateur 5.0.6 defusedxml 0.7.1
distlib 0.3.4 distro-info 0.23ubuntu1 invoerpunten 0,3
facettenoverzicht 1.0.0 bestandsvergrendeling 3.6.0 IDNA 2.10
ipykernel 5.3.4 ipython 7.22.0 ipython-genutils 0.2.0
ipywidgets 7.6.3 Jedi 0.17.2 Jinja2 2.11.3
jmespath 0.10.0 joblib 1.0.1 jsonschema 3.2.0
jupyter-client (softwarepakket voor Jupyter-notebooks) 6.1.12 jupyter-core 4.7.1 jupyterlab-pygments 0.1.2
jupyterlab-widgets 1.0.0 kiwisolver 1.3.1 koalas 1.8.2
MarkupSafe 2.0.1 matplotlib 3.4.2 onstemmen 0.8.4
nbclient 0.5.3 nbconvert 6.0.7 nbformat 5.1.3
nest-asyncio 1.5.1 notitieboekje 6.3.0 numpy 1.20.1
verpakking 20.9 Pandas 1.2.4 pandocfilters 1.4.3
parso 0.7.0 Patsy 0.5.1 pexpect 4.8.0
pickleshare 0.7.5 Kussen 8.2.0 pip 21.0.1
plotly 5.6.0 prometheus-client 0.10.1 prompt-hulpmiddelenpakket 3.0.17
protocolbuffers 3.17.2 psycopg2 2.8.5 ptyprocess 0.7.0
pyarrow 4.0.0 pycparser 2,20 Pygments 2.8.1
PyGObject 3.36.0 pyparsing 2.4.7 pyrsistent 0.17.3
python-apt 2.0.0+ubuntu0.20.4.7 python-dateutil (een bibliotheek voor datum- en tijdgebaseerde functionaliteit in Python) 2.8.1 python-engineio 4.3.0
python-socketio 5.4.1 pytz 2020.5 pyzmq 20.0.0
Verzoeken 2.25.1 requests-unixsocket 0.2.0 s3transfer 0.3.7
scikit-learn 0.24.1 Scipy (een wetenschappelijke bibliotheek voor Python) 1.6.2 geboren op zee 0.11.1
Send2Trash 1.5.0 setuptools (een Python-pakket voor het beheren van installatie en distributie van pakketten) 52.0.0 Zes 1.15.0
ssh-import-id 5.10 statsmodels 0.12.2 vasthoudendheid 8.0.1
afgerond 0.9.4 testpath 0.4.4 threadpoolctl 2.1.0
tornado 6.1 Traitlets (Python library voor het configureren van Python-objecten) 5.0.5 upgrades zonder toezicht 0,1
urllib3 1.25.11 virtualenv 20.4.1 wcwidth 0.2.5
Webencoderingen 0.5.1 wiel 0.36.2 widgetsnbextension 3.5.1

Geïnstalleerde R-bibliotheken

R-bibliotheken worden geïnstalleerd vanaf de Microsoft CRAN-momentopname van 28-03-2022.

Bibliotheek Versie Bibliotheek Versie Bibliotheek Versie
wachtwoord vragen 1.1 verzeker dat 0.2.1 terugimporten 1.4.1
basis 4.1.3 base64enc 0.1-3 beetje 4.0.4
64-bitsysteem 4.0.5 Druppel 1.2.2 opstarten 1.3-28
brouwsel 1.0-7 Brio 1.1.3 bezem 0.7.12
bslib 0.3.1 cachem 1.0.6 beller 3.7.0
Caret 6.0-91 cellranger (softwaretool voor genetische analyse) 1.1.0 Chron 2.3-56
klasse 7.3-20 CLI 3.2.0 Clipr 0.8.0
groep 2.1.3 codetools 0.2-18 kleurenruimte 2.0-3
commonmark 1.8.0 programmacompileerder 4.1.3 configuratie 0.3.1
cpp11 0.4.2 kleurpotlood 1.5.1 geloofsbrief 1.3.2
curl 4.3.2 gegevenstabel 1.14.2 gegevenssets 4.1.3
DBI 1.1.2 dbplyr 2.1.1 Beschrijving 1.4.1
devtools 2.4.3 diffobj 0.3.5 verwerken 0.6.29
dplyr (een R-pakket voor gegevensmanipulatie) 1.0.8 dtplyr 1.2.1 e1071 1.7-9
beletselteken 0.3.2 beoordelen 0,15 fans 1.0.3
kleuren 2.1.0 snelle kaart 1.1.0 Fontawesome 0.2.2
dwangarbeiders 0.5.1 foreach 1.5.2 buitenlands 0.8 - 82
smeden 0.2.0 fs 1.5.2 toekomst 1.24.0
future.apply 1.8.1 gorgelen 1.2.0 Generics 0.1.2
Gert 1.5.0 ggplot2 3.3.5 Gh 1.3.0
gitcreds 0.1.1 glmnet 4.1-3 globale variabelen 0.14.0
lijm 1.6.2 googledrive 2.0.0 googlesheets4 1.0.0
Gower 1.0.0 afbeeldingen 4.1.3 grDevices 4.1.3
netwerk 4.1.3 gridExtra 2.3 gsubfn 0,7
gtable 0.3.0 veiligheidshelm 0.2.0 toevluchtsoord/schuilplaats 2.4.3
hoger 0,9 hms 1.1.1 htmltools 0.5.2
htmlwidgets 1.5.4 httpuv 1.6.5 httr 1.4.2
hwriter 1.3.2 hwriterPlus 1.0-3 identiteiten 1.0.1
ini 0.3.1 IPRED 0.9-12 isoband 0.2.5
Iterators 1.0.14 jquerylib 0.1.4 jsonlite 1.8.0
KernSmooth 2.23-20 knitr 1,38 etikettering 0.4.2
daarna 1.3.0 latwerk 0.20-45 lava 1.6.10
levenscyclus 1.0.1 luisteren 0.8.0 lubridate 1.8.0
magrittr 2.0.2 Markdown 1.1 MASSA 7.3-56
Matrix 1.4-1 memoriseer 2.0.1 methoden 4.1.3
mgcv 1.8-40 Mime 0,12 ModelMetrics 1.2.2.2
modelr 0.1.8 munsell 0.5.0 nlme 3.1-157
nnet 7.3-17 numDeriv 2016.8 tot 1.1 OpenSSL-software 2.0.0
evenwijdig 4.1.3 parallel 1.30.0 pilaar 1.7.0
pkgbuild 1.3.1 pkgconfig 2.0.3 pkgload 1.2.4
plogr 0.2.0 plyr 1.8.7 prijzen 1.0.0
prettyunits 1.1.1 pROC 1.18.0 Processx 3.5.3
prodlim 2019.11.13 Voortgang 1.2.2 progressr 0.10.0
Beloften 1.2.0.1 Proto 1.0.0 tussenpersoon 0.4-26
P.S. 1.6.0 purrr 0.3.4 r2d3 0.2.6
R6 2.5.1 randomForest 4.7-1 rappdirs 0.3.3
rcmdcheck 1.4.0 RColorBrewer 1.1-2 Rcpp 1.0.8.3
RcppEigen 0.3.3.9.1 readr 2.1.2 readxl (een programma voor het lezen van Excel-bestanden) 1.3.1
recepten 0.2.0 Rematch 1.0.1 opnieuw overeenkomen2 2.1.2
Afstandsbedieningen 2.4.2 reprex (reproduceerbaar voorbeeld) 2.0.1 reshape2 1.4.4
rlang 1.0.2 rmarkdown 2.13 RODBC 1.3-19
roxygen2 7.1.2 rpart (een R-pakket voor beslissingsboommodellering) 4.1.16 rprojroot 2.0.2
Rserve 1.8-10 RSQLite 2.2.11 rstudioapi 0,13
rversions 2.1.1 rvest (een softwarepakket voor webscraping) 1.0.2 Sass 0.4.1
weegschaal 1.1.1 Selectr 0,4-2 sessiegegevens 1.2.2
vorm 1.4.6 glanzend en nieuw 1.7.1 sourcetools 0.1.7
sparklyr 1.7.5 SparkR 3.2.0 ruimtelijk 7.3-11
Splines 4.1.3 sqldf 0.4-11 SQUAREM 2021.1
Statistieken 4.1.3 statistieken4 4.1.3 strings 1.7.6
stringr 1.4.0 survival 3.2-13 sys 3.4
tcltk 4.1.3 OnderwijsDemo's 2.10 testthat 3.1.2
tibble 3.1.6 tidyr 1.2.0 tidyselect 1.1.2
tidyverse 1.3.1 tijd en datum 3043.102 tinytex 0,37
gereedschappen 4.1.3 tzdb 0.2.0 gebruik dit 2.1.5
utf8 1.2.2 hulpmiddelen 4.1.3 UUID (Universally Unique Identifier) 1.0-4
vctrs 0.3.8 viridisLite 0.4.0 Vroom 1.5.7
Waldo 0.4.0 snor 0,4 verwelken 2.5.0
xfun 0,30 xml2 1.3.3 xopen 1.0.0
xtable 1.8-4 YAML 2.3.5 zip-bestand 2.2.0

Geïnstalleerde Java- en Scala-bibliotheken (Scala 2.12-clusterversie)

Groeps-id Artefact-ID Versie
antlr antlr 2.7.7
com.amazonaws Amazon Kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling (Amazon Web Services Java Software Development Kit voor automatisch schalen) 1.12.189
com.amazonaws aws-java-sdk-cloudformation 1.12.189
com.amazonaws aws-java-sdk-cloudfront 1.12.189
com.amazonaws aws-java-sdk-cloudhsm 1.12.189
com.amazonaws aws-java-sdk-cloudsearch 1.12.189
com.amazonaws aws-java-sdk-cloudtrail 1.12.189
com.amazonaws aws-java-sdk-cloudwatch 1.12.189
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.189
com.amazonaws aws-java-sdk-codedeploy 1.12.189
com.amazonaws aws-java-sdk-cognitoidentity 1.12.189
com.amazonaws aws-java-sdk-cognitosync 1.12.189
com.amazonaws aws-java-sdk-config (configuratie) 1.12.189
com.amazonaws aws-java-sdk-core 1.12.189
com.amazonaws AWS Java SDK Datapipeline 1.12.189
com.amazonaws aws-java-sdk-directconnect 1.12.189
com.amazonaws aws-java-sdk-directory 1.12.189
com.amazonaws aws-java-sdk-dynamodb 1.12.189
com.amazonaws aws-java-sdk-ec2 1.12.189
com.amazonaws aws-java-sdk-ecs 1.12.189
com.amazonaws aws-java-sdk-efs 1.12.189
com.amazonaws aws-java-sdk-elasticache 1.12.189
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.189
com.amazonaws AWS Java SDK - Elastic Load Balancing 1.12.189
com.amazonaws aws-java-sdk-elastictranscoder 1.12.189
com.amazonaws aws-java-sdk-emr 1.12.189
com.amazonaws aws-java-sdk-glacier (AWS Java SDK Glacier) 1.12.189
com.amazonaws aws-java-sdk-glue (een softwareontwikkelingskit voor het werken met AWS Glue in Java) 1.12.189
com.amazonaws aws-java-sdk-iam 1.12.189
com.amazonaws AWS Java SDK Import/Export 1.12.189
com.amazonaws aws-java-sdk-kinesis 1.12.189
com.amazonaws aws-java-sdk-kms 1.12.189
com.amazonaws aws-java-sdk-lambda 1.12.189
com.amazonaws aws-java-sdk-logbestanden 1.12.189
com.amazonaws AWS-Java-SDK-MachineLearning 1.12.189
com.amazonaws aws-java-sdk-opsworks 1.12.189
com.amazonaws aws-java-sdk-rds 1.12.189
com.amazonaws aws-java-sdk-redshift 1.12.189
com.amazonaws aws-java-sdk-route53 1.12.189
com.amazonaws aws-java-sdk-s3 1.12.189
com.amazonaws aws-java-sdk-ses 1.12.189
com.amazonaws aws-java-sdk-simpledb 1.12.189
com.amazonaws aws-java-sdk-simpleworkflow 1.12.189
com.amazonaws aws-java-sdk-sns 1.12.189
com.amazonaws aws-java-sdk-sqs 1.12.189
com.amazonaws aws-java-sdk-ssm 1.12.189
com.amazonaws aws-java-sdk-storagegateway (een Java software development kit voor het beheren van opslaggateways in AWS) 1.12.189
com.amazonaws aws-java-sdk-sts 1.12.189
com.amazonaws aws-java-sdk-ondersteuning 1.12.189
com.amazonaws aws-java-sdk-swf-bibliotheken 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.189
com.amazonaws jmespath-java 1.12.189
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics stroom 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo-gearceerd 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml klasgenoot 1.3.4
com.fasterxml.jackson.core Jackson-annotaties 2.12.3
com.fasterxml.jackson.core jackson-core 2.12.3
com.fasterxml.jackson.core jackson-databind 2.12.3
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.12.3
com.fasterxml.jackson.datatype jackson-datatype-joda 2.12.3
com.fasterxml.jackson.module jackson-module-paranamer 2.12.3
com.fasterxml.jackson.module jackson-module-scala_2.12 2.12.3
com.github.ben-manes.caffeine cafeïne 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib kern 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_systeem-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native systeem voor Linux x86_64, inclusief natives 1.1
com.github.luben zstd-jni 1.5.0-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson (een Java-bibliotheek voor het converteren van Java-objecten naar JSON en vice versa) 2.8.6
com.google.crypto.tink Tink 1.6.0
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava guave 15,0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.1.210
com.helger profielmaker 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.UITGAVE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure Azure-Data-Lake-Store-SDK 2.3.9
com.ning compress-lzf (een compressie-algoritme) 1.0.3
com.sun.istack istack-commons-runtime 3.0.8
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-functie_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe configuratie 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.2
commons-codec commons-codec 1.15
gemeenschappelijke collecties gemeenschappelijke collecties 3.2.2
commons-dbcp commons-dbcp 1.4
bestandsupload van commons bestandsupload van commons 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.8.0
commons-lang commons-lang 2.6
gemeenschappelijke-logboekvoorziening gemeenschappelijke-logboekvoorziening 1.1.3
commons-net commons-net 3.1
commons-pool (gemeenschappelijke pool) commons-pool (gemeenschappelijke pool) 1.5.4
dev.ludovic.netlib arpack 2.2.1
dev.ludovic.netlib Blas 2.2.1
dev.ludovic.netlib LAPACK 2.2.1
hive-2.3__hadoop-3.2 jets3t-0.7 liball_deps_2.12
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift luchtdrukmachine 0.21
io.delta delta-sharing-spark_2.12 0.4.0
io.dropwizard.metrics metrische gegevenskern 4.1.1
io.dropwizard.metrics graphite-metriek 4.1.1
io.dropwizard.metrics metrische gezondheidscontroles 4.1.1
io.dropwizard.metrics metrics-jetty9 (een Jetty-implementatie voor het meten van prestatie-indicatoren) 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json (metrische gegevens in JSON-formaat) 4.1.1
io.dropwizard.metrics metriekgegevens voor JVM 4.1.1
io.dropwizard.metrics metrieke gegevens-servlets 4.1.1
io.netty netty-all 4.1.68.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common (algemene module voor eenvoudige client) 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx verzamelaar 0.12.0
jakarta.annotatie jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation activering 1.1.1
javax.annotatie javax.annotation-api 1.3.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transactie-API 1.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
Javolution Javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.10
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
Maven-bomen hive-2.3__hadoop-3.2 liball_deps_2.12
net.java.dev.jna jna 5.8.0
net.razorvine Pyroliet 4.30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-CSV 2.2.0
net.sneeuwvlok snowflake-ingest-sdk 0.9.6
net.sneeuwvlok snowflake-jdbc 3.13.3
net.sneeuwvlok spark-snowflake_2.12 2.9.0-spark_3.1
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8
org.antlr tekenreekstemplate 3.2.1
org.apache.ant mier 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher (startprogramma voor Ant) 1.9.2
org.apache.arrow pijlnotatie 2.0.0
org.apache.arrow pijlpunt-geheugen-kern 2.0.0
org.apache.arrow arrow-memory-netty 2.0.0
org.apache.arrow pijlvector 2.0.0
org.apache.avro AVRO 1.10.2
org.apache.avro avro-ipc 1.10.2
org.apache.avro avro-mapred 1.10.2
org.apache.commons commons-compress - een bibliotheek voor compressie 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.4.1
org.apache.commons commons-tekst 1.6
org.apache.curator beheerder-cliënt 2.13.0
org.apache.curator curatorraamwerk 2.13.0
org.apache.curator curator-recepten 2.13.0
org.apache.derby Derby 10.14.2.0
org.apache.hadoop Hadoop-client-api 3.3.2-databricks
org.apache.hadoop hadoop-client-uitvoeringsomgeving 3.3.2
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-opslag-API 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common (if no translation is needed for understanding, the original can be kept as is) 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.13
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy klimop 2.5.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.6.13
org.apache.orc orc-mapreduce 1.6.13
org.apache.orc orc-shims 1.6.13
org.apache.parquet parquet-kolom 1.12.0-databricks-0004
org.apache.parquet parquet-common 1.12.0-databricks-0004
org.apache.parquet parquet-codering 1.12.0-databricks-0004
org.apache.parquet Parquetformatstructuren 1.12.0-databricks-0004
org.apache.parquet parquet-hadoop 1.12.0-databricks-0004
org.apache.parquet parquet-jackson 1.12.0-databricks-0004
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-shaded 4,20
org.apache.yetus annotaties voor specifieke doelgroepen 0.5.0
org.apache.zookeeper dierentuinverzorger 3.6.2
org.apache.zookeeper dierentuinopzichter-jute 3.6.2
org.checkerframework checker-qual 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-ASL 1.9.13
org.codehaus.janino algemene compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.43.v20210629
org.eclipse.jetty jetty-vervolg 9.4.43.v20210629
org.eclipse.jetty jetty-http 9.4.43.v20210629
org.eclipse.jetty jetty-io 9.4.43.v20210629
org.eclipse.jetty jetty-jndi 9.4.43.v20210629
org.eclipse.jetty Jetty-plus 9.4.43.v20210629
org.eclipse.jetty jetty-proxy (een omgekeerde proxy server gebaseerd op Jetty) 9.4.43.v20210629
org.eclipse.jetty Jetty-beveiliging 9.4.43.v20210629
org.eclipse.jetty Jetty Server 9.4.43.v20210629
org.eclipse.jetty jetty-servlet 9.4.43.v20210629
org.eclipse.jetty jetty-servlets 9.4.43.v20210629
org.eclipse.jetty jetty-util 9.4.43.v20210629
org.eclipse.jetty jetty-util-ajax 9.4.43.v20210629
org.eclipse.jetty jetty-webapp 9.4.43.v20210629
org.eclipse.jetty jetty-xml 9.4.43.v20210629
org.eclipse.jetty.websocket WebSocket-API 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-client 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-common 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-server 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-servlet 9.4.43.v20210629
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-lokalisator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-hulpbronnenzoeker 1.0.3
org.glassfish.hk2.external aopalliance opnieuw verpakt 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jaxb jaxb-runtime 2.3.2
org.glassfish.jersey.containers jersey-container-servlet 2,34
org.glassfish.jersey.containers jersey-container-servlet-core 2,34
org.glassfish.jersey.core jersey-client 2,34
org.glassfish.jersey.core Algemene Jersey 2,34
org.glassfish.jersey.core Jersey-Server 2,34
org.glassfish.jersey.inject jersey-hk2 2,34
org.hibernate.validator hibernate-validator 6.1.0.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains Aantekeningen 17.0.0
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-client 2.2.5
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.2.19
org.roaringbitmap RoaringBitmap 0.9.14
org.roaringbitmap vulplaatjes 0.9.14
org.rocksdb rocksdbjni 6.20.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.14
org.scala-lang scala-library_2.12 2.12.14
org.scala-lang scala-reflect_2.12 2.12.14
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1.2
org.scalanlp breeze_2.12 1.2
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark ongebruikt 1.0.0
org.threeten threeten-extra 1.5.0
org.tukaani xz 1.8
org.typelevel algebra_2.12 2.0.1
org.typelevel katten-kernel_2.12 2.1.1
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1,24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1
  • Last updated on