Databricks Runtime 10.5 (EoS)

Poznámka:

Podpora této verze Databricks Runtime skončila. Datum ukončení podpory najdete v tématu Konec podpory a historie ukončení životnosti. Pro všechny podporované verze Databricks Runtime vizte poznámky k vydání Databricks Runtime - verze a kompatibilita.

Následující poznámky k verzi obsahují informace o modulu Databricks Runtime 10.5, který využívá Apache Spark 3.2.1. Databricks vydala tuto verzi v květnu 2022.

Nové funkce a vylepšení

SQL: Nové funkce to_number a try_to_number

Funkceto_number a try_to_number funkce umožňují převést znakové reprezentace čísel v různých formátech na DECIMAL.

SQL: Nová funkce try_sum

Na rozdíl od sumfunkce try_sum agregace vrátí hodnotu NULL místo chyby, když dojde k přetečení.

SQL: Aktualizace funkcí ceil, ceilinga floor

Funkceceil,ceiling funkce a floor funkce teď podporují druhý volitelný argument pro určení cílového měřítka.

SQL: Nové agregační funkce regr_avgx a regr_avgy

Nová regr_avgx agregační funkce a regr_avgy agregační funkce podporují lineární regrese.

SQL: Aktualizace funkcí contains, startswitha endswith

Funkce contains, funkce startswith a funkce endswith nyní podporují binární datové typy jako vstup kromě řetězců.

SQL: Nová funkce array_size

Nová array_size funkce vypočítá velikost pole.

Katalog Unity: Výstup SQL LIST odebere is_directory sloupec a přidá koncový prvek / pro cesty k adresářům (Public Preview)

Výstup příkazu SQL LIST pro výpis cest, které se řídí katalogu Unity, se změnil. Sloupec is_directory se už nezobrazuje. Cesty, které představují adresáře, teď končí koncovým lomítkem (/) pro path a name sloupce. Tato změna je pro konzistentní výstup z příkazu dbutils.fs.ls.

Automatický zavaděč: nová funkce SQL CLOUD_FILES_STATE

Novou CLOUD_FILES_STATE funkci můžete použít k dotazování stavu interního streamu automatického zavaděče. Viz Dotazování souborů zjištěných automatickým zavaděčem.

Auto Loader: Podpora souborových oznámení je nyní obecně dostupná.

Podpora oznámení o souborech pro What is Auto Loader? v Google Cloudu je teď obecně dostupná.

Delta Lake: Nová maxRecordsPerFile možnost pro maximální počet zapsaných záznamů do jednoho souboru

Pokud k zápisu do tabulky Delta použijete rozhraní API datového rámce, můžete pomocí možnosti maxRecordsPerFile určit maximální počet záznamů, které se mají zapisovat do jednoho souboru. Určení hodnoty nuly nebo záporné hodnoty představuje žádný limit. Viz Kontrola velikosti datového souboru.

Zastarávání Koalas

Koalas je teď zastaralý. Koalas poskytuje rozhraní PANDAS API nad Apache Sparkem. Na Koalas přispěla komunita a byla k dispozici jako API rozhraní Pandas na Spark od verze Apache Spark 3.2. Koalas bude nadále předinstalovaný pro Databricks Runtime 10.5, ale Koalas už nebude předinstalovaný od další verze Databricks Runtime.

Další informace o rozhraní PANDAS API ve Sparku najdete tady:

Nový sloupec _metadata pro všechny formáty souborů

Informace o metadatech pro vstupní soubory můžete získat pomocí sloupce _metadata. Sloupec _metadata je skrytý. Tento sloupec je k dispozici pro všechny formáty vstupních souborů. Pokud chcete do vrácených _metadatazahrnout sloupec DataFrame, musíte tento sloupec v dotazu explicitně uvést. Podívejte se na sloupec metadat souboru .

Otestujte svůj kanál pomocí Databricks Runtime 10.5

Databricks Runtime 10.5 je nyní podporovanou preview verzí pro Deklarativní kanály Spark na platformě Lakeflow. Pokud chcete kanál otestovat pomocí Databricks Runtime 10.5, nastavte channel na preview v nastavení kanálu.

Opravy chyb

  • Opravili jsme zobrazení numUpdatedRows a numCopiedRows výsledků metrik pro operace aktualizace v tabulkách Delta s povoleným zachytáváním dat změn (CDC).

Upgrady knihoven

  • Upgradované knihovny Python:
    • Plotly od 5.5.0 do 5.6.0
  • Upgradované knihovny jazyka R:
    • základ od 4.1.2 do 4.1.3
    • caret od verze 6.0-90 do 6.0-91
    • cluster z 2.1.2 na 2.1.3
    • commonmark od verze 1.7 do verze 1.8.0
    • kompilátor z verze 4.1.2 do 4.1.3
    • crayon od 1.5.0 do 1.5.1
    • datové sady od 4.1.2 do 4.1.3
    • desc od 1.4.0 do 1.4.1
    • fansi z verze 1.0.2 na verzi 1.0.3
    • připevnění z 1.6.1 na 1.6.2
    • grafika od 4.1.2 do 4.1.3
    • grDevices od 4.1.2 do 4.1.3
    • mřížka od 4.1.2 do 4.1.3
    • knitr od 1.37 do 1.38
    • HMOTNOST od 7.3-55 do 7.3-56
    • Matrix od 1.4-0 do 1.4-1
    • metody od 4.1.2 do 4.1.3
    • mgcv od 1,8-39 do 1,8-40
    • nlme od 3.1-155 do 3.1-157
    • openssl od 1.4.6 do 2.0.0
    • paralelní od 4.1.2 do 4.1.3
    • plyr od 1.8.6 do 1.8.7
    • processx od 3.5.2 do 3.5.3
    • r2d3 od 0.2.5 do 0.2.6
    • Rcpp od 1.0.8 do 1.0.8.3
    • rlang od 1.0.1 do 1.0.2
    • rmarkdown od 2.11 do 2.13
    • RSQLite od 2.2.10 do 2.2.11
    • sass od 0.4.0 do 0.4.1
    • splines od 4.1.2 do 4.1.3
    • Statistiky od 4.1.2 do 4.1.3
    • Statistiky 4 od 4.1.2 do 4.1.3
    • tcltk od 4.1.2 do 4.1.3
    • nástroje od 4.1.2 do 4.1.3
    • utility verze od 4.1.2 do 4.1.3
    • uuid od 1.0-3 do 1.0-4
    • waldo od 0.3.1 do 0.4.0
    • withr od 2.4.3 do 2.5.0
    • xfun od 0.29 do 0.30
  • Upgradované knihovny Java:
    • com.h2database.h2 od 1.4.195 do 2.1.210
    • org.apache.hadoop.hadoop-client-api od 3.3.1-databricks do 3.3.2-databricks
    • org.apache.hadoop.hadoop-client-runtime od 3.3.1 do 3.3.2
    • org.rocksdb.rocksdbjni od 6.24.2 do 6.20.3

Apache Spark

Databricks Runtime 10.5 zahrnuje Apache Spark 3.2.1. Tato verze zahrnuje všechny opravy a vylepšení Sparku zahrnuté v Databricks Runtime 10.4 LTS (EoS) a také následující další opravy chyb a vylepšení Sparku:

  • [SPARK-38354] [SC-97886] Vrátit "[SQL] Přidání metriky hash sond pro spojení pomocí míchaného hashování"
  • [SPARK-38484] [SAS-103][sas-111][SAS-113][sc-98102][Cherry-Pick] Modul PySpark SQL s protokolovacím nástrojem pro obecné použití
  • [SPARK-38333] [SQL] Výraz PlanExpression by měl přeskočit funkci addExprTree v Executoru.
  • [SPARK-38646] [PYTHON][10.x] Vyextrahovat vlastnost pro funkce v Pythonu
  • [SPARK-38674] [FOTON] Přidání metriky do PhotonSubqueryBroadcastExec
  • [SPARK-38787] [SS] Nahraďte nalezenou hodnotu elementem, který není null ve zbývajícím seznamu klíče, a odeberte zbývající prvky null z hodnot v úložišti keyWithIndexToValue pro spojení stream-stream.
  • [SPARK-38446] [Jádro] Odstranění zablokování mezi ExecutorClassLoader a FileDownloadCallback způsobené Log4j
  • [SPARK-38705] [SQL] Použití identifikátoru funkce v příkazu create and drop function
  • [SPARK-38684] [SS] Oprava problému správnosti u vnějšího spojení mezi streamy s poskytovatelem úložiště stavů RocksDB
  • [SPARK-38655] [SQL] OffsetWindowFunctionFrameBase nemůže najít posunovaný řádek, jehož vstup není null.
  • [SPARK-38204] [SS] Použití StatefulOpClusteredDistribution pro stavové operátory s ohledem na zpětnou kompatibilitu
  • [SPARK-38616] [SQL] Sledování textu dotazu SQL ve Catalyst TreeNode
  • [SPARK-38600] [SQL] Zahrnout unit do řetězce SQL TIMESTAMPADD/DIFF
  • [SPARK-34805] [SQL] Šíření metadat z vnořených sloupců v aliasu
  • [SPARK-38535] [SQL] Přidání výčtu datetimeUnit a jeho použití v TIMESTAMPADD/DIFF
  • [SPARK-38415] [SQL] Aktualizujte typ výsledku histogram_numeric (x, y), aby x == byl vstupním typem.
  • [SPARK-38148] [SQL] Nepřidávejte dynamické prořezávání oddílů, pokud existuje statické prořezávání oddílů.
  • [SPARK-37527] [SQL] COVAR_POP Kompilace COVAR_SAMP, CORR a H2Dialet
  • [SPARK-38510] [SQL] Opětovné pokusy s ClassSymbol.selfType k řešení cyklických odkazů
  • [SPARK-38509] [SQL] Zrušte registraci funkcí TIMESTAMPADD/DIFF a odstraňte DATE_ADD/DIFF
  • [SPARK-38504] [SQL] Nejde přečíst TimestampNTZ jako TimestampLTZ
  • [SPARK-38526] [SQL] Oprava zavádějícího názvu aliasu funkce pro RuntimeReplaceable
  • [SPARK-38335] [SQL] Implementujte podporu analyzátoru pro výchozí hodnoty sloupců.
  • [SPARK-38593] [SS] Přenos metriky počtu vynechaných pozdních událostí do SessionWindowStateStoreSaveExec
  • [SPARK-38549] [SS] Přidat numRowsDroppedByWatermark do SessionWindowStateStoreRestoreExec
  • [SPARK-38583] [SQL] Obnovení chování to_timestamp, které umožňuje číselné typy
  • [SPARK-38481] [SQL] Nahradit výjimku přetečení Java z TIMESTAMPADD výjimkou Spark.
  • [SPARK-37753] [SQL] Vyladění logiky pro upozadění všesměrového hash spojení v DynamicJoinSelection
  • [SPARK-37582] [SPARK-37583][sql] CONTAINS, STARTSWITH, ENDSWITH by měl podporovat řetězcové i binární typy.
  • [SPARK-38345] [SQL] Zavedení funkce SQL ARRAY_SIZE
  • [SPARK-38385] [SQL] Vylepšení chybových zpráv prázdného příkazu a <EOF> v parseException
  • [SPARK-37614] [SQL] Podpora agregační funkce ANSI: regr_avgx a regr_avgy
  • [SPARK-38560] [SQL] Pokud Sum, Count se používají s Any výrazem DISTINCT, nelze provést částečné převzetí agregace.
  • [SPARK-38360] [SQL][ss][PYTHON] Zavádí exists funkci pro TreeNode odstranění duplicitních vzorů kódu.
  • [SPARK-38385] [SQL] Vylepšení chybových zpráv případů neshodovaného vstupu z ANTLR
  • [SPARK-38240] [SQL] Vylepšení runtimeReplaceable a přidání vodítka pro přidání nových funkcí
  • [SPARK-38542] [SQL]UnsafeHashedRelation by měl serializovat počet klíčů externě
  • [SPARK-38521] [SQL] Změna partitionOverwriteMode z řetězce na proměnnou v jazyce Scala
  • [SPARK-38558] [SQL] Odstranění nepotřebných přetvoření mezi IntegerType a IntDecimal
  • [SPARK-38489] [SQL] Aggregate.groupOnly podporují skládací výrazy
  • [SPARK-38410] [SQL] Podpora zadejte počáteční číslo oddílu pro obnovení rovnováhy.
  • [SPARK-38107] [SQL] Použití tříd chyb v chybách kompilace funkcí python/pandas UDF
  • [SPARK-38354] [SQL] Přidání metriky zjišťování pro přeuspořádané spojení pomocí hash.
  • [SPARK-38112] [SQL] Použití tříd chyb při chybách provádění při zpracování datových a časových razítek
  • [SPARK-38361] [SQL] Přidejte do objektu factory metodu getConnectionJDBCDialect.
  • [SPARK-37865] [SQL] Oprava chyby správnosti odstranění duplicitních dat sjednocení
  • [SPARK-38298] [SQL][tests] Fix DataExpressionSuite, NullExpressionsSuite, StringExpressionsSuite, complexTypesSuite, CastSuite v režimu ANSI
  • [SPARK-38407] [SQL] Přetypování ANSI: Uvolnit omezení pro přetypování komplexních typů bez možnosti null.
  • [SPARK-38352] [SQL] Oprava DataFrameAggregateSuite/DataFrameSetOperationsSuite/DataFrameWindowFunctionsSuite v režimu ANSI
  • [SPARK-38054] [SQL] JDBC v2 MySQL dialekt podporuje seznam jmenných prostorů
  • [SPARK-37960] [SQL] Nová architektura představující výrazy katalyzátoru v rozhraních API DS v2
  • [SPARK-38103] [SQL] Migrace chyb analýzy transformací na novou architekturu chyb
  • [SPARK-38519] [SQL] Výjimka vyvolání AQE by měla respektovat Výjimku SparkFatalException.
  • [SPARK-38528] [SQL] S nadšením iterovat přes agregovanou sekvenci při vytváření seznamu projektů v ExtractGenerator
  • [SPARK-38320] [SS] Úprava časového limitu pro flatMapGroupsWithState při zpracování dávky s daty pomocí klíče
  • [SPARK-38442] [SQL] Oprava ConstantFoldingSuite/ColumnExpressionSuite/DataFrameSuite/AdaptiveQueryExecSuite v režimu ANSI
  • [SPARK-38268] [SQL] Skrytí pole failOnError v metodě toString abs/CheckOverflow
  • [SPARK-37949] [SQL] Zlepšení odhadu rebalance statistiky
  • [SPARK-38450] [SQL] Oprava HiveQuerySuite//PushFoldableIntoBranchesSuite/TransponeWindowSuite v režimu ANSI
  • [SPARK-38501] [SQL] Oprava chyb testu thriftserveru v režimu ANSI
  • [SPARK-37895] [SQL] Filtruje vytlačení sloupců s uvozovkami
  • [SPARK-38449] [SQL] Vyhněte se volání createTable, pokud ignoreIfExists=true a tabulka již existuje.
  • [SPARK-38406] [SQL] Vylepšit výkon ShufflePartitionsUtil createSkewPartitionSpecs
  • [SPARK-37947] [SQL] Extrakce generátoru z výrazu GeneratorOuter obsaženého operátorem Generate.
  • [SPARK-38309] [JÁDRO] Oprava metrik SHS shuffleTotalReads a shuffleTotalBlocks percentilních
  • [SPARK-38412] [SS] Oprava prohozené sekvence od a do stavu StateSchemaCompatibilityChecker
  • [SPARK-38267] [CORE][sql][SS] Nahrazení vzorů u logických výrazů pomocí podmíněných příkazů
  • [SPARK-38104] [SQL] Přesun parsovacích chyb oken do nového rámce chyb
  • [SPARK-38434] [SQL] Oprava sémantické metody CheckAnalysis.getDataTypesAreCompatibleFn
  • [SPARK-38033] [SS] Nelze zahájit zpracování SS, protože com...
  • [SPARK-38378] [SQL] Přepracování definice gramatiky ANTLR do samostatných souborů Parser a Lexer
  • [SPARK-37475] [SQL] Přidání parametru měřítka do funkcí podlahy a ceilu
  • [SPARK-38411] [JÁDRO] Použití UTF-8 při doMergeApplicationListingInternal čtení protokolů událostí
  • [SPARK-36553] [ML] KMeans se vyhýbají výpočetním pomocným statistikám pro velké K
  • [SPARK-38393] [SQL] Vyčištění zastaralého využití GenSeq/GenMap
  • [SPARK-38389] [SQL] Přidání aliasů DATEDIFF(), DATE_DIFF() a TIMESTAMPDIFF()
  • [SPARK-33206] [JÁDRO][3.2] Oprava výpočtu váhy mezipaměti pro náhodné indexy u malých indexových souborů
  • [SPARK-38353] [PYTHON] Instrumentace magických metod enter a exit pro Pandas API na Spark
  • [SPARK-38323] [SQL][streaming] Podpora skrytých metadat souborů ve streamování
  • [SPARK-38138] [SQL] Materializace poddotazů QueryPlan
  • [SPARK-38094] Povolit shodné názvy sloupců schématu podle ID polí
  • [SPARK-37923] [SQL] Generování transformací oddílů pro BucketSpec uvnitř analyzátoru
  • [SPARK-38363] [SQL] Pokud je režim ANSI zapnutý, vyhněte se chybě za běhu v Dataset.summary()/Dataset.describe().
  • [SPARK-38284] [SQL] TIMESTAMPDIFF() Přidání funkce
  • [SPARK-38251] [SQL] Změnit Cast.toString na "cast" místo "ansi_cast" v režimu ANSI
  • [SPARK-38314] [SQL] Oprava problému s čtením souborů ve formátu parquet po zápisu metadatového souboru do skryté složky

Viz aktualizace údržby Databricks Runtime 10.5.

Systémové prostředí

  • Operační systém: Ubuntu 20.04.4 LTS
  • Java: Zulu 8.56.0.21-CA-linux64
  • Scala: 2.12.14
  • Python: 3.8.10
  • R: 4.1.3
  • Delta Lake: 1.2.1

Nainstalované knihovny Python

Knihovna Version Knihovna Version Knihovna Version
Antergos Linux říjen 2015 (ISO-Rolling) adresáře aplikací 1.4.4 argon2-cffi 20.1.0
asynchronní generátor 1,10 attrs 20.3.0 zpětný hovor 0.2.0
bidict 0.21.4 bělidlo 3.3.0 boto3 1.16.7
botocore 1.19.7 certifikát 2020.12.5 cffi 1.14.5
chardet 4.0.0 cyklista 0.10.0 Cython 0.29.23
dbus-python 1.2.16 dekoratér 5.0.6 defusedxml 0.7.1
distlib 0.3.4 informace o distribuci Linuxu 0.23ubuntu1 vstupní body 0,3
přehled aspektů 1.0.0 filelock 3.6.0 IDNA 2.10
ipykernel 5.3.4 ipython 7.22.0 ipython-genutils 0.2.0
ipywidgets 7.6.3 Jedi 0.17.2 Jinja2 2.11.3
jmespath 0.10.0 joblib 1.0.1 jsonschema 3.2.0
klient Jupyter 6.1.12 jupyter-core 4.7.1 jupyterlab-pygments 0.1.2
JupyterLab widgets 1.0.0 kiwisolver 1.3.1 Koaly 1.8.2
MarkupSafe 2.0.1 matplotlib 3.4.2 špatné naladění 0.8.4
nbclient 0.5.3 nbconvert 6.0.7 nbformat 5.1.3
nest-asyncio 1.5.1 poznámkový blok 6.3.0 numpy (knihovna pro numerické výpočty v Pythonu) 1.20.1
balení 20.9 pandas 1.2.4 pandocfilters 1.4.3
parso 0.7.0 bábovka 0.5.1 pexpect 4.8.0
PickleShare 0.7.5 Polštář 8.2.0 pip 21.0.1
plotly 5.6.0 prometheus-client 0.10.1 nástroj "prompt-toolkit" 3.0.17
protobuf 3.17.2 psycopg2 2.8.5 ptyprocess 0.7.0
pyarrow 4.0.0 pycparser 2,20 Pygments 2.8.1
PyGObject 3.36.0 pyparsing 2.4.7 pyrsistent 0.17.3
python-apt 2.0.0+ubuntu0.20.4.7 python-dateutil 2.8.1 python-engineio 4.3.0
python-socketio 5.4.1 knihovna pytz pro zpracování časových zón v Pythonu 2020.5 pyzmq 20.0.0
požadavky 2.25.1 requests-unixsocket 0.2.0 s3transfer 0.3.7
scikit-learn 0.24.1 SciPy 1.6.2 narozený v moři 0.11.1
Send2Trash 1.5.0 setuptools (nástroj pro vytváření a distribuci Python projektů) 52.0.0 Šest 1.15.0
ssh-import-id 5.10 statsmodels 0.12.2 houževnatost 8.0.1
dokončeno 0.9.4 testovací cesta 0.4.4 threadpoolctl 2.1.0
tornádo 6.1 traitlets 5.0.5 bezobslužné aktualizace 0,1
urllib3 1.25.11 virtualenv 20.4.1 wcwidth (šířka znaků) 0.2.5
webová kódování 0.5.1 wheel 0.36.2 widgetsnbextension 3.5.1

Nainstalované knihovny jazyka R

Knihovny R se instalují ze snímku Microsoft CRAN z 28. března 2022.

Knihovna Version Knihovna Version Knihovna Version
žádost o heslo 1.1 ověřit, že 0.2.1 zpětné portování 1.4.1
báze 4.1.3 base64enc 0,1-3 bit 4.0.4
64bit 4.0.5 objekt blob 1.2.2 bootování 1.3-28
připravovat nápoje 1.0-7 elán 1.1.3 koště 0.7.12
bslib 0.3.1 kašmír 1.0.6 volající 3.7.0
caret 6.0-91 cellranger 1.1.0 cron 2.3-56
třída 7.3-20 CLI 3.2.0 Clipr 0.8.0
cluster 2.1.3 codetools 0.2-18 barevný prostor 2.0-3
commonmark 1.8.0 kompilátor 4.1.3 config 0.3.1
cpp11 0.4.2 pastelka 1.5.1 přihlašovací údaje 1.3.2
kroucení 4.3.2 datová tabulka 1.14.2 datové sady 4.1.3
DBI 1.1.2 dbplyr 2.1.1 Popis 1.4.1
devtools 2.4.3 diffobj 0.3.5 hodnota hash 0.6.29
dplyr 1.0.8 dtplyr 1.2.1 e1071 1.7-9
tři tečky 0.3.2 hodnotit 0.15 fanoušci 1.0.3
barvy 2.1.0 Fastmap (rychlé mapování) 1.1.0 fontawesome 0.2.2
pro kočky 0.5.1 foreach 1.5.2 zahraničí 0,8-82
kovárna 0.2.0 fs 1.5.2 budoucnost 1.24.0
budoucnost.použít 1.8.1 kloktání 1.2.0 obecné typy 0.1.2
Gert 1.5.0 ggplot2 3.3.5 gh 1.3.0
gitcreds 0.1.1 glmnet 4.1-3 globální 0.14.0
lepidlo 1.6.2 googledrive 2.0.0 googlesheets4 1.0.0
Gower 1.0.0 Grafika 4.1.3 grDevices 4.1.3
mřížka 4.1.3 gridExtra 2.3 gsubfn 0.7
gtable 0.3.0 ochranná přilba 0.2.0 útočiště 2.4.3
vyšší 0,9 HMS 1.1.1 htmlové nástroje 0.5.2
htmlwidgets (interaktivní HTML prvky) 1.5.4 httpuv 1.6.5 httr 1.4.2
hwriter 1.3.2 hwriterPlus 1.0-3 identifikátory 1.0.1
ini 0.3.1 ipred 0.9-12 isoband 0.2.5
Iterátory 1.0.14 jquerylib 0.1.4 jsonlite 1.8.0
KernSmooth 2,23–20 knitr 1.38 značení 0.4.2
později 1.3.0 mřížka 0.20-45 láva 1.6.10
životní cyklus 1.0.1 poslouchej 0.8.0 lubridate 1.8.0
magrittr 2.0.2 Markdown 1.1 Hmotnost 7.3-56
*Matrix* 1.4-1 zapamatujte si 2.0.1 metody 4.1.3
mgcv 1.8-40 mim 0.12 ModelMetrics 1.2.2.2
modelář 0.1.8 munsell 0.5.0 nlme 3.1-157
nnet (neuronová síť) 7.3-17 numDeriv (Numerická derivace) 2016.8 - 1.1 OpenSSL 2.0.0
rovnoběžný 4.1.3 paralelně 1.30.0 pilíř 1.7.0
pkgbuild 1.3.1 pkgconfig 2.0.3 pkgload 1.2.4
plogr 0.2.0 plyr 1.8.7 pochvala 1.0.0
prettyunits 1.1.1 pROC 1.18.0 processx 3.5.3
prodlim 2019.11.13 pokrok 1.2.2 progressr 0.10.0
promisy 1.2.0.1 proto 1.0.0 proxy 0.4-26
p.s. 1.6.0 purrr 0.3.4 r2d3 0.2.6
R6 2.5.1 "randomForest" 4.7-1 rappdirs 0.3.3
rcmdcheck 1.4.0 RColorBrewer 1.1-2 Rcpp 1.0.8.3
RcppEigen 0.3.3.9.1 čtenář 2.1.2 readxl 1.3.1
recepty 0.2.0 odvetný zápas 1.0.1 odvetný zápas 2 2.1.2
dálková ovládání 2.4.2 reprodukovatelný příklad 2.0.1 reshape2 1.4.4
rlang 1.0.2 rmarkdown 2.13 RODBC 1.3-19
roxygen2 7.1.2 rpart 4.1.16 rprojroot 2.0.2
Rserve 1.8-10 RSQLite 2.2.11 rstudioapi 0,13
rversions 2.1.1 rvest 1.0.2 Sass 0.4.1
škálování 1.1.1 selektor 0.4-2 informace o sezení 1.2.2
obrazec 1.4.6 lesklý 1.7.1 sourcetools 0.1.7
sparklyr 1.7.5 SparkR 3.2.0 prostorový 7.3-11
spline 4.1.3 sqldf 0.4-11 SQUAREM 2021.1
statistické údaje 4.1.3 Stats4 4.1.3 řetězce 1.7.6
stringr 1.4.0 přežití 3.2-13 sys 3.4
tcltk 4.1.3 Vyučovací ukázky 2.10 testthat (nástroj pro testování) 3.1.2
tibble 3.1.6 tidyr 1.2.0 tidyselect 1.1.2
tidyverse 1.3.1 datum a čas 3043.102 tinytex 0,37
nářadí 4.1.3 tzdb 0.2.0 použij tohle 2.1.5
utf8 1.2.2 pomocné funkce 4.1.3 Univerzální jednoznačný identifikátor (UUID) 1.0-4
vctrs 0.3.8 viridisLite 0.4.0 vrrrm 1.5.7
Waldo 0.4.0 hmatový chlup 0,4 (v případě, že je možné poskytnout smysl slova "withr", by bylo možné ho přeložit) 2.5.0
xfun 0,30 xml2 1.3.3 xopen 1.0.0
xtable 1.8-4 yaml 2.3.5 komprimovaný soubor zip 2.2.0

Nainstalované Java a knihovny Scala (verze clusteru Scala 2.12)

ID skupiny Identifikátor artefaktu Version
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client (klient Amazon Kinesis) 1.12.0
com.amazonaws aws-java-sdk Automatické škálování 1.12.189
com.amazonaws aws-java-sdk-cloudformation 1.12.189
com.amazonaws aws-java-sdk-cloudfront 1.12.189
com.amazonaws aws-java-sdk-cloudhsm 1.12.189
com.amazonaws „aws-java-sdk-cloudsearch“ 1.12.189
com.amazonaws aws-java-sdk-cloudtrail 1.12.189
com.amazonaws aws-java-sdk-cloudwatch 1.12.189
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.189
com.amazonaws aws-java-sdk-codedeploy (Balíček AWS SDK pro Java - CodeDeploy) 1.12.189
com.amazonaws aws-java-sdk-cognitoidentity 1.12.189
com.amazonaws aws-java-sdk-cognitosync 1.12.189
com.amazonaws aws-java-sdk-config (konfigurace balíčku SDK pro Javu od AWS) 1.12.189
com.amazonaws aws-java-sdk-core 1.12.189
com.amazonaws aws-java-sdk-datapipeline 1.12.189
com.amazonaws aws-java-sdk-directconnect 1.12.189
com.amazonaws aws-java-sdk-directory 1.12.189
com.amazonaws aws-java-sdk-dynamodb 1.12.189
com.amazonaws aws-java-sdk-ec2 1.12.189
com.amazonaws aws-java-sdk-ecs 1.12.189
com.amazonaws aws-java-sdk-efs 1.12.189
com.amazonaws aws-java-sdk-elasticache 1.12.189
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.189
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.189
com.amazonaws aws-java-sdk-elastictranscoder 1.12.189
com.amazonaws aws-java-sdk-emr 1.12.189
com.amazonaws aws-java-sdk-glacier (AWS Java SDK pro Glacier) 1.12.189
com.amazonaws aws-java-sdk-glue (balíček pro vývoj softwaru v Java od AWS, určený pro Glue služby) 1.12.189
com.amazonaws aws-java-sdk-iam 1.12.189
com.amazonaws aws-java-sdk-importexport 1.12.189
com.amazonaws aws-java-sdk-kinesis 1.12.189
com.amazonaws aws-java-sdk-kms 1.12.189
com.amazonaws aws-java-sdk-lambda 1.12.189
com.amazonaws aws-java-sdk-logs 1.12.189
com.amazonaws aws-java-sdk-strojové učení 1.12.189
com.amazonaws aws-java-sdk-opsworks 1.12.189
com.amazonaws aws-java-sdk-rds 1.12.189
com.amazonaws aws-java-sdk-redshift 1.12.189
com.amazonaws aws-java-sdk-route53 1.12.189
com.amazonaws aws-java-sdk-s3 1.12.189
com.amazonaws aws-java-sdk-ses 1.12.189
com.amazonaws aws-java-sdk-simpledb 1.12.189
com.amazonaws aws-java-sdk-simpleworkflow 1.12.189
com.amazonaws aws-java-sdk-sns 1.12.189
com.amazonaws aws-java-sdk-sqs 1.12.189
com.amazonaws aws-java-sdk-ssm 1.12.189
com.amazonaws aws-java-sdk-storagegateway (balíček nástrojů pro přístup k AWS Storage Gateway) 1.12.189
com.amazonaws aws-java-sdk-sts 1.12.189
com.amazonaws podpora AWS Java SDK 1.12.189
com.amazonaws knihovny AWS Java SDK SWF 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.189
com.amazonaws jmespath-java 1.12.189
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics datový proud 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware technologie kryo-stínění 4.0.2
com.esotericsoftware Minlog 1.3.0
com.fasterxml spolužák 1.3.4
com.fasterxml.jackson.core jackson-annotations (poznámky Jackson) 2.12.3
com.fasterxml.jackson.core jackson-core 2.12.3
com.fasterxml.jackson.core Jackson-databind 2.12.3
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.12.3
com.fasterxml.jackson.datatype jackson-datatype-joda 2.12.3
com.fasterxml.jackson.module jackson-module-paranamer 2.12.3
com.fasterxml.jackson.module jackson-module-scala_2.12 2.12.3
com.github.ben-manes.kofein kofein 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib jádro 1.1.2
com.github.fommil.netlib Nativní odkaz pro Javu 1.1
com.github.fommil.netlib native_ref - nativní prvky javy 1.1
com.github.fommil.netlib nativní_systém-java 1.1
com.github.fommil.netlib nativní systém java-native 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib – nativní systém – linux – x86_64 – nativy 1.1
com.github.luben zstd-jni 1.5.0-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson Gson 2.8.6
com.google.crypto.tink Cink 1.6.0
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava guave 15,0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.1.210
com.helger profiler 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.VYDÁNÍ
com.lihaoyi zdrojový_kód_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk (software development kit pro úložiště dat Azure Data Lake) 2.3.9
com.ning compress-lzf (komprimační algoritmus LZF) 1.0.3
com.sun.istack istack-commons-runtime 3.0.8
com.sun.mail javax.mail 1.5.2
com.tdunning JSON 1.8
com.thoughtworks.paranamer Paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app-2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity univocity-parsers (nástroj pro analýzu dat) 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1,2
commons-codec commons-codec 1.15
společné sbírky společné sbírky 3.2.2
commons-dbcp commons-dbcp 1.4
Nahrávání souborů v Commons Nahrávání souborů v Commons 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.8.0
commons-lang commons-lang 2.6
commons-logging (nástroj pro záznamy) commons-logging (nástroj pro záznamy) 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 2.2.1
dev.ludovic.netlib Blas 2.2.1
dev.ludovic.netlib LAPACK 2.2.1
hive-2.3__hadoop-3.2 jets3t-0.7 liball_deps_2.12
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift vzduchový kompresor 0.21
io.delta delta-sharing-spark_2.12 0.4.0
io.dropwizard.metrics jádro metrik 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics metriky – kontroly stavu 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics Metrics-JMX 4.1.1
io.dropwizard.metrics Metriky-json 4.1.1
io.dropwizard.metrics metriky pro JVM 4.1.1
io.dropwizard.metrics metrikové servlety 4.1.1
io.netty netty-all 4.1.68.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleklient_obecný 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx kolektor 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktivace 1.1.1
javax.annotation javax.annotation-api 1.3.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction API pro transakce 1.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
Javolution Javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.10
log4j apache-log4j-doplňky 1.2.17
log4j log4j 1.2.17
maven-trees hive-2.3__hadoop-3.2 liball_deps_2.12
net.java.dev.jna jna 5.8.0
net.razorvine pyrolit 4.30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
síť.sněhová vločka snowflake-ingest-sdk 0.9.6
síť.sněhová vločka snowflake-jdbc 3.13.3
síť.sněhová vločka spark-snowflake_2.12 2.9.0-spark_3.1
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr runtime 3.5.2
org.antlr antlr4-runtime 4.8
org.antlr StringTemplate 3.2.1
org.apache.ant mravenec 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant Ant launcher 1.9.2
org.apache.arrow šipkový formát 2.0.0
org.apache.arrow jádro šipkové paměti 2.0.0
org.apache.arrow šipka-paměť-netty 2.0.0
org.apache.arrow šipkový vektor 2.0.0
org.apache.avro Avro 1.10.2
org.apache.avro avro-ipc 1.10.2
org.apache.avro avro-mapred 1.10.2
org.apache.commons commons-compress (softwarová knihovna pro kompresi dat) 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.4.1
org.apache.commons Commons-text (textové nástroje) 1.6
org.apache.kurátor kurátor-klient 2.13.0
org.apache.kurátor kurátorský rámec 2.13.0
org.apache.kurátor kurátorovy recepty 2.13.0
org.apache.derby fotbalové derby 10.14.2.0
org.apache.hadoop hadoop-klient-API 3.3.2-databricks
org.apache.hadoop běhové prostředí klienta Hadoop 3.3.2
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc (JDBC ovladač pro Apache Hive) 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive Hive-shims 2.3.9
org.apache.hive rozhraní pro úložiště Hive 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims plánovač hive-shims 2.3.9
org.apache.httpcomponents httpclient 4.5.13
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy břečťan 2.5.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.6.13
org.apache.orc orc-mapreduce 1.6.13
org.apache.orc orčí podložky 1.6.13
org.apache.parquet parquet-column 1.12.0-databricks-0004
org.apache.parquet parquet-common 1.12.0-databricks-0004
org.apache.parquet parquet-encoding 1.12.0-databricks-0004
org.apache.parquet parquet-format-structures 1.12.0-databricks-0004
org.apache.parquet parquet-hadoop 1.12.0-databricks-0004
org.apache.parquet parquet-jackson 1.12.0-databricks-0004
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-shaded 4.20
org.apache.yetus poznámky pro publikum 0.5.0
org.apache.zookeeper ošetřovatel zvířat v zoo 3.6.2
org.apache.zookeeper zookeeper-jute 3.6.2
org.checkerframework checker-qual 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino společný kompilátor 3.0.16
org.codehaus.janino Janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms (framework pro práci s relačními databázemi) 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.43.v20210629
org.eclipse.jetty pokračování Jetty 9.4.43.v20210629
org.eclipse.jetty jetty-http 9.4.43.v20210629
org.eclipse.jetty jetty-io 9.4.43.v20210629
org.eclipse.jetty jetty-jndi 9.4.43.v20210629
org.eclipse.jetty Jetty-plus 9.4.43.v20210629
org.eclipse.jetty proxy pro službu Jetty 9.4.43.v20210629
org.eclipse.jetty bezpečnost Jetty 9.4.43.v20210629
org.eclipse.jetty jetty-server 9.4.43.v20210629
org.eclipse.jetty jetty-servlet 9.4.43.v20210629
org.eclipse.jetty jetty-servlets 9.4.43.v20210629
org.eclipse.jetty jetty-util 9.4.43.v20210629
org.eclipse.jetty jetty-util-ajax 9.4.43.v20210629
org.eclipse.jetty Jetty-webová aplikace 9.4.43.v20210629
org.eclipse.jetty jetty-xml 9.4.43.v20210629
org.eclipse.jetty.websocket WebSocket API 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-klient 9.4.43.v20210629
org.eclipse.jetty.websocket websocket – běžné 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-server 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-servlet 9.4.43.v20210629
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-lokátor 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 Vyhledávač zdrojů OSGi 1.0.3
org.glassfish.hk2.external aopalliance-přebaleno 2.6.1
org.glassfish.hk2.external jakarta.inject (pokud je to potřeba, přidejte vysvětlení nebo typický český termín v závorce) 2.6.1
org.glassfish.jaxb jaxb-runtime 2.3.2
org.glassfish.jersey.containers jersey-container-servlet (nástroj pro zpracování požadavků v Java EE) 2,34
org.glassfish.jersey.containers jersey-container-servlet-jádro 2,34
org.glassfish.jersey.core jersey-client 2,34
org.glassfish.jersey.core společný dres 2,34
org.glassfish.jersey.core Jersey-server (aplikační server frameworku Jersey) 2,34
org.glassfish.jersey.inject jersey-hk2 2,34
org.hibernate.validator Hibernate Validator 6.1.0.Final
org.javassist Javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains anotace 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.7.1
org.mariadb.jdbc MariaDB Java klient 2.2.5
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.2.19
org.roaringbitmap RoaringBitmap 0.9.14
org.roaringbitmap vymezovací pásky 0.9.14
org.rocksdb rocksdbjni 6.20.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.14
org.scala-lang scala-library_2.12 2.12.14
org.scala-lang scala-reflect_2.12 2.12.14
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt testovací rozhraní 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1,2
org.scalanlp breeze_2.12 1,2
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark nepoužitý 1.0.0
org.threeten threeten-extra 1.5.0
org.tukaani xz 1.8
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1,24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1
  • Last updated on