Sdílet prostřednictvím

Databricks Runtime 15.3

  • Článek

Následující poznámky k verzi obsahují informace o modulu Databricks Runtime 15.3, který využívá Apache Spark 3.5.0.

Databricks vydala tuto verzi v červnu 2024.

Tip

Poznámky k verzi pro verze Databricks Runtime, které dosáhly konce podpory (EoS), najdete v poznámkách k verzi Databricks Runtime pro ukončení podpory. Verze EoS Databricks Runtime byly vyřazeny a nemusí se aktualizovat.

Nové funkce a vylepšení

PySpark DataSources teď podporuje čtení a zápis streamů.

PySpark DataSources, které umožňují čtení z vlastních zdrojů dat a zápis do vlastních jímek dat, teď podporují čtení a zápis datových proudů. Viz vlastní zdroje dat PySpark.

Zakázání mapování sloupců pomocí funkce drop

Teď můžete zakázat DROP FEATURE mapování sloupců u tabulek Delta a downgradovat protokol tabulky. Viz Zakázání mapování sloupců.

Syntaxe a funkce variantního typu ve verzi Public Preview

Nativní podpora Apache Sparku pro práci s částečně strukturovanými daty jako VARIANT typem je nyní dostupná v datových rámcích Spark a SQL. Viz Dotaz na data variant.

Podpora typů variant pro Delta Lake ve verzi Public Preview

Teď můžete použít VARIANT k ukládání částečně strukturovaných dat do tabulek založených na Delta Lake. Viz podpora variant v Delta Lake.

Podpora různých režimů vývoje schématu v zobrazeních

CREATE VIEW a ALTER VIEW teď umožňují nastavit režim vazby schématu a vylepšit způsob zpracování změn schématu v podkladových objektech. Tato funkce umožňuje zobrazení tolerovat nebo přizpůsobit změny schématu v podkladových objektech. Řeší změny ve schématu dotazu, které jsou výsledkem úprav definic objektů.

observe() Podpora metod přidaných do klienta Spark Connect Scala

Klient Spark Connect Scala teď podporuje Dataset.observe() metody. Podpora těchto metod umožňuje definovat metriky pro sledování objektu Dataset ds.observe("name", metrics...) pomocí metod nebo ds.observe(observationObject, metrics...) metod.

Vylepšená latence restartování streamu pro automatický zavaděč

Tato verze zahrnuje změnu, která zlepšuje latenci restartování datového proudu pro automatický zavaděč. Toto vylepšení je implementováno tak, že načtení stavu úložištěm stavů RocksDB je asynchronní. Při této změně byste měli vidět zlepšení počátečních časů datových proudů s velkými stavy, například streamy s velkým počtem už přijatých souborů.

Vrácení datového rámce jako datového rámce pyarrow.Table

Pro podporu zápisu datového rámce přímo do objektu Apache Arrow pyarrow.Table tato verze obsahuje DataFrame.toArrow() funkci. Další informace o použití šipky v PySpark najdete v tématu Apache Arrow in PySpark.

Vylepšení výkonu některých funkcí oken

Tato verze zahrnuje změnu, která zlepšuje výkon některých funkcí okna Sparku, konkrétně funkce, které neobsahují ORDER BY klauzuli nebo window_frame parametr. V těchto případech může systém přepsat dotaz, aby ho spustil pomocí agregační funkce. Tato změna umožňuje, aby dotaz běžel rychleji pomocí částečné agregace a vyhnul se režijním nákladům na funkce spuštěných oken. Parametr spark.databricks.optimizer.replaceWindowsWithAggregates.enabled konfigurace Sparku řídí tuto optimalizaci a je ve výchozím nastavení nastavený true . Pokud chcete tuto optimalizaci vypnout, nastavte spark.databricks.optimizer.replaceWindowsWithAggregates.enabled hodnotu false.

Podpora přidané try_mod funkce

Tato verze přidává podporu pro funkci PySpark try_mod() . Tato funkce podporuje výpočet celočíselného zbytku kompatibilního s ANSI SQL z dělení dvou číselných hodnot. Pokud je argument dělitele 0, try_mod() vrátí funkce místo vyvolání výjimky hodnotu null. Funkci můžete použít try_mod() místo mod funkce nebo %, která vyvolá výjimku, pokud je argument dělitel 0 a ANSI SQL je povolen.

Podpora volitelného parametru oboru v list_secrets()

Tato verze umožňuje omezit výsledky funkce tabulky list_secrets() na konkrétní obor.

Opravy chyb

WriteIntoDeltaCommand Metriky v uživatelském rozhraní Sparku se teď zobrazují správně.

Tato verze obsahuje opravu metrik zobrazených na kartě SQL uživatelského rozhraní Sparku Execute WriteIntoDeltaCommand pro uzel. Dříve byly metriky zobrazené pro tento uzel všechny nuly.

Funkce groupby() v rozhraní API Pandas ignorovala as_index=False argument.

Tato verze obsahuje opravu problému s groupby() funkcí v rozhraní PANDAS API ve Sparku. Před touto opravou se groupby() do výsledného datového rámce nezahrnuly klíče skupiny s přeznačením agregovaných sloupců a as_index=False argumentem.

Analýza chyby s více funkcemi okna, které odkazují na výstup z jiných funkcí

Tato verze opravuje problém, ke kterému může dojít, když má dotaz Spark několik po sobě jdoucích funkcí okna, kde funkce okna odkazují na výstup z ostatních funkcí okna. Ve výjimečných případech může systém vynechat jeden z odkazů, což vede k chybám při vyhodnocování dotazu. Tyto odkazy opravíte tak, aby se zajistilo vyhodnocení dotazu. Tuto změnu řídí parametr spark.databricks.optimizer.collapseWindows.projectReferenceskonfigurace Sparku, který je ve výchozím nastavení nastavený na true . Pokud chcete tuto změnu vypnout, nastavte spark.databricks.optimizer.collapseWindows.projectReferences hodnotu false.

Upgrady knihoven

  • Upgradované knihovny Pythonu:
    • filelock od 3.13.1 do 3.13.4
  • Upgradované knihovny jazyka R:
  • Upgradované knihovny Java:
    • org.rocksdb.rocksdbjni od 8.3.2 do 8.11.4

Apache Spark

Databricks Runtime 15.3 zahrnuje Apache Spark 3.5.0. Tato verze zahrnuje všechny opravy a vylepšení Sparku, která jsou součástí Databricks Runtime 15.2, a také následující další opravy chyb a vylepšení Sparku:

  • [SPARK-48211] [DBRRM-1041][15.x][15.3] Revert "[SC-165552][SQL] DB2: Read SMALLINT as Sho...
  • [SPARK-47904] [DBRRM-1040][CHOVÁNÍ-33][SC-163409] Vrácení SPARK-47904: Zachování případu ve schématu Avro při použití enableStableIdentifiersForUnionType
  • [SPARK-48288] [SC-166141] Přidání zdrojového datového typu pro výraz přetypování konektoru
  • [SPARK-48175] [SC-166341][SQL][PYTHON] Ukládat informace o kolaci v metadatech a ne v typu pro SER/DE
  • [SPARK-48172] [SC-166078][SQL] Řešení problémů s únikem dat v JDBCDialects
  • [SPARK-48186] [SC-165544][SQL] Přidání podpory pro AbstractMapType
  • [SPARK-48031] [SC-166523] Starší zobrazení dědečkové verze vazby schématu
  • [SPARK-48369] [SC-166566][SQL][PYTHON][CONNECT] Přidání funkce timestamp_add
  • [SPARK-48330] [SC-166458][SS][PYTHON] Oprava problému s vypršením časového limitu zdroje dat streamování Pythonu pro velký interval aktivačních událostí
  • [SPARK-48369] Revert "[SC-166494][SQL][PYTHON][CONNECT] Add function timestamp_add"
  • [SPARK-48336] [SC-166495][PS][CONNECT] Implementace ps.sql ve Spark Connectu
  • [SPARK-48369] [SC-166494][SQL][PYTHON][CONNECT] Přidání funkce timestamp_add
  • [SPARK-47354] [SC-165546][SQL] Přidání podpory kolace pro výrazy variant
  • [SPARK-48161] [SC-165325][SQL] Oprava vrácené žádosti o přijetí změn – Přidání podpory kolace pro výrazy JSON
  • [SPARK-48031] [SC-166391] Dekompose viewSchemaMode config, add SHOW CREATE TABLE support
  • [SPARK-48268] [SC-166217][JÁDRO] Přidání konfigurace pro SparkContext.setCheckpointDir
  • [SPARK-48312] [ES-1076198][SQL] Zlepšení výkonu Alias.removeNonInheritableMetadata
  • [SPARK-48294] [SC-166205][SQL] Zpracování malých písmen v nestedTypeMissingElementTypeError
  • [SPARK-47254] [SC-158847][SQL] Přiřazení názvů ke třídám chyb _LEGACY_ERROR_TEMP_325[1-9]
  • [SPARK-47255] [SC-158749][SQL] Přiřazení názvů ke třídám chyb _LEGACY_ERROR_TEMP_323[6-7] a _LEGACY_ERROR_TEMP_324[7-9]
  • [SPARK-48310] [SC-166239][PYTHON][CONNECT] Vlastnosti uložené v mezipaměti musí vracet kopie.
  • [SPARK-48308] [SC-166152][Jádro] Sjednocení schématu dat bez sloupců oddílů v FileSourceStrategy
  • [SPARK-48301] [SC-166143][SQL] Přejmenovat CREATE_FUNC_WITH_IF_NOT_EXISTS_AND_REPLACE na CREATE_ROUTINE_WITH_IF_NOT_EXISTS_AND_REPLACE
  • [SPARK-48287] [SC-166139][PS][CONNECT] Použití předdefinované timestamp_diff metody
  • [SPARK-47607] [SC-166129] Přidání dokumentace pro architekturu strukturovaného protokolování
  • [SPARK-48297] [SC-166136][SQL] Oprava regresní klauzule TRANSFORM s char/varchar
  • [SPARK-47045] [SC-156808][SQL] Nahradit IllegalArgumentException v SparkIllegalArgumentExceptionsql/api
  • [SPARK-46991] [SC-156399][SQL] Nahradit IllegalArgumentException v SparkIllegalArgumentExceptioncatalyst
  • [SPARK-48031] [SC-165805][SQL] Vývoj schématu zobrazení podpory
  • [SPARK-48276] [SC-166116][PYTHON][CONNECT] Přidání chybějící __repr__ metody pro SQLExpression
  • [SPARK-48278] [SC-166071][PYTHON][CONNECT] Upřesnění řetězcové reprezentace Cast
  • [SPARK-48272] [SC-166069][SQL][PYTHON][CONNECT] Přidání funkce timestamp_diff
  • [SPARK-47798] [SC-162492][SQL] Obohacení chybové zprávy pro chyby čtení desetinných hodnot
  • [SPARK-47158] [SC-158078][SQL] Přiřazení správného jména a sqlState k _LEGACY_ERROR_TEMP_(2134|2231)
  • [SPARK-48218] [SC-166082][JÁDRO] TransportClientFactory.createClient může npe způsobit FetchFailedException
  • [SPARK-48277] [SC-166066] Zlepšení chybové zprávy pro ErrorClassesJsonReader.getErrorMessage
  • [SPARK-47545] [SC-165444][CONNECT] Podpora datových sad observe pro klienta Scala
  • [SPARK-48954] [SC-171672][SQL] Přidání try_mod funkce
  • [SPARK-43258] [SC-158151][SQL] Přiřazení názvů k chybě _LEGACY_ERROR_TEMP_202[3,5]
  • [SPARK-48267] [SC-165903][SS] Regresní test e2e se SPARK-47305
  • [SPARK-48263] [SC-165925] Podpora kompletování funkcí pro řetězce, které nejsou UTF8_BINARY
  • [SPARK-48260] [SC-165883][SQL] Zakázání koordinace výstupního potvrzení v jednom testu ParquetIOSuite
  • [SPARK-47834] [SC-165645][SQL][CONNECT] Označení zastaralých funkcí v @deprecatedSQLImplicits
  • [SPARK-48011] [SC-164061][Jádro] Uložte název LogKey jako hodnotu, abyste se vyhnuli generování nových instancí řetězců.
  • [SPARK-48074] [SC-164647][Jádro] Vylepšení čitelnosti protokolování JSON
  • [SPARK-44953] [SC-165866][JÁDRO] Protokolování upozornění při povolení sledování náhodného prohazování vedle jiného podporovaného mechanismu DA
  • [SPARK-48266] [SC-165897][CONNECT] Přesunutí objektu org.apache.spark.sql.connect.dsl balíčku do testovacího adresáře
  • [SPARK-47847] [SC-165651][JÁDRO] Zavrhovat spark.network.remoteReadNioBufferConversion
  • [SPARK-48171] [SC-165178][JÁDRO] Vyčištění použití zastaralých konstruktorů o.rocksdb.Logger
  • [SPARK-48235] [SC-165669][SQL] Přímé předání spojení místo všech argumentů getBroadcastBuildSide a getShuffleHashJoinBuildSide
  • [SPARK-48224] [SC-165648][SQL] Zakázání klíče mapy od typu varianty
  • [SPARK-48248] [SC-165791][PYTHON] Oprava vnořeného pole pro dodržování starší verze conf inferArrayTypeFromFirstElement
  • [SPARK-47409] [SC-165568][SQL] Přidání podpory kolace pro typ stringTrim funkcí/výrazů (pro UTF8_BINARY &LCASE)
  • [SPARK-48143] [ES-1095638][SQL] Použití jednoduchých výjimek pro tok řízení mezi univocityParser a FailureSafeParser
  • [SPARK-48146] [SC-165668][SQL] Oprava agregační funkce ve výrazu podřízený kontrolní výraz
  • [SPARK-48161] Vrátit zpět [SC-165325][SQL] Přidání podpory kolace pro výrazy JSON
  • [SPARK-47963] [JÁDRO] Vytvoření externího ekosystému Sparku může používat mechanismy strukturovaného protokolování
  • [SPARK-48180] [SC-165632][SQL] Zlepšení chyby, když volání UDTF s funkcí TABLE arg zapomene závorky kolem více výrazů PARTITION/ORDER BY
  • [SPARK-48002] [SC-164132][PYTHON][SS] Přidání testu pro pozorované metriky v PySpark StreamingQueryListener
  • [SPARK-47421] [SC-165548][SQL] Přidání podpory kolace pro výrazy url
  • [SPARK-48161] [SC-165325][SQL] Přidání podpory kolace pro výrazy JSON
  • [SPARK-47359] [SC-164328][SQL] Podpora funkce TRANSLATE pro práci s kompletovanými řetězci
  • [SPARK-47365] [SC-165643][PYTHON] Přidání metody datového rámce toArrow() do PySpark
  • [SPARK-48228] [SC-165649][PYTHON][CONNECT] Implementace chybějícího ověření funkce v ApplyInXXX
  • [SPARK-47986] [SC-165549][CONNECT][PYTHON] Nelze vytvořit novou relaci, pokud je výchozí relace uzavřena serverem.
  • [SPARK-47963] Vrátit "[CORE] Vytvoření externího ekosystému Sparku může používat mechanismy strukturovaného protokolování"
  • [SPARK-47963] [JÁDRO] Vytvoření externího ekosystému Sparku může používat mechanismy strukturovaného protokolování
  • [SPARK-48208] [SC-165547][SS] Pokud je povolené omezené využití paměti, přeskočte poskytování metrik využití paměti ze služby RocksDB.
  • [SPARK-47566] [SC-164314][SQL] Podpora funkce SubstringIndex pro práci s kompletovanými řetězci
  • [SPARK-47589] [SC-162127][SQL]Hive-Thriftserver: Migrace logError s proměnnými do architektury strukturovaného protokolování
  • [SPARK-48205] [SC-165501][PYTHON] Odebrání modifikátoru private[sql] pro zdroje dat Pythonu
  • [SPARK-48173] [SC-165181][SQL] KontrolaAnalysis by měla vidět celý plán dotazu.
  • [SPARK-48197] [SC-165520][SQL] Vyhněte se chybě assert pro neplatnou funkci lambda
  • [SPARK-47318] [SC-162573][JÁDRO] Přidá do odvození klíče AuthEngine zaokrouhlení HKDF, aby bylo možné postupovat podle standardních postupů KEX.
  • [SPARK-48184] [SC-165335][PYTHON][CONNECT] Vždy nastavte počáteční hodnotu Dataframe.sample na straně klienta.
  • [SPARK-48128] [SC-165004][SQL] U výrazu BitwiseCount / bit_count oprava chyby syntaxe codegen pro vstupy logických typů
  • [SPARK-48147] [SC-165144][SS][CONNECT] Odebrání naslouchacích procesů na straně klienta při odstranění místní relace Sparku
  • [SPARK-48045] [SC-165299][PYTHON] Seskupování rozhraní API Pandas s více agg-relabely ignoruje as_index=False
  • [SPARK-48191] [SC-165323][SQL] Podpora UTF-32 pro kódování a dekódování řetězců
  • [SPARK-45352] [SC-137627][SQL] Eliminace skládacích oddílů oken
  • [SPARK-47297] [SC-165179][SQL] Přidání podpory kolace pro výrazy formátu
  • [SPARK-47267] [SC-165170][SQL] Přidání podpory kolace pro výrazy hash
  • [SPARK-47965] [SC-163822][JÁDRO] Vyhněte se orNull v TypedConfigBuilder a OptionalConfigEntry
  • [SPARK-48166] [SQL] Vyhněte se použití chyb BadRecordException jako uživatelem v nástroji VariantExpressionEvalUtils
  • [SPARK-48105] [SC-165132][SS] Oprava stavu časování mezi uvolněním úložiště stavu a snímkováním
  • [SPARK-47922] [SC-163997][SQL] Implementace výrazu try_parse_json
  • [SPARK-47719] [SC-161909][SQL] Změnit spark.sql.legacy.timeParse...
  • [SPARK-48035] [SC-165136][SQL] Oprava try_add/try_multiply sémantiky rovná se sčítání/násobení
  • [SPARK-48107] [SC-164878][PYTHON] Vyloučení testů z distribuce Pythonu
  • [SPARK-46894] [SC-164447][PYTHON] Přesunutí chybových podmínek PySpark do samostatného souboru JSON
  • [SPARK-47583] [SC-163825][JÁDRO] Jádro SQL: Migrace logError s proměnnými do architektury strukturovaného protokolování
  • [SPARK-48064] Vrátit zpět "[SC-164697][SQL] Aktualizovat chybové zprávy pro rutinní související třídy chyb"
  • [SPARK-48048] [SC-164846][CONNECT][SS] Přidání podpory naslouchacího procesu na straně klienta pro Scala
  • [SPARK-48064] [SC-164697][SQL] Aktualizace chybových zpráv pro rutinní související třídy chyb
  • [SPARK-48056] [SC-164715][CONNECT][PYTHON] Opětovné spuštění plánu, pokud se vyvolá chyba SESSION_NOT_FOUND a nebyla přijata žádná částečná odpověď
  • [SPARK-48124] [SC-165009][JÁDRO] Zákaz strukturovaného protokolování pro Connect-Repl ve výchozím nastavení
  • [SPARK-47922] Vrátit "[SC-163997][SQL] Implementuje výraz try_parse_json"
  • [SPARK-48065] [SC-164817][SQL] SPJ: allowJoinKeysSubsetOfPartitionKeys je příliš striktní
  • [SPARK-48114] [SC-164956][JÁDRO] Předkompilní regulární výraz šablony, aby se zabránilo zbytečné práci
  • [SPARK-48067] [SC-164773][SQL] Oprava výchozích sloupců variant
  • [SPARK-47922] [SC-163997][SQL] Implementace výrazu try_parse_json
  • [SPARK-48075] [SC-164709] [SS] Přidání kontroly typů pro funkce PySpark avro
  • [SPARK-47793] [SC-164324][SS][PYTHON] Implementace SimpleDataSourceStreamReader pro streamovací zdroj dat Pythonu
  • [SPARK-48081] [SC-164719] Oprava třídy ClassCastException v NTile.checkInputDataTypes(), pokud je argument nepřeložitelný nebo nesprávný typ
  • [SPARK-48102] [SC-164853][SS] Sledování doby trvání získání metrik zdroje nebo jímky při generování sestav průběhu streamovaného dotazu
  • [SPARK-47671] [SC-164854][Jádro] Povolení strukturovaného protokolování v log4j2.properties.template a aktualizace dokumentace
  • [SPARK-47904] [SC-163409][SQL] Zachování případu ve schématu Avro při použití enableStableIdentifiersForUnionType
  • [SPARK-48058] [SC-164695][SPARK-43727][PYTHON][CONNECT] UserDefinedFunction.returnType parsování řetězce DDL
  • [SPARK-46922] [SC-156102][JÁDRO][SQL] Nezalamujte chyby, ke kterým dochází za běhu
  • [SPARK-48047] [SC-164576][SQL] Snížení zatížení paměti prázdných značek TreeNode
  • [SPARK-47934] [SC-164648] [JÁDRO] Ujistěte se, že koncové lomítka v HistoryServer přesměrování adresy URL
  • [SPARK-47921] [SC-163826][CONNECT] Oprava vytváření ExecuteJobTag v ExecuteHolderu
  • [SPARK-48014] [SC-164150][SQL] Změna chyby makeFromJava v EvaluatePython na chybu zobrazenou uživateli
  • [SPARK-47903] [SC-163424][PYTHON] Přidání podpory pro zbývající skalární typy v knihovně PySpark Variant
  • [SPARK-48068] [SC-164579][PYTHON] mypy by měl mít --python-executable parametr
  • [SPARK-47846] [SC-163074][SQL] Přidání podpory pro typ Variant ve výrazu from_json
  • [SPARK-48050] [SC-164322][SS] Log logical plan at query start
  • [SPARK-47810] [SC-163076][SQL] Nahrazení ekvivalentního výrazu = <> v podmínce spojení
  • [SPARK-47741] [SC-164290] Přidání zpracování přetečení zásobníku v analyzátoru
  • [SPARK-48053] [SC-164309][PYTHON][CONNECT] SparkSession.createDataFrame by měl upozornit na nepodporované možnosti.
  • [SPARK-47939] [SC-164171][SQL] Implementace nového pravidla Analyzátoru pro přesun ParameterizedQuery uvnitř ExplainCommand a DescribeQueryCommand
  • [SPARK-48063] [SC-164432][JÁDRO] Povolit spark.stage.ignoreDecommissionFetchFailure ve výchozím nastavení
  • [SPARK-48016] [SC-164280][SQL] Oprava chyby ve funkci try_divide v případě desetinných míst
  • [SPARK-48033] [SC-164291][SQL] Oprava RuntimeReplaceable výrazů používaných ve výchozích sloupcích
  • [SPARK-48010] [SC-164051][SQL][ES-1109148] Vyhněte se opakovaným voláním conf.resolver v resolveExpression
  • [SPARK-48003] [SC-164323][SQL] Přidání podpory kolace pro agregaci náčrtků hll
  • [SPARK-47994] [SC-164175][SQL] Oprava chyby s odsdílením filtru sloupců CASE WHEN v SQLServeru
  • [SPARK-47984] [SC-163837][ML][SQL] Změnit MetricsAggregate/V2Aggregator#serialize/deserialize na volání SparkSerDeUtils#serialize/deserialize
  • [SPARK-48042] [SC-164202][SQL] Místo vytváření kopií na úrovni metody použijte formát časového razítka s časovým pásmem na úrovni třídy.
  • [SPARK-47596] [SPARK-47600][SPARK-47604][SPARK-47804] Migrace strukturovaných protokolů
  • [SPARK-47594] [SPARK-47590][SPARK-47588][SPARK-47584] Migrace strukturovaných protokolů
  • [SPARK-47567] [SC-164172][SQL] Podpora funkce NAJÍT pro práci s kompletovanými řetězci
  • [SPARK-47764] [SC-163820][JÁDRO][SQL] Vyčištění závislostí náhodného prohazu na základě shuffleCleanupMode
  • [SPARK-48039] [SC-164174][PYTHON][CONNECT] Aktualizace třídy chyb pro group.apply
  • [SPARK-47414] [SC-163831][SQL] Podpora kolace malými písmeny pro výrazy regexp
  • [SPARK-47418] [SC-163818][SQL] Přidání ručně vytvořených implementací pro kódování unicode s malými písmeny obsahuje, startsWith a endsWith a optimalizujte UTF8_BINARY_LCASE
  • [SPARK-47580] [SC-163834][SQL] Katalyzátor SQL: eliminujte nepojmenované proměnné v protokolech chyb.
  • [SPARK-47351] [SC-164008][SQL] Přidání podpory kolace pro řetězcové výrazy StringToMap a Maskování
  • [SPARK-47292] [SC-164151][SS] safeMapToJValue by měl zvážit hodnoty typu null.
  • [SPARK-47476] [SC-164014][SQL] Podpora funkce REPLACE pro práci s kompletovanými řetězci
  • [SPARK-47408] [SC-164104][SQL] Oprava mathExpressions, které používají StringType
  • [SPARK-47350] [SC-164006][SQL] Přidání podpory kolace pro výraz řetězce SplitPart
  • [SPARK-47692] [SC-163819][SQL] Oprava výchozího významu StringType v implicitní přetypování
  • [SPARK-47094] [SC-161957][SQL] SPJ: Dynamicky rebalance počtu kbelíků, pokud nejsou stejné
  • [SPARK-48001] [SC-164000][JÁDRO] Odebrání nepoužívaných private implicit def arrayToArrayWritable z SparkContext
  • [SPARK-47986] [SC-163999][CONNECT][PYTHON] Nelze vytvořit novou relaci, pokud je výchozí relace uzavřena serverem.
  • [SPARK-48019] [SC-164121] Oprava nesprávného chování ve sloupci ColumnVector/ColumnarArray se slovníkem a hodnotami null
  • [SPARK-47743] [SPARK-47592][SPARK-47589][SPARK-47581][SPARK-47586][SPARK-47593][SPARK-47595][SPARK-47587][SPARK-47603] Migrace strukturovaných protokolů
  • [SPARK-47999] [SC-163998][SS] Vylepšení protokolování při vytváření snímků a přidávání nebo odebírání položek z mapy mezipaměti stavu ve zprostředkovateli úložiště stavů s podporou HDFS
  • [SPARK-47417] [SC-162872][SQL] Podpora kolace: Ascii, Chr, Base64, UnBase64, Decode, StringDecode, Encode, ToBinary, FormatNumber, Věty
  • [SPARK-47712] [SC-161871][CONNECT] Povolení připojení modulů plug-in k vytváření a zpracování datových sad
  • [SPARK-47411] [SC-163351][SQL] Podpora funkcí StringInstr a FindInSet pro práci s kompletovanými řetězci
  • [SPARK-47360] [SC-163014][SQL] Podpora kolace: Překrytí, FormátString, Délka, BitLength, OctetLength, SoundEx, Luhncheck
  • [SPARK-47413] [SC-163323][SQL] – přidání podpory pro kolace do podřetěžce/zleva/doprava
  • [SPARK-47983] [SC-163835][SQL] Snížení úrovně spark.sql.pyspark.legacy.inferArrayTypeFromFirstElement.enabled na interní
  • [SPARK-47964] [SC-163816][PYTHON][CONNECT] Skrytí SQLContext a HiveContext v pyspark-connect
  • [SPARK-47985] [SC-163841][PYTHON] Zjednodušení funkcí pomocí lit
  • [SPARK-47633] [SC-163453][SQL] Zahrnutí výstupu LateralJoin#allAttributes plánu na pravé straně pro konzistentnější kanonizaci
  • [SPARK-47909] Vrátit "[PYTHON][CONNECT] Nadřazená třída datového rámce f...
  • [SPARK-47767] [SC-163096][SQL] Zobrazení hodnoty posunu v takeOrderedAndProjectExec
  • [SPARK-47822] [SC-162968][SQL] Zakázat hashovací výrazy v hashování datového typu Variant
  • [SPARK-47490] [SC-160494][SS] Oprava konstruktoru loggeru RocksDB, který se používá, aby se zabránilo upozornění na vyřazení
  • [SPARK-47417] Vrátit zpět "[SC-162872][SQL] Podpora kolace: Ascii, Chr, Base64, UnBase64, Decode, StringDecode, Encode, ToBinary, FormatNumber, Věty"
  • [SPARK-47352] [SC-163460][SQL] Fix Upper, Lower, InitCap collation awareness
  • [SPARK-47909] [PYTHON][CONNECT] Třída nadřazeného datového rámce pro Spark Connect a Spark Classic
  • [SPARK-47417] [SC-162872][SQL] Podpora kolace: Ascii, Chr, Base64, UnBase64, Decode, StringDecode, Encode, ToBinary, FormatNumber, Věty

Podpora ovladačů Databricks ODBC/JDBC

Databricks podporuje ovladače ODBC/JDBC vydané v posledních 2 letech. Stáhněte si nedávno vydané ovladače a upgradujte (stáhněte rozhraní ODBC, stáhněte JDBC).

Prostředí systému

  • Operační systém: Ubuntu 22.04.4 LTS
  • Java: Zulu 8.78.0.19-CA-linux64
  • Scala: 2.12.18
  • Python: 3.11.0
  • R: 4.3.2
  • Delta Lake: 3.2.0

Nainstalované knihovny Pythonu

Knihovna Verze Knihovna Verze Knihovna Verze
asttokens 2.0.5 astunparse 1.6.3 Azure-Core 1.30.1
azure-storage-blob 12.19.1 azure-storage-file-datalake 12.14.0 backcall 0.2.0
černý 23.3.0 blinkr 1.4 boto3 1.34.39
botocore 1.34.39 cachetools 5.3.3 certifi 2023.7.22
cffi 1.15.1 chardet 4.0.0 charset-normalizer 2.0.4
kliknutí 8.0.4 cloudpickle 2.2.1 Komunikace 0.1.2
obrysová křivka 1.0.5 kryptografie 41.0.3 cyklista 0.11.0
Cython 0.29.32 Databricks-sdk 0.20.0 dbus-python 1.2.18
ladění 1.6.7 dekoratér 5.1.1 distlib 0.3.8
vstupní body 0,4 vykonávající 0.8.3 přehled omezujících vlastností 1.1.1
filelock 3.13.4 fonttools 4.25.0 gitdb 4.0.11
GitPython 3.1.43 google-api-core 2.18.0 google-auth 2.29.0
google-cloud-core 2.4.1 google-cloud-storage 2.16.0 google-crc32c 1.5.0
google-resumable-media 2.7.0 googleapis-common-protos 1.63.0 grpcio 1.60.0
grpcio-status 1.60.0 httplib2 0.20.2 idna 3.4
importlib-metadata 6.0.0 ipyflow-core 0.0.198 ipykernel 6.25.1
ipython 8.15.0 ipython-genutils 0.2.0 ipywidgets 7.7.2
isodate 0.6.1 Jedi 0.18.1 Jeepney 0.7.1
jmespath 0.10.0 joblib 1.2.0 jupyter_client 7.4.9
jupyter_core 5.3.0 keyring 23.5.0 verizonsolver 1.4.4
launchpadlib 1.10.16 lazr.restfulclient 0.14.4 lazr.uri 1.0.6
matplotlib 3.7.2 matplotlib-inline 0.1.6 mlflow-hubená 2.11.3
more-itertools 8.10.0 mypy-extensions 0.4.3 nest-asyncio 1.5.6
numpy 1.23.5 oauthlib 3.2.0 balení 23.2
pandas 1.5.3 parso 0.8.3 pathspec 0.10.3
bábovka 0.5.3 pexpect 4.8.0 pickleshare 0.7.5
Polštář 9.4.0 jádro 23.2.1 platformdirs 3.10.0
plotly 5.9.0 prompt-toolkit 3.0.36 proto-plus 1.23.0
protobuf 4.24.1 psutil 5.9.0 psycopg2 2.9.3
ptyprocess 0.7.0 čistý-eval 0.2.2 pyarrow 14.0.1
pyasn1 0.4.8 pyasn1-modules 0.2.8 pyccolo 0.0.52
pycparser 2.21 pydantic 1.10.6 Pygments 2.15.1
PyGObject 3.42.1 PyJWT 2.3.0 pyodbc 4.0.38
pyparsing 3.0.9 python-dateutil 2.8.2 python-lsp-jsonrpc 1.1.1
pytz 2022.7 PyYAML 6.0 pyzmq 23.2.0
žádosti 2.31.0 rsa 4,9 s3transfer 0.10.1
scikit-learn 1.3.0 scipy 1.11.1 seaborn 0.12.2
SecretStorage 3.3.1 setuptools 68.0.0 Šest 1.16.0
smmap 5.0.1 sqlparse 0.5.0 ssh-import-id 5,11
stack-data 0.2.0 statsmodels 0.14.0 houževnatost 8.2.2
threadpoolctl 2.2.0 tokenize-rt 4.2.1 tornádo 6.3.2
vlastnosti 5.7.1 typing_extensions 4.10.0 tzdata 2022.1
ujson 5.4.0 bezobslužné upgrady 0,1 urllib3 1.26.16
virtualenv 20.24.2 wadllib 1.3.6 wcwidth 0.2.5
kolo 0.38.4 zipp 3.11.0

Nainstalované knihovny jazyka R

Knihovny R se instalují ze snímku CRAN Správce balíčků Posit.

Knihovna Verze Knihovna Verze Knihovna Verze
šipka 14.0.0.2 askpass 1.2.0 assertthat 0.2.1
backporty 1.4.1 base 4.3.2 base64enc 0.1-3
bigD 0.2.0 bitové 4.0.5 bit64 4.0.5
bitops 1.0-7 blob 1.2.4 startování 1.3-28
vařit 1.0-10 verva 1.1.4 koště 1.0.5
bslib 0.6.1 cachem 1.0.8 volající 3.7.3
caret 6.0-94 cellranger 1.1.0 chron 2.3-61
class 7.3-22 Rozhraní příkazového řádku 3.6.2 clipr 0.8.0
clock 0.7.0 cluster 2.1.4 codetools 0.2-19
barevný prostor 2.1-0 commonmark 1.9.1 – kompilátor 4.3.2
config 0.3.2 střetl 1.2.0 cpp11 0.4.7
pastelka 1.5.2 přihlašovací údaje 2.0.1 kudrna 5.2.0
data.table 1.15.0 Power BI 4.3.2 DBI 1.2.1
dbplyr 2.4.0 Desc 1.4.3 devtools 2.4.5
diagram 1.6.5 diffobj 0.3.5 trávit 0.6.34
downlit 0.4.3 dplyr 1.1.4 dtplyr 1.3.1
e1071 1.7-14 tři tečky 0.3.2 evaluate 0.23
fanynky 1.0.6 farver 2.1.1 fastmap 1.1.1
fontawesome 0.5.2 forcats 1.0.0 foreach 1.5.2
zahraniční 0.8-85 kovat 0.2.0 Fs 1.6.3
budoucnost 1.33.1 future.apply 1.11.1 kloktadlo 1.5.2
Generik 0.1.3 Gert 2.0.1 ggplot2 3.4.4
Gh 1.4.0 git2r 0.33.0 gitcreds 0.1.2
glmnet 4.1-8 globálních objektů 0.16.2 lepidlo 1.7.0
googledrive 2.1.1 googlesheets4 1.1.1 Gower 1.0.1
Grafika 4.3.2 grDevices 4.3.2 mřížka 4.3.2
gridExtra 2.3 gsubfn 0,7 gt 0.10.1
gtable 0.3.4 bezpečnostní přilba 1.3.1 útočiště 2.5.4
highr 0.10 Hms 1.1.3 htmltools 0.5.7
htmlwidgets 1.6.4 httpuv 1.6.14 httr 1.4.7
httr2 1.0.0 Id 1.0.1 ini 0.3.1
ipred 0.9-14 isoband 0.2.7 Iterátory 1.0.14
jquerylib 0.1.4 jsonlite 1.8.8 šťavnatájuice 0.1.0
KernSmooth 2.23-21 pletení 1.45 značení 0.4.3
později 1.3.2 mříž 0.21-8 láva 1.7.3
lifecycle 1.0.4 listenv 0.9.1 lubridate 1.9.3
magrittr 2.0.3 sleva 1.12 MŠE 7.3-60
Matice 1.5-4.1 memoise 2.0.1 metody 4.3.2
mgcv 1.8-42 mim 0.12 miniUI 0.1.1.1
mlflow 2.10.0 ModelMetrics 1.2.2.2 modelr 0.1.11
munsell 0.5.0 nlme 3.1-163 nnet 7.3-19
numDeriv 2016.8-1.1 openssl 2.1.1 parallel 4.3.2
paralelně 1.36.0 pilíř 1.9.0 pkgbuild 1.4.3
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.4
plogr 0.2.0 plyr 1.8.9 chválit 1.0.0
prettyunits 1.2.0 pROC 1.18.5 processx 3.8.3
prodlim 2023.08.28 profvis 0.3.8 Průběh 1.2.3
progressr 0.14.0 sliby 1.2.1 proto 1.0.0
plná moc 0.4-27 PS 1.7.6 purrr 1.0.2
R6 2.5.1 ragg 1.2.7 randomForest 4.7-1.1
rappdirs 0.3.3 Analýza rcmdcheck 1.4.0 RColorBrewer 1.1-3
Rcpp 1.0.12 RcppEigen 0.3.3.9.4 reagovatelná 0.4.4
reactR 0.5.0 readr 2.1.5 readxl 1.4.3
recepty 1.0.9 odvetný zápas 2.0.0 rematch2 2.1.2
vzdálená zařízení 2.4.2.1 reprex 2.1.0 reshape2 1.4.4
rlang 1.1.3 rmarkdown 2,25 RODBC 1.3-23
roxygen2 7.3.1 rpart 4.1.21 rprojroot 2.0.4
Rserve 1.8-13 RSQLite 2.3.5 rstudioapi 0.15.0
rversions 2.1.2 rvest 1.0.3 drzá napodobenina 0.4.8
váhy 1.3.0 selektor 0.4-2 sessioninfo 1.2.2
tvar 1.4.6 lesklý 1.8.0 sourcetools 0.1.7-1
sparklyr 1.8.4 prostorový 7.3-15 spline křivky 4.3.2
sqldf 0.4-11 ČTVEREC 2021.1 statistické údaje 4.3.2
Statistiky 4 4.3.2 stringi 1.8.3 stringr 1.5.1
přežití 3.5-5 swagger 3.33.1 sys 3.4.2
systemfonts 1.0.5 tcltk 4.3.2 testthat 3.2.1
textshaping 0.3.7 tibble 3.2.1 tidyr 1.3.1
tidyselect 1.2.0 tidyverse 2.0.0 časový interval 0.3.0
timeDate 4032.109 tinytex 0.49 tools 4.3.2
tzdb 0.4.0 urlchecker 1.0.1 usethis 2.2.2
utf8 1.2.4 utils 4.3.2 Uuid 1.2-0
V8 4.4.1 vctrs 0.6.5 viridisLite 0.4.2
vroom 1.6.5 Waldo 0.5.2 vous 0.4.1
withr 3.0.0 xfun 0.41 xml2 1.3.6
xopen 1.0.0 xtable 1.8-4 yaml 2.3.8
zeallot 0.1.0 zip 2.3.1

Nainstalované knihovny Java a Scala (verze clusteru Scala 2.12)

ID skupiny ID artefaktu Verze
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws automatické škálování aws-java-sdk 1.12.610
com.amazonaws aws-java-sdk-cloudformation 1.12.610
com.amazonaws aws-java-sdk-cloudfront 1.12.610
com.amazonaws aws-java-sdk-cloudhsm 1.12.610
com.amazonaws aws-java-sdk-cloudsearch 1.12.610
com.amazonaws aws-java-sdk-cloudtrail 1.12.610
com.amazonaws aws-java-sdk-cloudwatch 1.12.610
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.610
com.amazonaws aws-java-sdk-codedeploy 1.12.610
com.amazonaws aws-java-sdk-cognitoidentity 1.12.610
com.amazonaws aws-java-sdk-cognitosync 1.12.610
com.amazonaws aws-java-sdk-config 1.12.610
com.amazonaws aws-java-sdk-core 1.12.610
com.amazonaws aws-java-sdk-datapipeline 1.12.610
com.amazonaws aws-java-sdk-directconnect 1.12.610
com.amazonaws aws-java-sdk-directory 1.12.610
com.amazonaws aws-java-sdk-dynamodb 1.12.610
com.amazonaws aws-java-sdk-ec2 1.12.610
com.amazonaws aws-java-sdk-ecs 1.12.610
com.amazonaws aws-java-sdk-efs 1.12.610
com.amazonaws aws-java-sdk-elasticache 1.12.610
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.610
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.610
com.amazonaws aws-java-sdk-elastictranscoder 1.12.610
com.amazonaws aws-java-sdk-emr 1.12.610
com.amazonaws aws-java-sdk-glacier 1.12.610
com.amazonaws aws-java-sdk-glue 1.12.610
com.amazonaws aws-java-sdk-iam 1.12.610
com.amazonaws aws-java-sdk-importexport 1.12.610
com.amazonaws aws-java-sdk-kinesis 1.12.610
com.amazonaws aws-java-sdk-kms 1.12.610
com.amazonaws aws-java-sdk-lambda 1.12.610
com.amazonaws aws-java-sdk-logs 1.12.610
com.amazonaws aws-java-sdk-machinelearning 1.12.610
com.amazonaws aws-java-sdk-opsworks 1.12.610
com.amazonaws aws-java-sdk-rds 1.12.610
com.amazonaws aws-java-sdk-redshift 1.12.610
com.amazonaws aws-java-sdk-route53 1.12.610
com.amazonaws aws-java-sdk-s3 1.12.610
com.amazonaws aws-java-sdk-ses 1.12.610
com.amazonaws aws-java-sdk-simpledb 1.12.610
com.amazonaws aws-java-sdk-simpleworkflow 1.12.610
com.amazonaws aws-java-sdk-sns 1.12.610
com.amazonaws aws-java-sdk-sqs 1.12.610
com.amazonaws aws-java-sdk-ssm 1.12.610
com.amazonaws aws-java-sdk-storagegateway 1.12.610
com.amazonaws aws-java-sdk-sts 1.12.610
com.amazonaws podpora aws-java-sdk-support 1.12.610
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.610
com.amazonaws jmespath-java 1.12.610
com.clearspring.analytics datový proud 2.9.6
com.databricks Rserve 1.8-3
com.databricks databricks-sdk-java 0.17.1
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware Kryo-shaded 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml spolužák 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.15.2
com.fasterxml.jackson.core jackson-core 2.15.2
com.fasterxml.jackson.core jackson-databind 2.15.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.15.2
com.fasterxml.jackson.dataformat jackson-dataformat-yaml 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.16.0
com.fasterxml.jackson.module jackson-module-paranamer 2.15.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.15.2
com.github.ben-manes.kofein kofein 2.9.3
com.github.fommil jniloader 1,1
com.github.fommil.netlib native_ref-java 1,1
com.github.fommil.netlib native_ref-java Nativní verze 1.1
com.github.fommil.netlib native_system-java 1,1
com.github.fommil.netlib native_system-java Nativní verze 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64 Nativní verze 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64 Nativní verze 1.1
com.github.luben zstd-jni 1.5.5-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.10.1
com.google.crypto.tink Tink 1.9.0
com.google.errorprone error_prone_annotations 2.10.0
com.google.flatbuffers flatbuffers-java 23.5.26
com.google.guava guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.helger profiler 1.1.1
com.ibm.icu icu4j 72.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 11.2.2.jre8
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.4.3
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.3
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1.16.0
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.13.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 3.0.3
dev.ludovic.netlib Blas 3.0.3
dev.ludovic.netlib lapack 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.25
io.delta delta-sharing-client_2.12 1.0.5
io.dropwizard.metrics metriky anotace 4.2.19
io.dropwizard.metrics metriky – jádro 4.2.19
io.dropwizard.metrics metrics-graphite 4.2.19
io.dropwizard.metrics metriky – kontroly stavu 4.2.19
io.dropwizard.metrics metrics-jetty9 4.2.19
io.dropwizard.metrics metrics-jmx 4.2.19
io.dropwizard.metrics metrics-json 4.2.19
io.dropwizard.metrics metrics-jvm 4.2.19
io.dropwizard.metrics metriky – servlety 4.2.19
io.netty netty-all 4.1.96.Final
io.netty netty-buffer 4.1.96.Final
io.netty netty-codec 4.1.96.Final
io.netty netty-codec-http 4.1.96.Final
io.netty netty-codec-http2 4.1.96.Final
io.netty netty-codec-socks 4.1.96.Final
io.netty netty- common 4.1.96.Final
io.netty obslužná rutina netty 4.1.96.Final
io.netty netty-handler-proxy 4.1.96.Final
io.netty netty-resolver 4.1.96.Final
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-windows-x86_64
io.netty netty-tcnative-classes 2.0.61.Final
io.netty netty transport 4.1.96.Final
io.netty netty-transport-classes-epoll 4.1.96.Final
io.netty netty-transport-classes-kqueue 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.96.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.1.96.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx sběratel 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktivace 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1,1
javax.transaction transaction-api 1,1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
net.java.dev.jna jna 5.8.0
net.razorvine marináda 1.3
net.sf.jpam jpam 1,1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.10.11
org.apache.ant ant-jsch 1.10.11
org.apache.ant ant-launcher 1.10.11
org.apache.arrow arrow-format 15.0.0
org.apache.arrow arrow-memory-core 15.0.0
org.apache.arrow arrow-memory-netty 15.0.0
org.apache.arrow arrow-vector 15.0.0
org.apache.avro avro 1.11.3
org.apache.avro avro-ipc 1.11.3
org.apache.avro avro-mapred 1.11.3
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.23.0
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.kurátor kurátor-client 2.13.0
org.apache.kurátor kurátor-framework 2.13.0
org.apache.kurátor kurátor-recepty 2.13.0
org.apache.datasketches datasketches-java 3.1.0
org.apache.datasketches datasketches-memory 2.0.0
org.apache.derby derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.6
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy břečťan 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.22.1
org.apache.logging.log4j log4j-api 2.22.1
org.apache.logging.log4j log4j-core 2.22.1
org.apache.logging.log4j log4j-layout-template-json 2.22.1
org.apache.logging.log4j log4j-slf4j2-impl 2.22.1
org.apache.orc orc-core 1.9.2-shaded-protobuf
org.apache.orc orc-mapreduce 1.9.2-shaded-protobuf
org.apache.orc orc-shims 1.9.2
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.ws.xmlschema xmlschema-core 2.3.0
org.apache.xbean xbean-asm9-shaded 4.23
org.apache.yetus cílové skupiny a poznámky 0.13.0
org.apache.zookeeper zookeeper 3.6.3
org.apache.zookeeper zookeeper-jute 3.6.3
org.checkerframework checker-qual 3.31.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino Janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.collections eclipse-collections 11.1.0
org.eclipse.collections eclipse-collections-api 11.1.0
org.eclipse.jetty jetty-client 9.4.52.v20230823
org.eclipse.jetty pokračování jetty 9.4.52.v20230823
org.eclipse.jetty jetty-http 9.4.52.v20230823
org.eclipse.jetty jetty-io 9.4.52.v20230823
org.eclipse.jetty jetty-jndi 9.4.52.v20230823
org.eclipse.jetty jetty-plus 9.4.52.v20230823
org.eclipse.jetty jetty-proxy 9.4.52.v20230823
org.eclipse.jetty jetty-security 9.4.52.v20230823
org.eclipse.jetty jetty-server 9.4.52.v20230823
org.eclipse.jetty jetty-servlet 9.4.52.v20230823
org.eclipse.jetty jetty-servlets 9.4.52.v20230823
org.eclipse.jetty jetty-util 9.4.52.v20230823
org.eclipse.jetty jetty-util-ajax 9.4.52.v20230823
org.eclipse.jetty jetty-webapp 9.4.52.v20230823
org.eclipse.jetty jetty-xml 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-api 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-client 9.4.52.v20230823
org.eclipse.jetty.websocket websocket – společné 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-server 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-servlet 9.4.52.v20230823
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.40
org.glassfish.jersey.containers jersey-container-servlet-core 2.40
org.glassfish.jersey.core jersey-client 2.40
org.glassfish.jersey.core žerzejové společné 2.40
org.glassfish.jersey.core jersey-server 2.40
org.glassfish.jersey.inject jersey-hk2 2.40
org.hibernate.validator Hibernate-validator 6.1.7.Final
org.ini4j ini4j 0.5.4
org.javassist Javassist 3.29.2-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains anotace 17.0.0
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mlflow mlflow-spark_2.12 2.9.1
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.6.1
org.roaringbitmap RoaringBitmap 0.9.45-databricks
org.roaringbitmap Podložky 0.9.45-databricks
org.rocksdb rocksdbjni 8.11.4
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.15
org.scala-lang scala-library_2.12 2.12.15
org.scala-lang scala-reflect_2.12 2.12.15
org.scala-lang.modules scala-collection-compat_2.12 2.11.0
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.2.15
org.scalanlp breeze-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest kompatibilní s scalatestem 3.2.15
org.scalatest scalatest-core_2.12 3.2.15
org.scalatest scalatest-diagrams_2.12 3.2.15
org.scalatest scalatest-featurespec_2.12 3.2.15
org.scalatest scalatest-flatspec_2.12 3.2.15
org.scalatest scalatest-freespec_2.12 3.2.15
org.scalatest scalatest-funspec_2.12 3.2.15
org.scalatest scalatest-funsuite_2.12 3.2.15
org.scalatest scalatest-matchers-core_2.12 3.2.15
org.scalatest scalatest-mustmatchers_2.12 3.2.15
org.scalatest scalatest-propspec_2.12 3.2.15
org.scalatest scalatest-refspec_2.12 3.2.15
org.scalatest scalatest-shouldmatchers_2.12 3.2.15
org.scalatest scalatest-wordspec_2.12 3.2.15
org.scalatest scalatest_2.12 3.2.15
org.slf4j jcl-over-slf4j 2.0.7
org.slf4j jul-to-slf4j 2.0.7
org.slf4j slf4j-api 2.0.7
org.slf4j slf4j-simple 1.7.25
org.threeten threeten-extra 1.7.1
org.tukaani xz 1,9
org.typelevel algebra_2.12 2.0.1
org.typelevel kočky-kernel_2.12 2.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.10.3
org.yaml snakeyaml 2.0
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1