Poznámka:
Přístup k této stránce vyžaduje autorizaci. Můžete se zkusit přihlásit nebo změnit adresáře.
Přístup k této stránce vyžaduje autorizaci. Můžete zkusit změnit adresáře.
Poznámka:
Podpora této verze Databricks Runtime skončila. Datum ukončení podpory najdete v tématu Konec podpory a historie ukončení životnosti. Pro všechny podporované verze Databricks Runtime vizte poznámky k vydání Databricks Runtime - verze a kompatibilita.
Následující poznámky k verzi obsahují informace o modulu Databricks Runtime 16.3, který využívá Apache Spark 3.5.2.
Databricks vydala tuto verzi v březnu 2025.
Změny chování
Oprava chyby pro možnosti automatického zavaděče: modifiedBefore, modifiedAfter, pathGlobFilter
Předtím nemělo žádný vliv, když se měnily hodnoty možností modifiedBefore, modifiedAfter a pathGlobFilter automatického zavaděče. Tento problém byl opraven.
Když teď upravíte hodnoty těchto filtrů, Auto Loader načítá nové soubory, které splňují podmínky filtrů. Pokud je na základě aktualizovaných hodnot filtru způsobilých méně souborů, soubory, které už nejsou způsobilé, se z jímky neodeberou, ale zůstanou ingestované.
Vylepšená chybová zpráva při přiřazení neplatné hodnoty k kafka.sasl.client.callback.handler.class
Tato verze obsahuje změnu, která vrátí popisnější chybovou zprávu, když kafka.sasl.client.callback.handler.class je přiřazena neplatná hodnota.
Nová chybová zpráva je org.apache.spark.sql.AnalysisException: [RESTRICTED_STREAMING_OPTION_PERMISSION_ENFORCED.KAFKA_CLIENT_CALLBACK_SHADED_CLASS] The option kafka.sasl.client.callback.handler.class has restricted values on Shared clusters for the kafka source. The Kafka client callback class must be "shadedmskiam.software.amazon.msk.auth.iam.IAMClientCallbackHandler". SQLSTATE: 0A000
Dříve byla vrácena chybová zpráva. org.apache.spark.sql.AnalysisException: [UNSUPPORTED_STREAMING_OPTIONS_PERMISSION_ENFORCED] Streaming options kafka.sasl.client.callback.handler.class are not supported for data source kafka on a shared cluster. Please confirm that the options are specified and spelled correctly, and check https://docs.databricks.com/en/compute/access-mode-limitations.html#streaming-shared for limitations. SQLSTATE: 0A000
Nové funkce a vylepšení
- Podpora čtečky stavu je dostupná jako GA pro standardní výpočet.
- Protokol tabulky Delta je ve fázi obecné dostupnosti s ochranou kontrolních bodů.
- Psaní procedurálních skriptů SQL založených na ANSI SQL/PSM (Public Preview)
- Výchozí řazení na úrovni tabulky a zobrazení
- Instalujte vlastní závislosti v katalogu Unity Python UDF (Public Preview)
- Změna více sloupců tabulky v jednom ALTER TABLE příkazu
-
Podpora pro
transformWithStateInPandasna standardním výpočetním prostředku -
Podpora pro
MERGE INTOk tabulkám s jemně odstupňovaným řízením přístupu na vyhrazených výpočetních prostředcích (Veřejná ukázka) - Podpora připojení dat k tabulkám s jemně nastaveným řízením přístupu ve vyhrazené výpočetní kapacitě
- Vylepšená podpora pro samo-spojení s objekty s řízeným přístupem na úrovni detailů na vyhrazených výpočetních zařízeních
- Nové funkce H3
Podpora čtečky stavu je obecná dostupnost pro standardní výpočetní prostředky.
Podpora čtení informací o stavu pro dotazy strukturovaného streamování je nyní obecně dostupná pro výpočty nakonfigurované pomocí standardního režimu přístupu. Viz Přečtěte si informace o stavu strukturovaného streamování.
Downgrade protokolu tabulky Delta je obecně dostupný s ochranou kontrolních bodů.
DROP FEATURE je obecně dostupný pro odebrání funkcí tabulky Delta Lake a snížení úrovně protokolu tabulky. Ve výchozím nastavení DROP FEATURE teď vytváří chráněné kontrolní body pro více optimalizovaný a jednodušší proces downgrade, který nevyžaduje žádnou čekací dobu ani krácení historie. Viz Funkce odstranění tabulky Delta Lake a snížení verze protokolu tabulky.
Psaní procedurálních skriptů SQL založených na ANSI SQL/PSM (Public Preview)
Teď můžete použít možnosti skriptování založené na ANSI SQL/PSM k zápisu procedurální logiky s SQL, včetně příkazů toku řízení, místních proměnných a zpracování výjimek. Podívejte se na skriptováníSQL.
Výchozí kolace pro úroveň tabulek a zobrazení
Nyní můžete zadat výchozí kolaci pro tabulky a zobrazení. To zjednodušuje vytváření tabulek a zobrazení, kde všechny nebo většina sloupců sdílejí stejnou kolaci. Viz kolace.
Instalace vlastních závislostí v Python UDF v Unity Catalog (Public Preview)
Rozšiřte funkcionalitu uživatelských Python funkcí mimo prostředí Databricks Runtime definováním vlastních závislostí pro externí knihovny. Viz Rozšíření UDF pomocí vlastních závislostí.
Změna více sloupců tabulky v jednom ALTER TABLE příkazu
V Databricks Runtime 16.3 můžete v jednom ALTER TABLE příkazu změnit více sloupců. Viz ALTER TABLE klauzule ...COLUMN.
Podpora transformWithStateInPandas na standardních výpočetních prostředcích
Teď můžete použít transformWithStateInPandas na výpočetních prostředcích nakonfigurovaných pomocí standardního režimu přístupu. Viz Vytvoření vlastní stavové aplikace.
Podpora jemně nastavitelného řízení přístupu k tabulkám na vyhrazených výpočetních prostředcích (Veřejná Ukázka)
Ve službě Databricks Runtime 16.3 a novějších vyhrazené výpočetní prostředky podporují MERGE INTO u tabulek Katalogu Unity, které používají jemně odstupňované řízení přístupu. Podobně jako při čtení z těchto objektů se příkazy MERGE automaticky předávají do bezserverového výpočetního prostředí v případě potřeby.
Podívejte se na jemně odstupňované řízení přístupu u vyhrazených výpočetních prostředků.
Podpora připojení dat k tabulkám s jemně řízeným přístupem na vyhrazených výpočetních jednotkách
Ve službě Databricks Runtime 16.3 a novějších verzích vyhrazené výpočetní prostředky podporují přidávání k objektům katalogu Unity, které používají jemně odstupňované řízení přístupu. Pokud chcete tuto funkci použít, použijte DataFrame.write.mode("append") funkci v rozhraní Apache Spark API. Podobně jako při čtení z těchto objektů se přidávání při zápisu automaticky předá bezserverovým výpočetním prostředkům, když je to nutné.
Další informace o používání vyhrazených výpočetních prostředků s jemně odstupňovanými objekty katalogu Unity najdete v tématu Jemně odstupňované řízení přístupu k vyhrazeným výpočetním prostředkům.
Vylepšená podpora pro samospojování s objekty s jemně odstupňovaným řízením přístupu na vyhrazených výpočetních prostředcích
Ve službě Databricks Runtime 16.3 a vyšších verzích teď funkce filtrování dat pro jemnozrnnou kontrolu přístupu u vyhrazených výpočetních prostředků automaticky synchronizuje snímky mezi vyhrazenými a bezserverovými výpočetními prostředky, s výjimkou materializovaných zobrazení, jakýchkoli zobrazení a streamovaných tabulek sdílených pomocí Delta Sharing. Tato vylepšená funkce zajišťuje, že při použití filtrování dat vracejí self-joiny identické snímky. Podívejte se na jemně odstupňované řízení přístupu u vyhrazených výpočetních prostředků.
Nové funkce H3
Byly přidány tři nové funkce H3: h3_try_coverash3, h3_try_coverash3string a h3_try_tessellateaswkb.
Upgrady knihoven
Upgradované knihovny Python:
- mlflow-skinny od 2.15.1 do 2.19.0
Upgradované knihovny jazyka R:
Upgradované knihovny Java:
Apache Spark
Databricks Runtime 16.3 zahrnuje Apache Spark 3.5.2. Tato verze zahrnuje všechny opravy a vylepšení Sparku zahrnuté v Databricks Runtime 16.2 (EoS) a také následující další opravy chyb a vylepšení Sparku:
- [SPARK-51594] [DBRRM-1604][sc-192125][SQL] Při ukládání zobrazení, které není kompatibilní s Hivem, použijte prázdné schéma.
- [SPARK-51388] [SC-190503][sql] Zlepšení šíření fragmentů SQL v to_timestamp a UNION
- [SPARK-51394] [SC-190492][ml] Optimalizujte odstranění dalšího míchání ve statistických testech.
- [SPARK-51385] [SC-190486][sql] Normalizovat projekci přidanou v DeduplicateRelations pro deduplikaci výstupu potomka unie
- [SPARK-51357] [SC-190485][sql] Zachování úrovně protokolování změn výpočetního plánu pro databázová zobrazení
- [SPARK-50654] [SC-186686][ss] CommitMetadata by měl ve V1 nastavit stateUniqueIds na None
- [SPARK-51362] [SC-190352][sql] Změna toJSON pro použití rozhraní NEXTIterator API k odstranění závislostí sousedních záznamů
-
[SPARK-51375] [SC-190355][sql][CONNECT] Potlačení zpráv protokolu
SparkConnect(Execution|Session)Manager.periodicMaintenance - [SPARK-50596] [SC-184060][python] Upgrade Py4J z verze 0.10.9.7 na 0.10.9.8
- [SPARK-51097] [SC-190456][revert] Vrátit změnu metrik instancí RocksDB
-
[SPARK-51363] [SC-190343][sql]
Desc As JSONnázvy sloupců clusteringových - [SPARK-51373] [SC-190370] [SS] Odebrání nadbytečné kopie pro předponu názvu rodiny sloupců z 'ReplyChangelog'
- [SPARK-51378] [SC-190363][core] Použít accumulableExcludeList protokolu Json na ExecutorMetricsUpdate a TaskEndReason.
- [SPARK-51369] [SC-190253][sql] Oprava proměnné kurzoru pro práci se smíšenými názvy písmen
-
[SPARK-51381] [SC-190360][sql][CONNECT] Zobrazit
Session IDna stránceSpark Connect Session - [SPARK-51119] [SC-188491][sql] Čtenáři na exekutorech, kteří řeší EXISTS_DEFAULT, by neměli volat katalogy
- [SPARK-51322] [SC-190013][sql] Lepší chybová zpráva pro výraz streamovacího poddotazu
- [SPARK-50817] [SC-186642][ss] Oprava hlášení chyb v RocksDB
- [SPARK-51370] [SC-190286] Vylepšení srozumitelnosti kódu pro kódy analýzy INSERT INTO v AstBuilder.scala
- [SPARK-51083] [SC-189217][core][16.x] Úprava JavaUtils tak, aby nedocházelo k pohlcování InterruptedExceptions
- [SPARK-51324] [SC-189997][sql] Oprava, kdy vnořený příkaz FOR vyvolával chybu, pokud byl výsledek prázdný
- [SPARK-49756] [SC-178793][sql] Dialekt Postgres podporuje funkce pushdown datetime.
- [SPARK-51270] [SC-190108][sql] Podpora typu UUID v modulu Variant
- [SPARK-51310] [SC-190018][sql] Určete typ výrazů vytvářejících výchozí řetězce.
- [SPARK-49488] [SC-176685][sql] Dialekt MySQL podporuje funkce pushdown datetime.
- [SPARK-50856] [DBR16.x][sc-189812][SS][python][CONNECT] Podpora připojení Sparku pro TransformWithStateInPandas v Python
-
[SPARK-50553] [SC-190076][connect] Vyvolat
InvalidPlanInputpro neplatnou plánovou zprávu - [SPARK-51337] [16.x][sc-190105][SQL] Přidání maxRows do CTERelationDef a CTERelationRef
- [SPARK-51281] [SC-190033][sql] DataFrameWriterV2 by měla respektovat možnost cesty
- [SPARK-51323] [SC-190005][python] Duplicitní "total" v metrikách Py SQL
-
[SPARK-48618] [SC-174007][sql] Využijte
ErrorCodeaSQLStatevrácené v SQLException, aby byly chyby přesnější. - [SPARK-47871] [SC-162873][sql] Oracle: Zmapovat TimestampType na TIMESTAMP S MÍSTNÍM ČASOVÝM PÁSOMEM
- [SPARK-50993] [SC-187319][sql] Přesunutí nullDataSourceOption z QueryCompilationErrors do QueryExecutionErrors
- [SPARK-47761] [SC-162288][sql] Oracle: Podpora čtení AnsiIntervalTypes
- [SPARK-51265] [SC-189826][sql] IncrementalExecution by měl správně nastavit kód spouštění příkazů.
- [SPARK-50785] [SC-189722][sql] Refaktoring příkazu FOR pro správné využití místních proměnných.
- [SPARK-51315] [SC-189838][sql] Aktivace kolací na úrovni objektů ve výchozím nastavení
- [SPARK-51312] [SC-189824][sql] Oprava funkce createDataFrame z RDD[Row]
-
[SPARK-51305] [SC-189625][sql][CONNECT] Vylepšit
SparkConnectPlanExecution.createObservedMetricsResponse - [SPARK-51313] [SC-189816][python] Oprava formátu časového razítka pro PySparkLogger
- [SPARK-51095] [SC-189623][core][SQL] Zahrnutí kontextu volajícího pro protokoly auditu HDFS pro volání prováděná z ovladače
- [SPARK-51292] [SC-189566][sql] Odstranění zbytečné dědičnosti z PlanTestBase, ExpressionEvalHelper a PlanTest
- [SPARK-50739] [SC-186903][SQL][FOLLOW] Zjednodušení 'ResolveRecursiveCTESuite' s DSL
- [SPARK-51097] [SC-189428] [SS] Přidání metrik instancí úložiště stavů pro poslední nahranou verzi snímku v RocksDB
- [SPARK-49912] [SC-189615] Refaktoring jednoduchého příkazu CASE k vyhodnocení proměnné případu pouze jednou
- [SPARK-50655] [16x][sc-189235][SS] Přesun mapování rodiny virtuálních sloupců do vrstvy databáze místo kodéru
-
[SPARK-51177] [SC-188989][python][CONNECT] Přidání
InvalidCommandInputdo klienta Python Spark Connect -
[SPARK-51278] [SC-189608][python] Pro
PySparkLoggerpoužijte odpovídající strukturu formátu JSON. - [SPARK-48530] [SC-189357][sql] Podpora místních proměnných ve skriptování SQL
- [SPARK-51258] [SC-189551][sql] Odstranění zbytečné dědičnosti ze SQLConfHelper
- [SPARK-50739] [SC-186818][sql] Rekurzivní CTE. Analyzátor provede změny, aby rozpletl a vyřešil rekurzivní komponenty.
- [SPARK-51284] [SC-189483][sql] Oprava spuštění skriptu SQL pro prázdný výsledek
- [SPARK-50881] [SC-188407][python] Použijte schéma uložené v mezipaměti, pokud je to možné, v připojeném dataframe.py
- [SPARK-51274] [SC-189516][python] PySparkLogger by měl respektovat očekávané argumenty klíčových slov.
- [SPARK-50636] [SC-184783][sql] Rozšíření CTESubstitution.scala, aby rozpoznal rekurzi
-
[SPARK-50960] [SC-188821][python][CONNECT] Přidání
InvalidPlanInputdo klienta Python Spark Connect - [SPARK-51109] [SC-188394][sql] CTE jako seskupovací sloupec ve výrazu poddotazu
- cs-CZ: [SPARK-51067] [16.x][sc-188855][SQL] Zrušit kolaci na úrovni relace pro dotazy DML a použít kolaci na úrovni objektu pro dotazy DDL
- [SPARK-50849] [SC-189071][connect] Přidání ukázkového projektu pro předvedení knihoven serveru Spark Connect
- [SPARK-51259] [SC-189344][sql] Refaktorování klíčů pro výpočet přírodního a spojování pomocí join
- [SPARK-51185] [SC-188832][core] Vrácení zjednodušení rozhraní PartitionedFileUtil API za účelem snížení požadavků na paměť
- [SPARK-51237] [16x][sc-189028][SS] Podle potřeby přidejte podrobnosti rozhraní API pro nová pomocná rozhraní API transformWithState.
- [SPARK-51247] [SC-189236][sql] Přesunout SubstituteExecuteImmediate do dávky vyhodnocení a připravit ji na skriptovací místní proměnné SQL.
-
[SPARK-50403] [SC-186416][sql] Opravit parametrizované
EXECUTE IMMEDIATE - [SPARK-50598] [SC-183992][sql] Počáteční no-op PR, která přidává nové parametry do již existujících tříd UnresolvedWith, CTERelationRef a CTERelationDef, aby bylo možné později implementovat rekurzivní CTEs.
- cs-CZ: [SPARK-48114] [SC-189176][sql] Přesunutí ověření poddotazů mimo CheckAnalysis.
-
[SPARK-50767] [SC-189169][sql] Odebrání codegenu
from_json - [SPARK-51242] [SC-189200][conenct][PYTHON] Zvýšení výkonu sloupců při zakázání DQC
- [SPARK-51202] [SC-189208][ml][PYTHON] Předat relaci zapisovačům Pythonu pro meta algoritmy
- [SPARK-51246] [SC-189175][sql] Zajistit, aby InTypeCoercion produkoval vyřešená přetypování
-
[SPARK-51192] [SC-189070][connect] Zpřístupnit
processWithoutResponseObserverForTestingvSparkConnectPlanner - [SPARK-51183] [SC-189010][sql] Odkaz na specifikaci Parquet v dokumentaci pro varianty
-
[SPARK-51189] [SC-188829][core] Zvýšení úrovně
JobFailednaDeveloperApi -
[SPARK-51184] [SC-188801][jádro] Odebrání logiky
TaskState.LOSTzTaskSchedulerImpl - [SPARK-51218] [SC-189012][sql] Vyhněte se map nebo flatMap v NondeterministicExpressionCollection
- [SPARK-51228] [SC-189022][sql] Zavedení normalizace poddotazů do NormalPlanu
- [SPARK-51113] [SC-188883][sql] Oprava správnosti pomocí funkce UNION/EXCEPT/INTERSECT v zobrazení nebo EXECUTE IMMEDIATE
-
[SPARK-51209] [SC-188987][core] Vylepšení
getCurrentUserNamepro zpracování Java 24+ - [SPARK-50953] [SC-188409][python][CONNECT] Přidání podpory pro jiné než literální cesty v modulu VariantGet
- [SPARK-51181] [SC-188854] [SQL] Zajistit determinismus při vytažení nedeterministických vyjádření z logického plánu
- [SPARK-50872] [SC-186901][sql][UI] Výraz ToPrettyString nemá vliv na prezentaci uživatelského rozhraní
- [SPARK-51150] [SC-188512][ml] Explicitně předejte relaci v zapisovačích metaalgoritmů.
- [SPARK-51008] [SC-188655][sql] Přidat ResultStage pro AQE
- [SPARK-51114] [SC-188633] [SQL] Refaktorizovat pravidlo PullOutNondeterministic
- [SPARK-51160] [SC-188666][sql] Přepracování překladu literálových funkcí
- [SPARK-51127] [SC-188366][python] Zabít proces Pythonu při vypršení časového limitu nečinnosti
- [SPARK-51099] [SC-188350][python] Přidejte protokoly, když se pracovní proces Python zasekne
- [SPARK-51157] [SC-188536][sql] Přidat chybějící anotaci @varargs Scala pro rozhraní API funkcí Scala
-
[SPARK-51155] [CORE] Upravte
SparkContext, aby zobrazoval celkový čas běhu po zastavení - [SPARK-51140] [SC-188487][ml] Před uložením seřaďte parametry.
- [SPARK-51135] [SC-188392][sql] Oprava viewResolverSuite pro režimy ANSI
- [SPARK-51057] [SC-188191][ss] Odebrat varianty rozhraní API založené na možnostech scala pro hodnotový stav
- [SPARK-51131] [SC-188359][sql] Vyvolá výjimku při nalezení skriptu SQL uvnitř příkazu EXECUTE IMMEDIATE
- [SPARK-51048] [SC-188369][core] Podpora zastavení kontextu Java Spark s ukončovacím kódem
- [SPARK-50234] [SC-181433][python][SQL] Vylepšení chybové zprávy a testování pro transponování rozhraní DATAFrame API
- [SPARK-51074] [SC-188153][ss][CONNECT] Nastavit časový limit pro komunikaci inicializačních konfigurací ve streamování foreachBatch
- [SPARK-48353] [SC-187986][sql] Úvod k mechanismu zpracování výjimek ve skriptování SQL
- [SPARK-50596] [SC-184060][python] Upgrade Py4J z verze 0.10.9.7 na 0.10.9.8
- [SPARK-51043] [SC-187928][ss][CONNECT] Jemně zrnité protokolování uživatelů pro Spark Connect foreachBatch
-
[SPARK-51084] [ES-1336002][sc-188171][SQL] Přiřaďte odpovídající třídu chyb pro
negativeScaleNotAllowedError - [SPARK-51042] [SC-188216][sql] Čtení a zápis polí měsíců a dnů v intervalech jedním voláním ve třídách Unsafe*
- [SPARK-51010] [SC-188188][sql] Oprava, že AlterColumnSpec nesprávně hlásí vyřešený stav.
- [SPARK-50799] [SC-188169][python] Zpřesnění dokumentačních řetězců pro rlike, length, octet_length, bit_length a transform.
-
[SPARK-51061] [SC-187910][core] Skrytí informací o
Jettyv rozhraní REST Submission API - [SPARK-51055] [SC-187993][ss][CONNECT] Streamování foreachBatch by mělo v rámci try volat inicializační logiku.
- [SPARK-50982] [SC-188059][sql] Podpora více funkcí čtecí cesty SQL/DataFrame v analyzátoru s jedním průchodem
-
[SPARK-51081] [SC-188092][sql] Refaktorizace
Join.outputpro řešitele s jedním průchodem -
[SPARK-51064] [SC-188039][sql] Ve výchozím nastavení povolte
spark.sql.sources.v2.bucketing.enabled - [SPARK-50883] [LC-5998][sc-187120][SQL] Podpora změny více sloupců ve stejném příkazu
- [SPARK-51034] [SC-187985][sql] Přeformátovat popis jako JSON statistický slovník pro snadnost zpracování
- [SPARK-51058] [SC-187961][python] Nepoužívejte jvm. SparkSession
- [SPARK-51056] [SC-187871][python] Vyhněte se zbytečnému vytváření objektů ve SparkSession.getActiveSession.
- [SPARK-50967] [SC-187860][ss] Přidání možnosti přeskočit generování počátečních stavových klíčů v rámci operátoru FMGWS
- [SPARK-50813] [SC-186457][sql] Povolit pouze nekvalifikované názvy značek ve skriptech SQL
- [SPARK-50858] [SC-187399][python] Přidání konfigurace pro skrytí trasování zásobníku UDF Python
- [SPARK-50853] [SC-187219][core] Zavření zapisovatelného kanálu dočasného souboru pro shuffle
- [SPARK-50663] [SC-187541][sql] Oprava gramatiky pro příkaz IF ELSE (ELSE IF –> ELSEIF)
-
[SPARK-51027] [SC-187502][sql] Zabránění vyvolání
HiveClient.runSqlHivev netestovacím prostředí - [SPARK-50977] [SC-187400][sc-187006][CORE] Zvýšení dostupnosti logiky provádějící agregaci výsledků akumulátoru
- [SPARK-51001] [SC-187442][sql] Vylepšení arrayEquals
- [SPARK-50962] [SC-187168][sql] Vyhněte se výjimce StringIndexOutOfBoundsException v AttributeNameParser
- [SPARK-50683] [SC-184728][sql] Vložení společného výrazu v příkazu With, pokud se používá jednou
- [SPARK-50959] [SC-187139][ml][PYTHON] Spolknout výjimku JavaWrapperu.del
- [SPARK-50558] [SC-187337][sql] Zavedení simpleString pro ExpressionSet
- [SPARK-50648] [SC-184706][core] Vyčištění neaktivních úloh v neprobíhajících fázích při zrušení úlohy
-
[SPARK-50990] [SC-187316][sql] Přepracování
UpCastrozlišení mimoAnalyzer - [SPARK-49491] [SC-184714][sql] Nahrazení AnyRefMap za HashMap
- [SPARK-50685] [SC-186941][python] Zlepšení výkonu Py4J pomocí getattr
- [SPARK-50688] [SC-184666][sql] Eliminujte nejednoznačnost chybějící značky rowTag v procesu zápisu XML.
-
[SPARK-50976] [SC-187265][ml][PYTHON] Opravit ukládání a načítání
TargetEncoder - [SPARK-49639] [SC-187297][sql] Odstranit doporučení konfigurace ANSI v INVALID_INTERVAL_WITH_MICROSECONDS_ADDITION
- [SPARK-50118] [SC-187110]Vrátit "[CONNECT] Resetovat izolovanou mezipaměť stavu při spuštění úloh"
- [SPARK-47579] [16.x][sc-166971][CORE][část3] Jádro Sparku: Migrace logInfo s proměnnými do architektury strukturovaného protokolování
- [SPARK-50669] [SC-184566][es-1327450][PHOTON][test-only] Rozšíření testů jednotek photon pro výraz TimestampAdd s dlouhými typy
- [SPARK-50909] [SC-187119][python] Nastavení faulthandler v PythonPlannerRunners
- [SPARK-50774] [SC-186349][sql] Centralizace názvů kolací na jednom místě
- [SPARK-50804] [SC-186684][sql] to_protobuf() by neměl vyvolat chybu MatchError
- [SPARK-50957] [SC-187136][protobuf] Udělat protobuf.utils.SchemaConverters soukromými.
- [SPARK-50900] [SC-186948][ml][CONNECT] Přidat VectorUDT a MatrixUDT do ProtoDataTypes
- [SPARK-50895] [SC-186998][sql] Vytvoření společného rozhraní pro výrazy, které generují výchozí řetězcový typ
- [SPARK-50558] [SC-184216][sql] Přidání konfigurovatelných limitů protokolování pro počet prvků v inSet a In
- [SPARK-50875] [SC-186951][sql][16.x] Přidat kolace RTRIM do TVF
-
[SPARK-50579] [SC-183826][sql] Oprava
truncatedString
Podpora ovladačů Databricks ODBC/JDBC
Databricks podporuje ovladače ODBC/JDBC vydané v posledních 2 letech. Stáhněte si nedávno vydané ovladače a upgradujte (stáhněte rozhraní ODBC, stáhněte JDBC).
Systémové prostředí
-
Operační systém: Ubuntu 24.04.2 LTS
- Poznámka: Toto je verze Ubuntu používaná kontejnery Databricks Runtime. Kontejnery Databricks Runtime běží na virtuálních počítačích poskytovatele cloudu, které můžou používat jinou verzi Ubuntu nebo linuxovou distribuci.
- Java: Zulu17.54+21-CA
- Scala: 2.12.15
- Python: 3.12.3
- R: 4.4.0
- Delta Lake: 3.3.0
Nainstalované knihovny Python
| Knihovna | Verze | Knihovna | Verze | Knihovna | Verze |
|---|---|---|---|---|---|
| anotované typy | 0.7.0 | asttokens | 2.0.5 | astunparse | 1.6.3 |
| automatické příkazy | 2.2.2 | Azure Core | 1.31.0 | azure-storage-blob (služba pro ukládání dat na platformě Azure) | 12.23.0 |
| Služba "Azure Storage File Data Lake" | 12.17.0 | backports.tarfile | 1.2.0 | černý | 24.4.2 |
| blikač | 1.7.0 | boto3 | 1.34.69 | botocore | 1.34.69 |
| nástroje pro ukládání do mezipaměti | 5.3.3 | certifikát | 2024.6.2 | cffi | 1.16.0 |
| chardet | 4.0.0 | nástroj pro normalizaci znakové sady | 2.0.4 | klikni | 8.1.7 |
| cloudpickle | 2.2.1 | Komunikace | 0.2.1 | ContourPy | 1.2.0 |
| kryptografie | 42.0.5 | cyklista | 0.11.0 | Cython | 3.0.11 |
| Databricks SDK | 0.30.0 | dbus-python | 1.3.2 | debugpy (ladicí nástroj pro Python) | 1.6.7 |
| dekoratér | 5.1.1 | Nedoporučované | 1.2.14 | distlib | 0.3.8 |
| převod docstringu do formátu markdown | 0.11 | provedení | 0.8.3 | přehled aspektů | 1.1.1 |
| zamykání souborů | 3.15.4 | nástroje pro písma | 4.51.0 | gitdb | 4.0.11 |
| GitPython | 3.1.37 | google-api-core | 2.20.0 | Google autentizace | 2.35.0 |
| google-cloud-core | 2.4.1 | Úložiště Google Cloud | 2.18.2 | google-crc32c | 1.6.0 |
| google-resumable-media (pro snadné stahování/ukládání mediálních dat) | 2.7.2 | googleapis-common-protos | 1.65.0 | grpcio | 1.60.0 |
| grpcio-status | 1.60.0 | httplib2 | 0.20.4 | IDNA | 3.7 |
| importlib-metadata | 6.0.0 | importlib_resources | 6.4.0 | časovat/skloňovat | 7.3.1 |
| ipyflow-core je jádrová komponenta systému ipyflow | 0.0.201 | ipykernel | 6.28.0 | ipython | 8.25.0 |
| ipython-genutils | 0.2.0 | ipywidgets | 7.7.2 | isodate | 0.6.1 |
| jaraco.context | 5.3.0 | jaraco.functools | 4.0.1 | jaraco.text | 3.12.1 |
| Jedi | 0.19.1 | jmespath | 1.0.1 | joblib | 1.4.2 |
| klient Jupyter | 8.6.0 | jupyter_core | 5.7.2 | kiwisolver | 1.4.4 |
| launchpadlib | 1.11.0 | lazr.restfulclient | 0.14.6 | lazr.uri | 1.0.6 |
| matplotlib | 3.8.4 | matplotlib-inline | 0.1.6 | Mccabe | 0.7.0 |
| mlflow-odlehčená | 2.19.0 | more-itertools | 10.3.0 | mypy | 1.10.0 |
| mypy-extensions | 1.0.0 | nest-asyncio | 1.6.0 | nodeenv | 1.9.1 |
| numpy (knihovna pro numerické výpočty v Pythonu) | 1.26.4 | oauthlib | 3.2.2 | opentelemetry-api | 1.27.0 |
| opentelemetry-sdk | 1.27.0 | opentelemetry-sémantické-konvence | 0,48b0 | balení | 24.1 |
| Pandy | 1.5.3 | Parso | 0.8.3 | specifikace cesty | 0.10.3 |
| bábovka | 0.5.6 | pexpect | 4.8.0 | polštář | 10.3.0 |
| pip | 24,2 | platformdirs | 3.10.0 | plotly | 5.22.0 |
| Pluggy (nástroj pro správu pluginů v Pythonu) | 1.0.0 | nástroj "prompt-toolkit" | 3.0.43 | proto-plus | 1.24.0 |
| protobuf | 4.24.1 | psutil | 5.9.0 | psycopg2 | 2.9.3 |
| ptyprocess | 0.7.0 | čistý-eval | 0.2.2 | pyarrow | 15.0.2 |
| pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 | pyccolo | 0.0.65 |
| pycparser | 2.21 | Pydantic (Python knihovna pro validaci a nastavení dat) | 2.8.2 | pydantic_core | 2.20.1 |
| pyflakes | 3.2.0 | Pygments | 2.15.1 | PyGObject | 3.48.2 |
| PyJWT | 2.7.0 | pyodbc | 5.0.1 | pyparsing | 3.0.9 |
| pyright | 1.1.294 | python-dateutil | 2.9.0.post0 | python-lsp-jsonrpc | 1.1.2 |
| python-lsp-server | 1.10.0 | Pytoolconfig | 1.2.6 | knihovna pytz pro zpracování časových zón v Pythonu | 2024.1 |
| PyYAML | 6.0.1 | pyzmq | 25.1.2 | požadavky | 2.32.2 |
| lano | 1.12.0 | Rsa | 4,9 | s3transfer | 0.10.2 |
| scikit-learn | 1.4.2 | SciPy | 1.13.1 | narozený v moři | 0.13.2 |
| setuptools (nástroj pro vytváření a distribuci Python projektů) | 74.0.0 | šest | 1.16.0 | smmap | 5.0.0 |
| sqlparse | 0.5.1 | ssh-import-id | 5.11 | datová hromádka | 0.2.0 |
| statsmodels | 0.14.2 | houževnatost | 8.2.2 | threadpoolctl | 2.2.0 |
| tokenize-rt | 4.2.1 | tomli | 2.0.1 | tornádo | 6.4.1 |
| drobné vlastnosti | 5.14.3 | typová ochrana | 4.3.0 | typy–protobuf | 3.20.3 |
| types-psutil | 5.9.0 | types-pytz | 2023.3.1.1 | types-PyYAML | 6.0.0 |
| typy žádostí | 2.31.0.0 | types-setuptools | 68.0.0.0 | typy-šest | 1.16.0 |
| types-urllib3 | 1.26.25.14 | rozšíření_typingu | 4.11.0 | ujson | 5.10.0 |
| bezobslužné aktualizace | 0,1 | urllib3 | 1.26.16 | virtualenv | 20.26.2 |
| wadllib | 1.3.6 | wcwidth (šířka znaků) | 0.2.5 | whatthepatch | 1.0.2 |
| wheel | 0.43.0 | zabalený | 1.14.1 | yapf | 0.33.0 |
| zipový uzávěr | 3.17.0 |
Nainstalované knihovny jazyka R
Knihovny R jsou instalovány ze snímku Posit Správce balíčků CRAN ze dne 2024-08-04.
| Knihovna | Verze | Knihovna | Verze | Knihovna | Verze |
|---|---|---|---|---|---|
| šíp | 16.1.0 | žádost o heslo | 1.2.0 | ověřit, že | 0.2.1 |
| zpětné portování | 1.5.0 | báze | 4.4.0 | base64enc | 0,1-3 |
| bigD | 0.2.0 | trochu | 4.0.5 | 64bit | 4.0.5 |
| bitops | 1.0-8 | objekt blob | 1.2.4 | bootování | 1.3-30 |
| vařit | 1.0-10 | elán | 1.1.5 | koště | 1.0.6 |
| bslib | 0.8.0 | kašmír | 1.1.0 | volající | 3.7.6 |
| karetka | 6.0-94 | cellranger | 1.1.0 | cron | 2.3-61 |
| třída | 7.3-22 | CLI | 3.6.3 | Clipr | 0.8.0 |
| hodiny | 0.7.1 | cluster | 2.1.6 | codetools | 0.2-20 |
| barevný prostor | 2.1-1 | commonmark | 1.9.1 | kompilátor | 4.4.0 |
| konfig | 0.3.2 | v rozporu | 1.2.0 | cpp11 | 0.4.7 |
| pastelka | 1.5.3 | přihlašovací údaje | 2.0.1 | kroucení | 5.2.1 |
| datová tabulka | 1.15.4 | datové sady | 4.4.0 | DBI | 1.2.3 |
| dbplyr | 2.5.0 | Popis | 1.4.3 | devtools | 2.4.5 |
| schéma | 1.6.5 | diffobj | 0.3.5 | hodnota hash | 0.6.36 |
| dolní osvětlení | 0.4.4 | dplyr | 1.1.4 | dtplyr | 1.3.1 |
| e1071 | 1.7-14 | tři tečky | 0.3.2 | hodnotit | 0.24.0 |
| fanoušci | 1.0.6 | barvy | 2.1.2 | Fastmap (rychlé mapování) | 1.2.0 |
| fontawesome | 0.5.2 | pro kočky | 1.0.0 | foreach | 1.5.2 |
| zahraničí | 0.8–86 | kovat | 0.2.0 | fs | 1.6.4 |
| budoucnost | 1.34.0 | budoucnost.použít | 1.11.2 | kloktání | 1.5.2 |
| obecné typy | 0.1.3 | Gert | 2.1.0 | ggplot2 | 3.5.1 |
| Gh | 1.4.1 | git2r | 0.33.0 | gitcreds | 0.1.2 |
| glmnet | 4.1-8 | globální | 0.16.3 | lepidlo | 1.7.0 |
| googledrive | 2.1.1 | googlesheets4 | 1.1.1 | Gower | 1.0.1 |
| Grafika | 4.4.0 | grDevices | 4.4.0 | mřížka | 4.4.0 |
| gridExtra | 2.3 | gsubfn | 0,7 | GT | 0.11.0 |
| gtable | 0.3.5 | ochranná přilba | 1.4.0 | útočiště | 2.5.4 |
| vyšší | 0.11 | HMS | 1.1.3 | htmlové nástroje | 0.5.8.1 |
| htmlwidgets (interaktivní HTML prvky) | 1.6.4 | httpuv | 1.6.15 | httr | 1.4.7 |
| httr2 | 1.0.2 | identifikátory | 1.0.1 | ini | 0.3.1 |
| ipred | 0.9-15 | isoband | 0.2.7 | Iterátory | 1.0.14 |
| jquerylib | 0.1.4 | jsonlite | 1.8.8 | šťavnatý džus | 0.1.0 |
| KernSmooth | 2.23-22 | knitr | 1.48 | značení | 0.4.3 |
| později | 1.3.2 | mřížka | 0.22-5 | láva | 1.8.0 |
| životní cyklus | 1.0.4 | poslouchej | 0.9.1 | lubridate | 1.9.3 |
| magrittr | 2.0.3 | Markdown | 1.13 | Hmotnost | 7.3-60.0.1 |
| *Matrix* | 1.6-5 | zapamatujte si | 2.0.1 | metody | 4.4.0 |
| mgcv | 1.9-1 | mim | 0.12 | miniUI | 0.1.1.1 |
| mlflow | 2.14.1 | ModelMetrics | 1.2.2.2 | modelář | 0.1.11 |
| munsell | 0.5.1 | nlme | 3.1-165 | nnet (neuronová síť) | 7.3-19 |
| numDeriv (Numerická derivace) | 2016.8–1.1 | OpenSSL | 2.2.0 | rovnoběžný | 4.4.0 |
| paralelně | 1.38.0 | pilíř | 1.9.0 | pkgbuild | 1.4.4 |
| pkgconfig | 2.0.3 | pkgdown | 2.1.0 | pkgload | 1.4.0 |
| plogr | 0.2.0 | plyr | 1.8.9 | pochvala | 1.0.0 |
| prettyunits | 1.2.0 | pROC | 1.18.5 | processx | 3.8.4 |
| prodlim | 2024.06.25 | profvis | 0.3.8 | pokrok | 1.2.3 |
| progressr | 0.14.0 | sliby | 1.3.0 | proto | 1.0.0 |
| proxy | 0,4-27 | p.s. | 1.7.7 | purrr | 1.0.2 |
| R6 | 2.5.1 | ragg | 1.3.2 | "randomForest" | 4.7-1.1 |
| rappdirs | 0.3.3 | Analýza rcmdcheck | 1.4.0 | RColorBrewer | 1.1-3 |
| Rcpp | 1.0.13 | RcppEigen | 0.3.4.0.0 | schopný reagovat | 0.4.4 |
| reactR | 0.6.0 | čtenář | 2.1.5 | readxl | 1.4.3 |
| recepty | 1.1.0 | odvetný zápas | 2.0.0 | odvetný zápas 2 | 2.1.2 |
| dálková ovládání | 2.5.0 | reprodukovatelný příklad | 2.1.1 | reshape2 | 1.4.4 |
| rlang | 1.1.4 | rmarkdown | 2,27 | RODBC | 1.3-23 |
| roxygen2 | 7.3.2 | rpart | 4.1.23 | rprojroot | 2.0.4 |
| Rserve | 1.8–13 | RSQLite | 2.3.7 | rstudioapi | 0.16.0 |
| rversions | 2.1.2 | rvest | 1.0.4 | drzost | 0.4.9 |
| váhy | 1.3.0 | selektor | 0.4-2 | informace o sezení | 1.2.2 |
| obrazec | 1.4.6.1 | lesklý | 1.9.1 | sourcetools | 0.1.7-1 |
| sparklyr | 1.8.6 | SparkR | 3.5.2 | prostorový | 7.3-17 |
| spline | 4.4.0 | sqldf | 0.4-11 | SQUAREM | 2021.1 |
| statistické údaje | 4.4.0 | Stats4 | 4.4.0 | řetězce | 1.8.4 |
| stringr | 1.5.1 | přežití | 3.6-4 | frajerský krok | 5.17.14.1 |
| systém | 3.4.2 | systemfonts | 1.1.0 | tcltk | 4.4.0 |
| testthat (nástroj pro testování) | 3.2.1.1 | formátování textu | 0.4.0 | tibble | 3.2.1 |
| tidyr | 1.3.1 | tidyselect | 1.2.1 | tidyverse | 2.0.0 |
| změna času | 0.3.0 | datum a čas | 4032.109 | tinytex | 0,52 |
| nářadí | 4.4.0 | tzdb | 0.4.0 | ověřovač URL | 1.0.1 |
| použij tohle | 3.0.0 | utf8 | 1.2.4 | nástroje | 4.4.0 |
| Univerzální jednoznačný identifikátor (UUID) | 1.2-1 | V8 | 4.4.2 | vctrs | 0.6.5 |
| viridisLite | 0.4.2 | vrrrm | 1.6.5 | Waldo | 0.5.2 |
| hmatový chlup | 0.4.1 | (v případě, že je možné poskytnout smysl slova "withr", by bylo možné ho přeložit) | 3.0.1 | xfun | 0.46 |
| xml2 | 1.3.6 | xopen | 1.0.1 | xtable | 1.8-4 |
| yaml | 2.3.10 | zeallot | 0.1.0 | ZIP | 2.3.1 |
Nainstalované Java a knihovny Scala (verze clusteru Scala 2.12)
| ID skupiny | Identifikátor artefaktu | Verze |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | amazon-kinesis-client (klient Amazon Kinesis) | 1.12.0 |
| com.amazonaws | aws-java-sdk Automatické škálování | 1.12.638 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.12.638 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.12.638 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.12.638 |
| com.amazonaws | „aws-java-sdk-cloudsearch“ | 1.12.638 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.12.638 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.12.638 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.12.638 |
| com.amazonaws | aws-java-sdk-codedeploy (Balíček AWS SDK pro Java - CodeDeploy) | 1.12.638 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.12.638 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.12.638 |
| com.amazonaws | aws-java-sdk-config (konfigurace balíčku SDK pro Javu od AWS) | 1.12.638 |
| com.amazonaws | aws-java-sdk-core | 1.12.638 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.12.638 |
| com.amazonaws | aws-java-sdk-directconnect | 1.12.638 |
| com.amazonaws | aws-java-sdk-directory | 1.12.638 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.12.638 |
| com.amazonaws | aws-java-sdk-ec2 | 1.12.638 |
| com.amazonaws | aws-java-sdk-ecs | 1.12.638 |
| com.amazonaws | aws-java-sdk-efs | 1.12.638 |
| com.amazonaws | aws-java-sdk-elasticache | 1.12.638 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.12.638 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.12.638 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.12.638 |
| com.amazonaws | aws-java-sdk-emr | 1.12.638 |
| com.amazonaws | aws-java-sdk-glacier (AWS Java SDK pro Glacier) | 1.12.638 |
| com.amazonaws | aws-java-sdk-glue (balíček pro vývoj softwaru v Java od AWS, určený pro Glue služby) | 1.12.638 |
| com.amazonaws | aws-java-sdk-iam | 1.12.638 |
| com.amazonaws | aws-java-sdk-importexport | 1.12.638 |
| com.amazonaws | aws-java-sdk-kinesis | 1.12.638 |
| com.amazonaws | aws-java-sdk-kms | 1.12.638 |
| com.amazonaws | aws-java-sdk-lambda | 1.12.638 |
| com.amazonaws | aws-java-sdk-logs | 1.12.638 |
| com.amazonaws | aws-java-sdk-strojové učení | 1.12.638 |
| com.amazonaws | aws-java-sdk-opsworks | 1.12.638 |
| com.amazonaws | aws-java-sdk-rds | 1.12.638 |
| com.amazonaws | aws-java-sdk-redshift | 1.12.638 |
| com.amazonaws | aws-java-sdk-route53 | 1.12.638 |
| com.amazonaws | aws-java-sdk-s3 | 1.12.638 |
| com.amazonaws | aws-java-sdk-ses | 1.12.638 |
| com.amazonaws | aws-java-sdk-simpledb | 1.12.638 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.12.638 |
| com.amazonaws | aws-java-sdk-sns | 1.12.638 |
| com.amazonaws | aws-java-sdk-sqs | 1.12.638 |
| com.amazonaws | aws-java-sdk-ssm | 1.12.638 |
| com.amazonaws | aws-java-sdk-storagegateway (balíček nástrojů pro přístup k AWS Storage Gateway) | 1.12.638 |
| com.amazonaws | aws-java-sdk-sts | 1.12.638 |
| com.amazonaws | podpora AWS Java SDK | 1.12.638 |
| com.amazonaws | knihovny AWS Java SDK SWF | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.12.638 |
| com.amazonaws | jmespath-java | 1.12.638 |
| com.clearspring.analytics | datový proud | 2.9.6 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | Databricks SDK pro Java | 0.27.0 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
| com.esotericsoftware | technologie kryo-stínění | 4.0.2 |
| com.esotericsoftware | Minlog | 1.3.0 |
| com.fasterxml | spolužák | 1.3.4 |
| com.fasterxml.jackson.core | jackson-annotations (poznámky Jackson) | 2.15.2 |
| com.fasterxml.jackson.core | jackson-core | 2.15.2 |
| com.fasterxml.jackson.core | Jackson-databind | 2.15.2 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.15.2 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-yaml | 2.15.2 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.15.2 |
| com.fasterxml.jackson.datatype | jackson-datatype-jsr310 | 2.16.0 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.15.2 |
| com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.15.2 |
| com.github.ben-manes.kofein | kofein | 2.9.3 |
| com.github.fommil | jniloader | 1.1 |
| com.github.fommil.netlib | Nativní odkaz pro Javu | 1.1 |
| com.github.fommil.netlib | Nativní odkaz pro Javu | Verze 1.1 pro místní uživatele |
| com.github.fommil.netlib | nativní_systém-java | 1.1 |
| com.github.fommil.netlib | nativní_systém-java | Verze 1.1 pro místní uživatele |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64 | Verze 1.1 pro místní uživatele |
| com.github.fommil.netlib | netlib-nativní_systém-linux-x86_64 | Verze 1.1 pro místní uživatele |
| com.github.luben | zstd-jni | 1.5.5-4 |
| com.github.wendykierp | JTransforms | 3.1 |
| com.google.code.findbugs | jsr305 | 3.0.0 |
| com.google.code.gson | Gson | 2.10.1 |
| com.google.crypto.tink | Cink | 1.9.0 |
| com.google.errorprone | poznámky_náchylné_k_chybám | 2.10.0 |
| com.google.flatbuffers | flatbuffers-java | 23. 5. 2026 |
| com.google.guava | guave | 15,0 |
| com.google.protobuf | protobuf-java | 3.25.1 |
| com.helger | profiler | 1.1.1 |
| com.ibm.icu | icu4j | 75.1 |
| com.jcraft | jsch | 0.1.55 |
| com.jolbox | bonecp | 0.8.0.VYDÁNÍ |
| com.lihaoyi | zdrojový_kód_2.12 | 0.1.9 |
| com.microsoft.azure | azure-data-lake-store-sdk (software development kit pro úložiště dat Azure Data Lake) | 2.3.9 |
| com.microsoft.sqlserver | mssql-jdbc | 11.2.2.jre8 |
| com.microsoft.sqlserver | mssql-jdbc | 11.2.3.jre8 |
| com.ning | komprimovat-lzf | 1.1.2 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.sun.xml.bind | jaxb-core | 2.2.11 |
| com.sun.xml.bind | jaxb-impl | 2.2.11 |
| com.tdunning | JSON | 1.8 |
| com.thoughtworks.paranamer | Paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
| com.twitter | chill-java | 0.10.0 |
| com.twitter | chill_2.12 | 0.10.0 |
| com.twitter | util-app-2.12 | 7.1.0 |
| com.twitter | util-core_2.12 | 7.1.0 |
| com.twitter | util-function_2.12 | 7.1.0 |
| com.twitter | util-jvm_2.12 | 7.1.0 |
| com.twitter | util-lint_2.12 | 7.1.0 |
| com.twitter | util-registry_2.12 | 7.1.0 |
| com.twitter | util-stats_2.12 | 7.1.0 |
| com.typesafe | konfig | 1.4.3 |
| com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
| com.uber | h3 | 3.7.3 |
| com.univocity | univocity-parsers (nástroj pro analýzu dat) | 2.9.1 |
| com.zaxxer | HikariCP | 4.0.3 |
| commons-cli | commons-cli | 1.5.0 |
| commons-codec | commons-codec | 1.16.0 |
| společné sbírky | společné sbírky | 3.2.2 |
| commons-dbcp | commons-dbcp | 1.4 |
| Nahrávání souborů v Commons | Nahrávání souborů v Commons | 1.5 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.13.0 |
| commons-lang | commons-lang | 2.6 |
| commons-logging (nástroj pro záznamy) | commons-logging (nástroj pro záznamy) | 1.1.3 |
| commons-pool | commons-pool | 1.5.4 |
| dev.ludovic.netlib | arpack | 3.0.3 |
| dev.ludovic.netlib | Blas | 3.0.3 |
| dev.ludovic.netlib | LAPACK | 3.0.3 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
| io.airlift | vzduchový kompresor | 0.27 |
| io.delta | delta-sharing-client_2.12 | 1.2.3 |
| io.dropwizard.metrics | anotace metrik | 4.2.19 |
| io.dropwizard.metrics | jádro metrik | 4.2.19 |
| io.dropwizard.metrics | metrics-graphite | 4.2.19 |
| io.dropwizard.metrics | metriky – kontroly stavu | 4.2.19 |
| io.dropwizard.metrics | metrics-jetty9 | 4.2.19 |
| io.dropwizard.metrics | Metrics-JMX | 4.2.19 |
| io.dropwizard.metrics | Metriky-json | 4.2.19 |
| io.dropwizard.metrics | metriky pro JVM | 4.2.19 |
| io.dropwizard.metrics | metriky – servlety | 4.2.19 |
| io.netty | netty-all | 4.1.108.Final |
| io.netty | netty-buffer | 4.1.108.Final |
| io.netty | netty-codec | 4.1.108.Final |
| io.netty | netty-kodek-http | 4.1.108.Final |
| io.netty | netty-codec-http2 | 4.1.108.Final |
| io.netty | netty-codec-socks | 4.1.108.Final |
| io.netty | netty-common | 4.1.108.Final |
| io.netty | Netty handler | 4.1.108.Final |
| io.netty | Netty-handler-proxy | 4.1.108.Final |
| io.netty | netty-resolver | 4.1.108.Final |
| io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-db-r16 |
| io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-db-r16-linux-aarch_64 |
| io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-db-r16-linux-x86_64 |
| io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-db-r16-osx-aarch_64 |
| io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-db-r16-osx-x86_64 |
| io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-db-r16-windows-x86_64 |
| io.netty | netty-tcnative-classes (softwarová knihovna) | 2.0.61.Final |
| io.netty | Netty přenos | 4.1.108.Final |
| io.netty | netty-transport-classes-epoll | 4.1.108.Final |
| io.netty | netty-transport-classes-kqueue | 4.1.108.Final |
| io.netty | netty-transport-native-epoll | 4.1.108.Final |
| io.netty | netty-transport-native-epoll | 4.1.108.Final-linux-aarch_64 |
| io.netty | netty-transport-native-epoll | 4.1.108.Final-linux-riscv64 |
| io.netty | netty-transport-native-epoll | 4.1.108.Final-linux-x86_64 |
| io.netty | netty-transport-native-kqueue | 4.1.108.Final-osx-aarch_64 |
| io.netty | netty-transport-native-kqueue | 4.1.108.Final-osx-x86_64 |
| io.netty | netty-transport-native-unix-common | 4.1.108.Final |
| io.prometheus | simpleclient | 0.7.0 |
| io.prometheus | simpleklient_obecný | 0.7.0 |
| io.prometheus | simpleclient_dropwizard | 0.7.0 |
| io.prometheus | simpleclient_pushgateway | 0.7.0 |
| io.prometheus | simpleclient_servlet | 0.7.0 |
| io.prometheus.jmx | kolektor | 0.12.0 |
| jakarta.annotation | jakarta.annotation-api | 1.3.5 |
| jakarta.servlet | jakarta.servlet-api | 4.0.3 |
| jakarta.validation | jakarta.validation-api | 2.0.2 |
| jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
| javax.activation | aktivace | 1.1.1 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.transaction | jta | 1.1 |
| javax.transaction | API pro transakce | 1.1 |
| javax.xml.bind | jaxb-api | 2.2.11 |
| Javolution | Javolution | 5.5.1 |
| jline | jline | 2.14.6 |
| joda-time | joda-time | 2.12.1 |
| net.java.dev.jna | jna | 5.8.0 |
| net.razorvine | nakládačka | 1.3 |
| net.sf.jpam | jpam | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| síť.sněhová vločka | snowflake-ingest-sdk | 0.9.6 |
| net.sourceforge.f2j | arpack_combined_all | 0,1 |
| org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr runtime | 3.5.2 |
| org.antlr | antlr4-runtime | 4.9.3 |
| org.antlr | StringTemplate | 3.2.1 |
| org.apache.ant | mravenec | 1.10.11 |
| org.apache.ant | ant-jsch | 1.10.11 |
| org.apache.ant | Ant launcher | 1.10.11 |
| org.apache.arrow | šipkový formát | 15.0.0 |
| org.apache.arrow | jádro šipkové paměti | 15.0.0 |
| org.apache.arrow | šipka-paměť-netty | 15.0.0 |
| org.apache.arrow | šipkový vektor | 15.0.0 |
| org.apache.avro | Avro | 1.11.3 |
| org.apache.avro | avro-ipc | 1.11.3 |
| org.apache.avro | avro-mapred | 1.11.3 |
| org.apache.commons | commons-collections4 | 4.4 |
| org.apache.commons | commons-compress (softwarová knihovna pro kompresi dat) | 1.23.0 |
| org.apache.commons | commons-crypto | 1.1.0 |
| org.apache.commons | commons-lang3 | 3.12.0 |
| org.apache.commons | commons-math3 | 3.6.1 |
| org.apache.commons | Commons-text (textové nástroje) | 1.10.0 |
| org.apache.kurátor | kurátor-klient | 2.13.0 |
| org.apache.kurátor | kurátorský rámec | 2.13.0 |
| org.apache.kurátor | kurátorovy recepty | 2.13.0 |
| org.apache.datasketches | datasketches-java | 3.1.0 |
| org.apache.datasketches | datasketches-paměť | 2.0.0 |
| org.apache.derby | fotbalové derby | 10.14.2.0 |
| org.apache.hadoop | běhové prostředí klienta Hadoop | 3.3.6 |
| org.apache.hive | hive-beeline | 2.3.9 |
| org.apache.hive | hive-cli | 2.3.9 |
| org.apache.hive | hive-jdbc (JDBC ovladač pro Apache Hive) | 2.3.9 |
| org.apache.hive | hive-llap-client (klient pro Apache Hive s možností LLAP) | 2.3.9 |
| org.apache.hive | hive-llap-common | 2.3.9 |
| org.apache.hive | hive-serde | 2.3.9 |
| org.apache.hive | Hive-shims | 2.3.9 |
| org.apache.hive | rozhraní pro úložiště Hive | 2.8.1 |
| org.apache.hive.shims | hive-shims-0.23 | 2.3.9 |
| org.apache.hive.shims | hive-shims-common | 2.3.9 |
| org.apache.hive.shims | plánovač hive-shims | 2.3.9 |
| org.apache.httpcomponents | httpclient | 4.5.14 |
| org.apache.httpcomponents | httpcore | 4.4.16 |
| org.apache.ivy | břečťan | 2.5.2 |
| org.apache.logging.log4j | log4j-1.2-api | 2.22.1 |
| org.apache.logging.log4j | log4j-api | 2.22.1 |
| org.apache.logging.log4j | log4j-core | 2.22.1 |
| org.apache.logging.log4j | šablona rozložení log4j ve formátu JSON | 2.22.1 |
| org.apache.logging.log4j | log4j-slf4j2-impl | 2.22.1 |
| org.apache.orc | orc-core | 1.9.2-shaded-protobuf |
| org.apache.orc | orc-mapreduce | 1.9.2-shaded-protobuf |
| org.apache.orc | orčí podložky | 1.9.2 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.12.0 |
| org.apache.ws.xmlschema | xmlschema-core | 2.3.0 |
| org.apache.xbean | xbean-asm9-shaded | 4.23 |
| org.apache.yetus | poznámky pro publikum | 0.13.0 |
| org.apache.zookeeper | ošetřovatel zvířat v zoo | 3.9.2 |
| org.apache.zookeeper | zookeeper-jute | 3.9.2 |
| org.checkerframework | checker-qual | 3.31.0 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
| org.codehaus.janino | společný kompilátor | 3.0.16 |
| org.codehaus.janino | Janino | 3.0.16 |
| org.datanucleus | datanucleus-api-jdo | 4.2.4 |
| org.datanucleus | datanucleus-core | 4.1.17 |
| org.datanucleus | datanucleus-rdbms (systém pro řízení relačních databází) | 4.1.19 |
| org.datanucleus | javax.jdo | 3.2.0-m3 |
| org.eclipse.collections | eclipse-collections | 11.1.0 |
| org.eclipse.collections | eclipse-collections-api | 11.1.0 |
| org.eclipse.jetty | jetty-client | 9.4.52.v20230823 |
| org.eclipse.jetty | pokračování Jetty | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-http | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-io | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-jndi | 9.4.52.v20230823 |
| org.eclipse.jetty | Jetty-plus | 9.4.52.v20230823 |
| org.eclipse.jetty | proxy pro službu Jetty | 9.4.52.v20230823 |
| org.eclipse.jetty | bezpečnost Jetty | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-server | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-servlet | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-servlets | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-util | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-util-ajax | 9.4.52.v20230823 |
| org.eclipse.jetty | Jetty-webová aplikace | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-xml | 9.4.52.v20230823 |
| org.eclipse.jetty.websocket | WebSocket API | 9.4.52.v20230823 |
| org.eclipse.jetty.websocket | websocket-klient | 9.4.52.v20230823 |
| org.eclipse.jetty.websocket | websocket – běžné | 9.4.52.v20230823 |
| org.eclipse.jetty.websocket | websocket-server | 9.4.52.v20230823 |
| org.eclipse.jetty.websocket | websocket-servlet | 9.4.52.v20230823 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.6.1 |
| org.glassfish.hk2 | hk2-lokátor | 2.6.1 |
| org.glassfish.hk2 | hk2-utils | 2.6.1 |
| org.glassfish.hk2 | OSGi vyhledávač zdrojů | 1.0.3 |
| org.glassfish.hk2.external | aopalliance-přebaleno | 2.6.1 |
| org.glassfish.hk2.external | jakarta.inject (pokud je to potřeba, přidejte vysvětlení nebo typický český termín v závorce) | 2.6.1 |
| org.glassfish.jersey.containers | jersey-container-servlet (nástroj pro zpracování požadavků v Java EE) | 2.40 |
| org.glassfish.jersey.containers | Jersey-container-servlet-core | 2.40 |
| org.glassfish.jersey.core | jersey-client | 2.40 |
| org.glassfish.jersey.core | společný dres | 2.40 |
| org.glassfish.jersey.core | jersey-server (server pro Jersey aplikace) | 2.40 |
| org.glassfish.jersey.inject | jersey-hk2 | 2.40 |
| org.hibernate.validator | Hibernate Validator | 6.1.7.Final |
| org.ini4j | ini4j | 0.5.4 |
| org.javassist | Javassist | 3.29.2-GA |
| org.jboss.logging | jboss-logging | 3.3.2.Final |
| org.jdbi | jdbi | 2.63.1 |
| org.jetbrains | anotace | 17.0.0 |
| org.joda | joda-convert | 1,7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.12 | 4.0.7 |
| org.json4s | json4s-core_2.12 | 4.0.7 |
| org.json4s | json4s-jackson-core_2.12 | 4.0.7 |
| org.json4s | json4s-jackson_2.12 | 4.0.7 |
| org.json4s | json4s-scalap_2.12 | 4.0.7 |
| org.lz4 | lz4-java | 1.8.0-databricks-1 |
| org.mlflow | mlflow-spark_2.12 | 2.9.1 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.6.1 |
| org.roaringbitmap | RoaringBitmap | 0.9.45-databricks |
| org.roaringbitmap | vymezovací pásky | 0.9.45-databricks |
| org.rocksdb | rocksdbjni | 9.2.1 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.12 | 2.12.15 |
| org.scala-lang | scala-library_2.12 | 2.12.15 |
| org.scala-lang | scala-reflect_2.12 | 2.12.15 |
| org.scala-lang.modules | scala-collection-compat_2.12 | 2.11.0 |
| org.scala-lang.modules | scala-java8-compat_2.12 | 0.9.1 |
| org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
| org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
| org.scala-sbt | testovací rozhraní | 1.0 |
| org.scalacheck | scalacheck_2.12 | 1.14.2 |
| org.scalactic | scalactic_2.12 | 3.2.16 |
| org.scalanlp | breeze-macros_2.12 | 2.1.0 |
| org.scalanlp | breeze_2.12 | 2.1.0 |
| org.scalatest | kompatibilní s scalatestem | 3.2.16 |
| org.scalatest | scalatest-core_2.12 | 3.2.16 |
| org.scalatest | scalatest-diagrams_2.12 | 3.2.16 |
| org.scalatest | scalatest-featurespec_2.12 | 3.2.16 |
| org.scalatest | scalatest-flatspec_2.12 | 3.2.16 |
| org.scalatest | scalatest-freespec_2.12 | 3.2.16 |
| org.scalatest | scalatest-funspec_2.12 | 3.2.16 |
| org.scalatest | scalatest-funsuite_2.12 | 3.2.16 |
| org.scalatest | scalatest-matchers-core_2.12 | 3.2.16 |
| org.scalatest | scalatest-mustmatchers_2.12 | 3.2.16 |
| org.scalatest | scalatest-propspec_2.12 | 3.2.16 |
| org.scalatest | scalatest-refspec_2.12 | 3.2.16 |
| org.scalatest | scalatest-shouldmatchers_2.12 | 3.2.16 |
| org.scalatest | scalatest-wordspec_2.12 | 3.2.16 |
| org.scalatest | scalatest_2.12 | 3.2.16 |
| org.slf4j | jcl-over-slf4j | 2.0.7 |
| org.slf4j | jul-to-slf4j | 2.0.7 |
| org.slf4j | slf4j-api | 2.0.7 |
| org.slf4j | slf4j-simple | 1.7.25 |
| org.threeten | threeten-extra | 1.7.1 |
| org.tukaani | xz | 1.9 |
| org.typelevel | algebra_2.12 | 2.0.1 |
| org.typelevel | kočky-kernel_2.12 | 2.1.1 |
| org.typelevel | spire-macros_2.12 | 0.17.0 |
| org.typelevel | spire-platform_2.12 | 0.17.0 |
| org.typelevel | spire-util_2.12 | 0.17.0 |
| org.typelevel | spire_2.12 | 0.17.0 |
| org.wildfly.openssl | wildfly-openssl | 1.1.3.Finální |
| org.xerial | sqlite-jdbc | 3.42.0.0 |
| org.xerial.snappy | snappy-java | 1.1.10.3 |
| org.yaml | snakeyaml | 2.0 |
| oro | oro | 2.0.8 |
| pl.edu.icm | JLargeArrays | 1.5 |
| software.amazon.cryptools | AmazonCorrettoCryptoProvider | 2.4.1-linux-x86_64 |
| Stax | stax-api | 1.0.1 |