Databricks Runtime 12.0 (EoS)

Poznámka:

Podpora této verze Databricks Runtime skončila. Datum ukončení podpory najdete v tématu Konec podpory a historie ukončení životnosti. Pro všechny podporované verze Databricks Runtime vizte poznámky k vydání Databricks Runtime - verze a kompatibilita.

Následující poznámky k verzi obsahují informace o modulu Databricks Runtime 12.0, který využívá Apache Spark 3.3.1.

Databricks vydala tuto verzi v prosinci 2022.

Nové funkce a vylepšení

Prediktivní I/O je ve fázi obecné dostupnosti

Prediktivní vstupně-výstupní operace jsou nyní obecně dostupné. Další informace najdete v tématu Co je prediktivní vstupně-výstupní operace?

Photon writer podporuje kompresi zstd

Nativní zapisovač Photon nyní podporuje kodek komprese zstd, pokud je povolen zstd nastavením spark.sql.parquet.compression.codec na zstd.

Podpora profilu prostředků úloh na úrovni fáze pro samostatné clustery

Plánování na úrovni fáze teď můžete použít v samostatných clusterech, když je dynamické přidělování zakázané. Chcete-li tuto funkci použít, zadejte zdroje úkolů pomocí ResourceProfileBuilder pro každou fázi.

Podpora SQL pro selektivní přepsání pomocí REPLACE WHERE

Teď můžete selektivně přepsat data odpovídající libovolnému výrazu v tabulce Delta pomocí následujícího vzoru.

INSERT INTO table_name REPLACE WHERE predicate append_relation

Viz REPLACE WHERE.

Vodoznaky jsou teď podporované v SQL.

Vodoznaky teď můžete zadat pomocí rozhraní DLT SQL a v dotazech SQL na streamované datové rámce. Vizklauzule .

Profilace paměti v PySpark

Profilace paměti je teď povolená pro uživatelem definované funkce PySpark. Poskytuje informace o přírůstcích paměti, využití paměti a počtu výskytů pro každý řádek kódu v uživatelem definované funkci.

Dynamické vyřezávání pro DELETE a UPDATE

Při použití výpočetních prostředků s podporou Photon nyní DELETE i UPDATE dynamicky vyřezávají soubory a oddíly, pokud to zlepšuje výkon. Dynamické vyřezávání je například povolené, když se k aktualizaci nebo odstranění řádků ve větší tabulce použije menší zdrojová tabulka.

Metriky odstranění na úrovni řádků pro operace jazyka pro manipulaci s dělenými daty

S partícovanými predikáty teď uživatelé můžou auditovat, kolik řádků se odstraní při spouštění operací jazyka DML (Data Manipulation Language), jako je DELETE, TRUNCATE a replaceWhere.

Opravy chyb

Opravili jsme problém s parsováním JSON v Auto Loaderu, kdy všechny sloupce zůstaly jako řetězce. Předtím nebylo cloudFiles.inferColumnTypes nastaveno nebo bylo nastaveno na false a JSON obsahoval vnořené objekty.

Upgrady knihoven

  • Upgradované knihovny Python:
    • argon2-cffi od 20.1.0 do 21.3.0
    • attrs od 21.2.0 do 21.4.0
    • backports.entry-points-selectable od verze 1.1.1 do verze 1.2.0
    • bleach od 4.0.0 do 4.1.0
    • boto3 od 1.21.18 do 1.21.32
    • botocore od 1.24.18 do 1.24.32
    • cffi od 1.14.6 do 1.15.0
    • klikněte z 8.0.3 na 8.0.4
    • cycler od 0.10.0 do 0.11.0
    • Cython od 0.29.24 do 0.29.28
    • debugpy od 1.4.1 do 1.5.1
    • dekorátor od 5.1.0 do 5.1.1
    • vstupní body od 0.3 do 0.4
    • idna od 3.2 do 3.3
    • ipykernel od 6.12.1 do 6.15.3
    • ipython od 7.32.0 do 8.5.0
    • ipywidgets od 7.7.0 do 7.7.2
    • jedi od 0.18.0 do 0.18.1
    • joblib od 1.0.1 do 1.1.0
    • jsonschema od 3.2.0 do 4.4.0
    • kiwisolver od 1.3.1 do 1.3.2
    • matplotlib od 3.4.3 do 3.5.1
    • nbclient od 0.5.3 do 0.5.13
    • nbconvert od 6.1.0 do 6.4.4
    • nbformat od 5.1.3 do 5.3.0
    • nest-asyncio od 1.5.1 do 1.5.5
    • poznámkový blok od 6.4.5 do 6.4.8
    • numpy od 1.20.3 do 1.21.5
    • balení od 21.0 do 21.3
    • pandas od 1.3.4 do 1.4.2
    • pandocfilters od 1.4.3 do 1.5.0
    • parso z 0.8.2 do 0.8.3
    • Polštář od 8.4.0 do 9.0.1
    • platformdirs od 2.5.2 do 2.5.4
    • vykreslit od 5.9.0 do 5.6.0
    • prometheus-client od 0.11.0 do 0.13.1
    • protobuf od 4.21.5 do 3.19.4
    • pycparser od 2.20 do 2.21
    • Pygments, verze 2.10.0 až 2.11.2
    • pyodbc od 4.0.31 do 4.0.32
    • pyzmq od 22.2.1 do 22.3.0
    • žádosti od 2.26.0 do 2.27.1
    • s3transfer z 0.5.2 na 0.5.0
    • scikit-learn od 0.24.2 do 1.0.2
    • scipy od 1.7.1 do 1.7.3
    • statsmodels od verze 0.12.2 do verze 0.13.2
    • terminado od 0.9.4 do 0.13.1
    • tomli od 2.0.1 do 1.2.2
    • traitlets verze od 5.1.0 do 5.1.1
    • urllib3 od 1.26.7 do 1.26.9
    • widgetsnbextension od 3.6.0 do 3.6.1
  • Upgradované knihovny jazyka R:
    • základ od 4.1.3 do 4.2.2
    • upgrade z verze 1.0-7 na 1.0-8
    • bslib od 0.4.0 do 0.4.1
    • volající od 3.7.2 do 3.7.3
    • Chron od 2.3-57 do 2.3-58
    • cli od verze 3.3.0 do verze 3.4.1
    • cluster od 2.1.3 do 2.1.4
    • commonmark od verze 1.8.0 do verze 1.8.1
    • kompilátor z verze 4.1.3 do 4.2.2
    • cpp11 od 0.4.2 do 0.4.3
    • crayon od 1.5.1 do 1.5.2
    • curl od 4.3.2 do 4.3.3
    • data.table od 1.14.2 do 1.14.4
    • datové sady od 4.1.3 do 4.2.2
    • desc od 1.4.1 do 1.4.2
    • devtools od 2.4.4 do 2.4.5
    • verze od 0.6.29 do 0.6.30
    • e1071 od 1.7-11 do 1.7-12
    • hodnotit od 0,16 do 0,18
    • fontawesome od 0.3.0 do 0.4.0
    • budoucí od 1.28.0 do 1.29.0
    • future.apply z 1.9.1 na 1.10.0
    • gargle od 1.2.0 do 1.2.1
    • gert od 1.8.0 do 1.9.1
    • ggplot2 od 3.3.6 do 3.4.0
    • gh od 1.3.0 do 1.3.1
    • gitcreds od 0.1.1 do 0.1.2
    • grafika od 4.1.3 do 4.2.2
    • grDevices od 4.1.3 do 4.2.2
    • mřížka od 4.1.3 do 4.2.2
    • httpuv od 1.6.5 do 1.6.6
    • isoband od 0.2.5 do 0.2.6
    • jsonlite od 1.8.0 do 1.8.3
    • láva od 1.6.10 do 1.7.0
    • životní cyklus od 1.0.1 do 1.0.3
    • lubridate od 1.8.0 do 1.9.0
    • markdown od 1.1 do 1.3
    • HMOTNOST od 7.3-56 do 7.3-58
    • Matice od 1,4-1 do 1,5-1
    • metody od 4.1.3 do 4.2.2
    • mgcv od 1,8-40 do 1,8-41
    • nlme od 3.1-157 do 3.1-160
    • nnet od 7.3-17 do 7.3-18
    • openssl od 2.0.2 do 2.0.4
    • paralelní od 4.1.3 do 4.2.2
    • pkgload od 1.3.0 do 1.3.1
    • processx od 3.7.0 do 3.8.0
    • ps od 1.7.1 do 1.7.2
    • purrr od 0.3.4 do 0.3.5
    • Aktualizace verze ragg z 1.2.2 na 1.2.4
    • RcppEigen od 0.3.3.9.2 do 0.3.3.9.3
    • readr od 2.1.2 do 2.1.3
    • recepty od 1.0.1 do 1.0.3
    • rlang od 1.0.5 do 1.0.6
    • rmarkdown od 2.16 do 2.18
    • rpart od 4.1.16 do 4.1.19
    • RSQLite od 2.2.16 do 2.2.18
    • lesklý od 1.7.2 do 1.7.3
    • SparkR od 3.3.0 do 3.3.1
    • splines od 4.1.3 do 4.2.2
    • Statistiky od 4.1.3 do 4.2.2
    • Statistiky 4 od 4.1.3 do 4.2.2
    • sys od 3.4 do 3.4.1
    • Aktualizace tcltk z verze 4.1.3 na verzi 4.2.2
    • testthat z 3.1.4 na 3.1.5
    • tidyr z verze 1.2.0 na verzi 1.2.1
    • Tidyselect from 1.1.2 to 1.2.0
    • ČasDatum od 4021.104 do 4021.106
    • tinytex od 0.41 do 0.42
    • nástroje od 4.1.3 do 4.2.2
    • nástroje od 4.1.3 do 4.2.2
    • vctrs od 0.4.1 do 0.5.0
    • vroom od 1.5.7 do 1.6.0
    • xfun od 0.32 do 0.34
    • Aktualizace yaml z verze 2.3.5 na verzi 2.3.6
    • zip od 2.2.0 do 2.2.2
  • Upgradované knihovny Java:
    • com.fasterxml.jackson.core.jackson-databind od 2.13.4 do 2.13.4.2
    • org.apache.parquet.parquet-column od 1.12.0-databricks-0007 do 1.12.3-databricks-0001
    • org.apache.parquet.parquet-common od 1.12.0-databricks-0007 do 1.12.3-databricks-0001
    • org.apache.parquet.parquet-encoding od 1.12.0-databricks-0007 do 1.12.3-databricks-0001
    • org.apache.parquet.parquet-format-structures od 1.12.0-databricks-0007 na 1.12.3-databricks-0001
    • org.apache.parquet.parquet-hadoop od 1.12.0-databricks-0007 do 1.12.3-databricks-0001
    • org.apache.parquet.parquet-jackson od 1.12.0-databricks-0007 do 1.12.3-databricks-0001
    • org.apache.yetus.audience-annotations od 0.5.0 do 0.13.0

Apache Spark

Databricks Runtime 12.0 zahrnuje Apache Spark 3.3.1. Tato verze zahrnuje všechny opravy a vylepšení Sparku zahrnuté v Databricks Runtime 11.3 LTS (EoS) a také následující další opravy chyb a vylepšení Sparku:

  • [SPARK-40844] [SC-116996][12.x][12.0][12.0.0] Vrátit zpět “[SC-113542][ss] Překlopit výchozí hodnotu konfigurace načítání offsetu v Kafka”
  • [SPARK-40646] [SC-116061] Revert "[SC-113379][sql] Oprava vrácení částečných výsledků ve zdroji dat JSON a funkcích JSON"
  • [SPARK-41195] [SC-116305][sql] Podpora PIVOT/UNPIVOT s přidruženými podřízenými daty
  • [SPARK-41178] [SC-116139][sql] Oprava priority pravidla analyzátoru mezi JOIN a čárkou
  • [SPARK-41072] [SC-116140][sc-116044][SC-115852][sql][SS] Přidání třídy STREAM_FAILED chyb do StreamingQueryException
  • [SPARK-40921] Vrátit "[SC-115140][sc-114585][SQL] Přidat klauzuli KDYŽ NENÍ SHODNÉ SE ZDROJEM do MERGE INTO
  • [SPARK-37980] [SC-115758] [SQL] Rozšíření sloupce METADATA pro podporu indexů řádků pro soubory Parquet
  • [SPARK-41055] [SC-115582][sql] Přejmenování _LEGACY_ERROR_TEMP_2424 na GROUP_BY_AGGREGATE
  • [SPARK-41101] [SC-115849][python][PROTOBUF] Podpora názvu třídy zpráv pro PYSPARK-PROTOBUF
  • [SPARK-40956] [SC-115867] Ekvivalent SQL pro příkaz přepsání operace DataFrame
  • [SPARK-41095] [SC-115659][sql] Převod nevyřešených operátorů na vnitřní chyby
  • [SPARK-41144] [SC-115866][sql] Nevyřešený tip by neměl způsobit selhání dotazu
  • [SPARK-41137] [SC-115858][sql] Přejmenování LATERAL_JOIN_OF_TYPE na INVALID_LATERAL_JOIN_TYPE
  • [SPARK-40998] [SC-114754][sql] Přejmenujte třídu _LEGACY_ERROR_TEMP_0040 chyb na INVALID_IDENTIFIER
  • [SPARK-41015] [SC-115130][sql][PROTOBUF] Kontrola hodnoty Null UnitTest pro generátor dat
  • [SPARK-40769] [SC-114923][core][SQL] Přesun selhání kontroly typů agregačních výrazů do tříd chyb
  • [SPARK-41043] [SC-115183][sql] Přejmenujte třídu _LEGACY_ERROR_TEMP_2429 chyb na NUM_COLUMNS_MISMATCH
  • [SPARK-40777] [SC-114855][sql][PROTOBUF] Podpora importu Protobuf a přesun tříd chyb.
  • [SPARK-41019] [SC-114987][sql] Zadejte kontext dotazu failAnalysis()
  • [SPARK-41027] [SC-115131][sql] Použijte UNEXPECTED_INPUT_TYPE místo MAP_FROM_ENTRIES_WRONG_TYPE
  • [SPARK-40476] [SC-115868][sc-111163][ML][sql] Snížení velikosti přerozdělení dat v ALS.
  • [SPARK-41134] [SC-115851][sql] Zlepšení chybového hlášení vnitřních chyb
  • [SPARK-37980] Vrátit změnu "[SQL] Rozšíření sloupce METADATA pro podporu indexování řádků pro Soubory Parquet"
  • [SPARK-41109] [SC-115788][sql] Přejmenujte třídu chyb _LEGACY_ERROR_TEMP_1216 na INVALID_LIKE_PATTERN
  • [SPARK-40984] [SC-115844][core][SQL] Použijte NON_FOLDABLE_INPUT místo FRAME_LESS_OFFSET_WITHOUT_FOLDABLE
  • [SPARK-41029] [SC-115828][sql] Optimalizace používání konstruktoru pro Scala 2.13
  • [SPARK-40697] [SC-113648][sql] Přidání odsazení znaků na straně čtení pro pokrytí externích datových souborů
  • [SPARK-40978] [SC-114574][sql] Migrace bez kontextu na třídy chyb
  • [SPARK-40663] [SC-114586][sql] Přesunout chyby provádění do tříd chyb: _LEGACY_ERROR_TEMP_2251-2275
  • [SPARK-38959] [SC-115672][sc-112707][SQL] DS V2: Podpora filtrování skupin runtime v příkazech na úrovni řádků
  • [SPARK-40372] [SC-115668][sql] Přenesení selhání kontrol typů polí do tříd chyb
  • [SPARK-41038] [SC-115371][sql] Přejmenování MULTI_VALUE_SUBQUERY_ERROR na SCALAR_SUBQUERY_TOO_MANY_ROWS
  • [SPARK-40965] [SC-114443][sql] Přejmenujte třídu _LEGACY_ERROR_TEMP_1208 chyb na FIELD_NOT_FOUND
  • [SPARK-40748] [SC-114696][sql] Přenos chyb při kontrole typů podmínek do chybových tříd
  • [SPARK-40371] [SC-114557][sql] Migrovat selhání kontroly typů pro NthValue a NTile do tříd chyb
  • [SPARK-41092] [SC-115547][sql] Nepoužívejte identifikátor ke shodě jednotek intervalu.
  • [SPARK-41009] [SC-115360][sql] Přejmenujte třídu _LEGACY_ERROR_TEMP_1070 chyb na LOCATION_ALREADY_EXISTS
  • [SPARK-37980] [SQL] Rozšíření sloupce METADATA pro podporu indexů řádků pro soubory Parquet
  • [SPARK-40967] [SC-114448][sql] Převod failAnalysis() na třídy chyb
  • [SPARK-34265] [SC-115486][sc-113788][PYTHON][sql] Instrumentace Python UDFů s využitím metrik SQL
  • [SPARK-41012] [SC-114873][sql] Přejmenování _LEGACY_ERROR_TEMP_1022 na ORDER_BY_POS_OUT_OF_RANGE
  • [SPARK-41042] [SC-115142][sql] Přejmenování PARSE_CHAR_MISSING_LENGTH na DATATYPE_MISSING_SIZE
  • [SPARK-40752] [SC-114442][sql] Přesun selhání kontrol typů různých výrazů do tříd chyb
  • [SPARK-37945] [SC-115534][sql][CORE] Použití tříd chyb v chybách provádění aritmetických operací
  • [SPARK-40374] [SC-114705][sql] Selhání kontroly typů při vytváření typů přiřadit k třídám chyb
  • [SPARK-41056] [SC-115354][r] Oprava nového chování R_LIBS_SITE zavedeného v R 4.2
  • [SPARK-41041] [SC-115357][sql] Integrace _LEGACY_ERROR_TEMP_1279 do TABLE_OR_VIEW_ALREADY_EXISTS
  • [SPARK-40663] [SC-114852][sql] Migrace chyb provádění do tříd chyb: _LEGACY_ERROR_TEMP_2201-2225
  • [SPARK-41020] [SC-114984][sql] Přejmenujte třídu _LEGACY_ERROR_TEMP_1019 chyb na STAR_GROUP_BY_POS
  • [SPARK-41035] [SC-115233][sql] Neopravujte skládací prvky agregačních funkcí v RewriteDistinctAggregates
  • [SPARK-39778] [SC-114353][sql] Vylepšení tříd chyb a zpráv
  • [SPARK-40798] [SC-113782][sql] Změna oddílu by měla ověřit hodnotu podle storeAssignmentPolicy
  • [SPARK-40810] [SC-113533][sql] Použijte SparkIllegalArgumentException místo IllegalArgumentException v CreateDatabaseCommand &AlterDatabaseSetLocationCommand
  • [SPARK-40921] [SC-115140][sc-114585][SQL] Přidání klauzule WHEN NOT MATCHED BY SOURCE do MERGE INTO
  • [SPARK-40360] [SC-114965] výjimky UŽ_EXISTUJE a NENÍ_NALEZENO
  • [SPARK-41007] [SC-115085][sql] Přidání chybějícího serializátoru pro java.math.BigInteger
  • [SPARK-40751] [SC-114254][sql] Migrace selhání kontroly typů vysoce řádových funkcí na chybové třídy
  • [SPARK-40248] [SC-114704][sql] K vytvoření filtru Bloom použijte větší počet bitů.
  • [SPARK-41040] [SC-115145][ss] Oprava selhání dotazu streamování samosjednocení při použití funkce readStream.table
  • [SPARK-32380] [SC-114966][sql] Oprava přístupu k tabulce HBase přes Hive ze Sparku
  • [SPARK-40749] [SC-114860][sql] Migrace selhání kontroly typů u generátorů do tříd chyb
  • [SPARK-40925] [SC-114445][sql][SS][warmfix][12.x] Oprava stavového operátoru při zpoždění...
  • [SPARK-40654] [SC-112783] Odstraňte dočasné řádky protokolu
  • [SPARK-40742] [SC-114913][sc-112646][CORE][SQL] Oprava upozornění kompilace Java souvisejících s obecným typem
  • [SPARK-40657] [SC-113642][cherry-pick] Přidání podpory pro třídy Java v Protobu...
  • [SPARK-40898] [SC-113932][sql] Názvy funkcí uvozovek v chybách neshod datových typů
  • [SPARK-40760] [SC-113750][sql] Přesun selhání kontroly typů výrazů intervalů do tříd chyb
  • [SPARK-36114] [SC-113771][sql] Podpora poddotazů s korelovanými nerovnostními predikáty
  • [SPARK-40856] [SC-113738][sql] Aktualizace šablony chyby WRONG_NUM_PARAMS
  • [SPARK-40759] [SC-114251][sql] Přenos selhání kontroly typů časového okna do tříd chyb
  • [SPARK-40750] [SC-113812][sql] Přenést selhání kontroly typů matematických výrazů do tříd chyb
  • [SPARK-40756] [SC-113749][sql] Migrace chyb kontroly typů výrazů typu řetězec do klasifikací chyb
  • [SPARK-40768] [SC-113640][sql] Přesuňte selhání kontroly typů při používání funkce bloom_filter_agg() do kategorií chyb
  • [SPARK-40369] [SC-113402][core][SQL] Migrace selhání kontroly typů volání prostřednictvím reflexe na třídy chyb
  • [SPARK-39445] [SQL] Odebrat okno, pokud jsou windowExpressions prázdné při prořezávání sloupců
  • [SPARK-40761] [SC-113245][sql] Migrace selhání kontroly typu percentilových výrazů na chybové třídy
  • [SPARK-40361] [SC-112789][sql] Migrace selhání kontroly aritmetických typů do chybových tříd
  • [SPARK-40714] [SC-112576][sql] Odebrat PartitionAlreadyExistsException
  • [SPARK-40702] [SC-112437][sql] Oprava specifikací oddílů v PartitionsAlreadyExistException
  • [SPARK-40358] [SC-112631][sql] Přesunout problémy kontroly typů kolekcí na třídy chyb
  • [SPARK-40910] [SC-114259][sql] Nahraďte UnsupportedOperationException s SparkUnsupportedOperationException.
  • [SPARK-39876] [SC-112429][sql] Přidání UNPIVOT do syntaxe SQL
  • [SPARK-39783] [SC-113389][sql] Citovat qualifiedName k opravě zpětných uvozovek pro kandidáty sloupců v chybových zprávách
  • [SPARK-40663] [SC-112520][sql] Přesunout chyby provádění do tříd chyb: _LEGACY_ERROR_TEMP_2026-2282
  • [SPARK-40975] [SC-114555][sql] Přejmenujte třídu _LEGACY_ERROR_TEMP_0021 chyb na UNSUPPORTED_TYPED_LITERAL
  • [SPARK-37935] [SC-114472][sql] Eliminujte samostatná pole dílčích tříd chyb.
  • [SPARK-40944] [SC-114530][sql] Uvolnění omezení řazení pro CREATE TABLE možnosti sloupce
  • [SPARK-40815] [SC-114528][sql] Přidat DelegateSymlinkTextInputFormat jako řešení chyby SymlinkTextInputSplit
  • [SPARK-40933] [SC-114441][sql] Reimplement df.stat. {cov, corr} s integrovanými funkcemi SQL
  • [SPARK-40932] [SC-114439][core] Oprava chybových zpráv pro allGather
  • [SPARK-39312] [SQL] Použít natívní predikát pro Parquet pro propagaci filtru dolů
  • [SPARK-40862] [SC-114352][sql] Podpora neagregovaných poddotazů v rewriteCorrelatedScalarSubquery
  • [SPARK-40963] [SC-114446][sql] Správně nastavit hodnotu nullable v projektu vytvořeném ExtractGenerator
  • [SPARK-40663] [SC-112295][sql] Migrovat chyby provádění do tříd chyb: _LEGACY_ERROR_TEMP_2000-2024
  • [SPARK-40892] [SC-114347][sql][SS] Uvolněte požadavek pravidla window_time – povolte více volání window_time
  • [SPARK-40540] [SC-111639][sql] Migrování kompilačních chyb do tříd chyb: _LEGACY_ERROR_TEMP_1100-1347
  • [SPARK-40924] [SC-114258][sql] Oprava funkce Unhex, když vstup má lichý počet symbolů
  • [SPARK-40821] [SC-113754][sql][CORE][python][SS] Zavedení funkce window_time pro extrakci času události ze sloupce okna
  • [SPARK-40800] [SC-113772][sql] Vždy provádět vložení výrazů v OptimizeOneRowRelationSubquery
  • [SPARK-40900] [SC-114006][sql] Přeimplementovat frequentItems pomocí operací na datovém rámci
  • [SPARK-40735] [SC-114022][sc-112657] Konzistentně vyvolat Bash pomocí /usr/bin/env bash ve skriptech, aby byl kód přenosnější
  • [SPARK-40773] [SC-113091][sql] Refaktoring checkCorrelationsInSubquery
  • [SPARK-40615] [SC-113400][sql] Kontrola nepodporovaných datových typů při odkorelování poddotazů
  • [SPARK-40660] [SC-112293][core][SQL] Přepnutí na XORShiftRandom pro distribuci prvků
  • [SPARK-40540] [SC-113926][sc-111331][SQL] Migrace kompilačních chyb na třídy chyb
  • [SPARK-40551] [SC-113135][sql] Zdroj dat V2: Přidat API pro operace na úrovni řádků na bázi delta
  • [SPARK-39391] [SC-110676][core] Opětovné použití tříd Partitioner
  • [SPARK-40368] [SC-113396][sql] Přenesení selhání kontrol typu Bloomova filtru do tříd chyb
  • [SPARK-39146] [SC-111814][core][SQL] Zavedení lokálního singletonu pro ObjectMapper k opětovnému použití
  • [SPARK-40357] [SC-113786][sc-111352][SQL] Přesun selhání kontroly typů oken do tříd chyb
  • [SPARK-40874] [SC-113756][python] Oprava broadcastů v UDF v Pythonu při povoleném šifrování
  • [SPARK-40359] [SC-113770][sc-111146][SQL] Migrace selhání kontrol typu ve výrazech CSV/JSON do chybových tříd
  • [SPARK-40880] [SC-113764][sql] Reimplement summary s operacemi datového rámce
  • [SPARK-40877] [SC-113763][sql] Reimplementovat crosstab pomocí operací s datovými rámci
  • [SPARK-40382] [SC-113098][sql] Seskupte jedinečné agregační výrazy podle sémanticky ekvivalentních podřízených položek v RewriteDistinctAggregates
  • [SPARK-40826] [SC-113532][ss] Přidání další kontroly souboru přejmenování kontrolního bodu
  • [SPARK-40829] [SC-113426][sql] ULOŽENO JAKO serde v CREATE TABLE LIKE zobrazení nefunguje
  • [SPARK-40844] [SC-113542][ss] Změna výchozí hodnoty konfigurace načítání offsetu pro Kafka.
  • [SPARK-40488] [SC-113568][sc-111160] Nezalamujte výjimky vyvolané při selhání zápisu zdroje dat
  • [SPARK-40560] [SC-113631][sc-111335][SQL] Přejmenujte message na messageTemplate ve STANDARD formátu chyb
  • [SPARK-40618] [SC-113096][sql] Oprava chyby v pravidle MergeScalarSubqueries s vnořenými poddotazy pomocí sledování odkazů
  • [SPARK-40530] [SC-113528][sc-111332][SQL] Přidat API pro vývojáře zaměřené na chyby.
  • [SPARK-40806] [SC-113250][sql] Oprava překlepu: CREATE TABLE –> NAHRADIT TABLE
  • [SPARK-40646] [SC-113379][sql] Oprava vrácení částečných výsledků ve zdroji dat JSON a funkcích JSON
  • [SPARK-40654] [Cherry-pick][sc-112783][SQL] Podpora Protobuf pro Spark - od…
  • [SPARK-40753] [SC-113539][sql] Oprava chyby v testovacím případě pro operaci adresáře katalogu
  • [SPARK-40765] [SC-113056][sql] Optimalizace redundantní operace fs v CommandUtils#calculateSingleLocationSize#getPathSize metodě
  • [SPARK-40114] [ES-479282][r][11.X] Podpora šipky 9.0.0 v SparkR
  • [SPARK-40479] [SC-110935][sql] Migrace chyby neočekávaného typu vstupních dat do třídy chyb
  • [SPARK-40473] [SC-113388][sc-111141][SQL] Migrace chyb při analýze do tříd chyb
  • [SPARK-39853] [SC-111867][core] Podpora profilu prostředků úkolů na úrovni fáze pro samostatný cluster, když je zakázáno dynamické přidělení (backport z PR-47157)
  • [SPARK-40407] [SC-111161][sql] Oprava potenciální nerovnoměrné distribuce dat způsobené df.repartition
  • [SPARK-40425] [SC-110840][sql] DROP TABLE nemusí provádět vyhledávání tabulek.
  • [SPARK-40703] [SC-113242][sql] Zavedení přeskupení na SinglePartition za účelem zlepšení paralelismu
  • [SPARK-40640] [SC-113138][core] SparkHadoopUtil pro nastavení původu možností konfigurace hadoop/hive
  • [SPARK-39062] [11.x][core] Přidejte podporu plánování zdrojů na úrovni fáze pro samostatný cluster
  • [SPARK-33861] [SC-109877] Vrátit změny „[SQL] Zjednodušení podmínky v predikátu“
  • [SPARK-40667] [SC-113136][sql] Přepracování parametrů vstupu dat ze souborů
  • [SPARK-40370] [SC-110677][sql] Kontrola typu migrace selže na chybové třídy v CAST
  • [SPARK-40611] [SC-113105][sql] Zlepšení výkonu setInterval a getInterval pro UnsafeRow
  • [SPARK-40733] [SC-113126][sql] Uspořádejte obsah SERDEPROPERTIES ve výsledku ShowCreateTableAsSerdeCommand do pevného pořadí.
  • [SPARK-40585] [SC-112180][sql] Podpora identifikátorů uzavřených v dvojitých uvozovkách
  • [SPARK-40772] [SC-112992][sql] Vylepšení spark.sql.adaptive.skewJoin.skewedPartitionFactor pro podporu Double hodnot
  • [SPARK-40565] [SC-112417][sql] Nenasdílejte ne deterministické filtry do zdrojů souborů V2.
  • [SPARK-8731] [SC-112784] Beeline nefunguje s možností -e při spuštění na pozadí
  • [SPARK-35242] [SC-111398][sql] Podpora změny výchozí databáze katalogu relací
  • [SPARK-40426] [SC-110672][sql] Vrácení mapy ze SparkThrowable.getMessageParameters
  • [SPARK-40494] [SC-112655][sc-111025][CORE][sql][ML][mllib] Optimalizace výkonu keys.zipWithIndex.toMap vzoru kódu
  • [SPARK-40521] [SC-112430][sql] Vrátí pouze existující oddíly v PartitionsAlreadyExistException z vytvoření oddílu Hive.
  • [SPARK-40705] [SC-112567][sql] Zpracování případu použití proměnlivého pole při převodu řádku na JSON pro Scala 2.13
  • [SPARK-39895] [SC-112590][sql][PYTHON] Podpora poklesu více sloupců
  • [SPARK-40607] [SC-112296][core][SQL][mllib][SS] Odebrání redundantních operací interpolátoru řetězců
  • [SPARK-40420] [SC-112604][sc-110569][SQL] Řazení parametrů chybové zprávy podle názvů ve formátech JSON
  • [SPARK-40403] [SC-110564][sql] Výpočet nebezpečné velikosti pole pomocí dlouhých hodnot, aby se zabránilo záporné velikosti v chybové zprávě
  • [SPARK-40482] [SC-110831][sql] Vrátit zpět SPARK-24544 Print actual failure cause when look up function failed
  • [SPARK-40400] [SC-112555][sc-110397][SQL] Předat parametry chybové zprávy výjimkám jako mapy
  • [SPARK-40628] [SC-112414][sql] Nesdílejte složitou částečně-anti join podmínku prostřednictvím projektu
  • [SPARK-40562] [SC-111455][sql] Přidat spark.sql.legacy.groupingIdWithAppendedUserGroupBy
  • [SPARK-40501] [SC-111333][sql] Přidat PushProjectionThroughLimit pro optimalizátor
  • [SPARK-39200] [SC-111244][core] Umožnění záložního úložiště plně číst obsah
  • [SPARK-38717] [SC-111241][sql] Řešení zachování velikosti písmen v rozvržení segmentů Hive
  • [SPARK-40385] [SC-111123][sql] Oprava interpretované cesty pro konstruktor doprovodného objektu
  • [SPARK-40216] [SC-112413][sql] Extrahujte běžnou ParquetUtils.prepareWrite metodu pro odstranění duplicitních dat v ParquetFileFormat kódu a ParquetWrite
  • [SPARK-40636] [SC-112160][core] Oprava nesprávného protokolu o zbytcích shuffle v BlockManagerDecommissioner
  • [SPARK-40617] [SC-112009] Oprava stavu časování při zpracování položek stageTCMP exekutorMetricsPoller
  • [SPARK-40618] [SC-112046][sql] Oprava chyby v pravidle MergeScalarSubqueries s vnořenými poddotazy
  • [SPARK-40612] [SC-111933][core] Oprava hlavního subjektu používaného pro obnovení tokenu delegování u správců prostředků, kteří nepoužívají YARN
  • [SPARK-40595] [SC-111662][sql] Zlepšení chybové zprávy pro nepoužívané relace CTE
  • [SPARK-40314] [SC-111879][sql][PYTHON] Přidání vazeb pro Scala a Python pro inline a inline_outer
  • [SPARK-40416] [SC-110945][sql] Přesunout chybové zprávy CheckAnalysis poddotazového výrazu tak, aby využívaly nový chybový rámec
  • [SPARK-40318] [SC-111865][sc-109986][SQL] try_avg() by mělo vyvolávat výjimky z jeho podřízených prvků
  • [SPARK-40509] [SC-111644][ss][PYTHON] Přidání příkladu applyInPandasWithState
  • [SPARK-40310] [SC-111329][sc-109842][SQL] try_sum() by měla vyvolat výjimky z podřízeného souboru.
  • [SPARK-40016] [SQL] Odebrání nepotřebné funkce TryEval při implementaci try_sum()
  • [SPARK-40527] [SC-111224][sql] Zachovat názvy polí struktury nebo klíče map ve vytvořené struktuře
  • [SPARK-38098] [SC-111178][python] Přidání podpory pro ArrayType vnořeného typu struktury na převod na základě šipky
  • [SPARK-40324] [SC-111359][sc-110293][SQL] Poskytnutí kontextu dotazu v sadě AnalysisException
  • [SPARK-40492] [SC-111324][ss] Údržba před uvolněním stavového úložiště streamovacího.
  • [SPARK-40487] [SC-111124][sql] Nastavit výchozí join v BroadcastNestedLoopJoinExec spuštěné paralelně
  • [SPARK-40474] [SC-111273][sql] Oprava chování odvozování schématu CSV a analýzy dat u sloupců se smíšenými daty a časovými razítky
  • [SPARK-40508] [SC-111066][sql] Zachází s neznámým dělením jako s unknownPartitioning
  • [SPARK-40496] [SC-111234][sc-111013][SQL] Oprava konfigurací pro řízení "enableDateTimeParsingFallback"
  • [SPARK-40435] [SC-111214][ss][PYTHON] Přidání testovacích sad pro applyInPandasWithState v PySparku
  • [SPARK-40434] [SC-111125][ss][PYTHON] Implementovat applyInPandasWithState v PySparku

Aktualizace údržby

Podívejte se na aktualizace údržby Databricks Runtime 12.0.

Systémové prostředí

  • Operační systém: Ubuntu 20.04.5 LTS
  • Java: Zulu 8.64.0.19-CA-linux64
  • Scala: 2.12.14
  • Python: 3.9.5
  • R: 4.2.2
  • Delta Lake: 2.2.0

Nainstalované knihovny Python

Knihovna Version Knihovna Version Knihovna Version
argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0 asttokens 2.0.5
attrs 21.4.0 zpětný hovor 0.2.0 backports.entry-points-selectable (volitelné vstupní body) 1.2.0
BeautifulSoup4 4.11.1 černý 22.3.0 bělidlo 4.1.0
boto3 1.21.32 botocore 1.24.32 certifikát 2021.10.8
cffi 1.15.0 chardet 4.0.0 nástroj pro normalizaci znakové sady 2.0.4
klikni 8.0.4 kryptografie 3.4.8 cyklista 0.11.0
Cython 0.29.28 dbus-python 1.2.16 debugpy 1.5.1
dekoratér 5.1.1 defusedxml 0.7.1 distlib 0.3.6
vstupní body 0,4 provedení 0.8.3 přehled aspektů 1.0.0
fastjsonschema 2.16.2 filelock 3.8.0 nástroje pro písma 4.25.0
IDNA 3.3 ipykernel 6.15.3 ipython 8.5.0
ipython-genutils 0.2.0 ipywidgets 7.7.2 Jedi 0.18.1
Jinja2 2.11.3 jmespath 0.10.0 joblib 1.1.0
jsonschema 4.4.0 klient Jupyter 6.1.12 jupyter_core 4.11.2
jupyterlab-pygments 0.1.2 JupyterLab widgets 1.0.0 kiwisolver 1.3.2
MarkupSafe 2.0.1 matplotlib 3.5.1 matplotlib-inline 0.1.2
špatné naladění 0.8.4 mypy-extensions 0.4.3 nbclient 0.5.13
nbconvert 6.4.4 nbformat 5.3.0 nest-asyncio 1.5.5
poznámkový blok 6.4.8 numpy (knihovna pro numerické výpočty v Pythonu) 1.21.5 balení 21.3
pandas 1.4.2 pandocfilters 1.5.0 parso 0.8.3
pathspec 0.9.0 bábovka 0.5.2 pexpect 4.8.0
PickleShare 0.7.5 Polštář 9.0.1 pip 21.2.4
platformdirs 2.5.4 plotly 5.6.0 prometheus-client 0.13.1
nástroj "prompt-toolkit" 3.0.20 protobuf 3.19.4 psutil 5.8.0
psycopg2 2.9.3 ptyprocess 0.7.0 pure-eval 0.2.2
pyarrow 7.0.0 pycparser 2.21 Pygments 2.11.2
PyGObject 3.36.0 pyodbc 4.0.32 pyparsing 3.0.4
pyrsistent 0.18.0 python-dateutil 2.8.2 knihovna pytz pro zpracování časových zón v Pythonu 2021.3
pyzmq 22.3.0 požadavky 2.27.1 requests-unixsocket 0.2.0
s3transfer 0.5.0 scikit-learn 1.0.2 SciPy 1.7.3
narozený v moři 0.11.2 Send2Trash 1.8.0 setuptools (nástroj pro vytváření a distribuci Python projektů) 58.0.4
Šest 1.16.0 sítko na polévku 2.3.1 ssh-import-id 5.10
datová hromádka 0.2.0 statsmodels 0.13.2 houževnatost 8.0.1
dokončeno 0.13.1 testovací cesta 0.5.0 threadpoolctl 2.2.0
tokenize-rt 4.2.1 tomli 1.2.2 tornádo 6.1
traitlets 5.1.1 typing_extensions 4.1.1 bezobslužné aktualizace 0,1
urllib3 1.26.9 virtualenv 20.8.0 wcwidth (šířka znaků) 0.2.5
webová kódování 0.5.1 wheel 0.37.0 widgetsnbextension 3.6.1

Nainstalované knihovny jazyka R

Knihovny R byly instalovány ze snímku Microsoft CRAN z 11. 11. 2022.

Knihovna Version Knihovna Version Knihovna Version
šíp 10.0.0 žádost o heslo 1.1 ověřit, že 0.2.1
zpětné portování 1.4.1 báze 4.2.2 base64enc 0,1-3
bit 4.0.4 64bit 4.0.5 objekt blob 1.2.3
bootování 1.3-28 připravovat nápoje 1.0-8 elán 1.1.3
koště 1.0.1 bslib 0.4.1 kašmír 1.0.6
volající 3.7.3 caret 6.0-93 cellranger 1.1.0
cron 2.3-58 třída 7.3-20 CLI 3.4.1
Clipr 0.8.0 hodiny 0.6.1 cluster 2.1.4
codetools 0.2-18 barevný prostor 2.0-3 commonmark 1.8.1
kompilátor 4.2.2 config 0.3.1 cpp11 0.4.3
pastelka 1.5.2 přihlašovací údaje 1.3.2 kroucení 4.3.3
datová tabulka 1.14.4 datové sady 4.2.2 DBI 1.1.3
dbplyr 2.2.1 Popis 1.4.2 devtools 2.4.5
diffobj 0.3.5 hodnota hash 0.6.30 dolní osvětlení 0.4.2
dplyr 1.0.10 dtplyr 1.2.2 e1071 1.7-12
tři tečky 0.3.2 hodnotit 0.18 fanoušci 1.0.3
barvy 2.1.1 Fastmap (rychlé mapování) 1.1.0 fontawesome 0.4.0
pro kočky 0.5.2 foreach 1.5.2 zahraničí 0,8-82
kovárna 0.2.0 fs 1.5.2 budoucnost 1.29.0
budoucnost.použít 1.10.0 kloktání 1.2.1 obecné typy 0.1.3
Gert 1.9.1 ggplot2 3.4.0 gh 1.3.1
gitcreds 0.1.2 glmnet 4.1–4 globální 0.16.1
lepidlo 1.6.2 googledrive 2.0.0 googlesheets4 1.0.1
Gower 1.0.0 Grafika 4.2.2 grDevices 4.2.2
mřížka 4.2.2 gridExtra 2.3 gsubfn 0.7
gtable 0.3.1 ochranná přilba 1.2.0 útočiště 2.5.1
vyšší 0,9 HMS 1.1.2 htmlové nástroje 0.5.3
htmlwidgets (interaktivní HTML prvky) 1.5.4 httpuv 1.6.6 httr 1.4.4
identifikátory 1.0.1 ini 0.3.1 ipred 0.9-13
isoband 0.2.6 Iterátory 1.0.14 jquerylib 0.1.4
jsonlite 1.8.3 KernSmooth 2,23–20 knitr 1,40
značení 0.4.2 později 1.3.0 mřížka 0.20-45
láva 1.7.0 životní cyklus 1.0.3 poslouchej 0.8.0
lubridate 1.9.0 magrittr 2.0.3 Markdown 1.3
Hmotnost 7.3-58 *Matrix* 1.5-1 zapamatujte si 2.0.1
metody 4.2.2 mgcv 1.8-41 mim 0.12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 modelář 0.1.9
munsell 0.5.0 nlme 3.1-160 nnet (neuronová síť) 7.3-18
numDeriv (Numerická derivace) 2016.8 - 1.1 OpenSSL 2.0.4 rovnoběžný 4.2.2
paralelně 1.32.1 pilíř 1.8.1 pkgbuild 1.3.1
pkgconfig 2.0.3 pkgdown 2.0.6 pkgload 1.3.1
plogr 0.2.0 plyr 1.8.7 pochvala 1.0.0
prettyunits 1.1.1 pROC 1.18.0 processx 3.8.0
prodlim 2019.11.13 profvis 0.3.7 pokrok 1.2.2
progressr 0.11.0 promisy 1.2.0.1 proto 1.0.0
proxy 0,4-27 p.s. 1.7.2 purrr 0.3.5
r2d3 0.2.6 R6 2.5.1 ragg 1.2.4
"randomForest" 4.7-1.1 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.9 RcppEigen 0.3.3.9.3
čtenář 2.1.3 readxl 1.4.1 recepty 1.0.3
odvetný zápas 1.0.1 odvetný zápas 2 2.1.2 dálková ovládání 2.4.2
reprodukovatelný příklad 2.0.2 reshape2 1.4.4 rlang 1.0.6
rmarkdown 2.18 RODBC 1.3-19 roxygen2 7.2.1
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-11
RSQLite 2.2.18 rstudioapi 0,14 rversions 2.1.2
rvest 1.0.3 Sass 0.4.2 škálování 1.2.1
selektor 0.4-2 informace o sezení 1.2.2 obrazec 1.4.6
lesklý 1.7.3 sourcetools 0.1.7 sparklyr 1.7.8
SparkR 3.3.1 prostorový 7.3-11 spline 4.2.2
sqldf 0.4-11 SQUAREM 2021.1 statistické údaje 4.2.2
Stats4 4.2.2 řetězce 1.7.8 stringr 1.4.1
přežití 3.4-0 sys 3.4.1 systemfonts 1.0.4
tcltk 4.2.2 testthat (nástroj pro testování) 3.1.5 formátování textu 0.3.6
tibble 3.1.8 tidyr 1.2.1 tidyselect 1.2.0
tidyverse 1.3.2 změna času 0.1.1 datum a čas 4021.106
tinytex 0.42 nářadí 4.2.2 tzdb 0.3.0
ověřovač URL 1.0.1 použij tohle 2.1.6 utf8 1.2.2
pomocné funkce 4.2.2 Univerzální jednoznačný identifikátor (UUID) 1.1-0 vctrs 0.5.0
viridisLite 0.4.1 vrrrm 1.6.0 Waldo 0.4.0
hmatový chlup 0,4 (v případě, že je možné poskytnout smysl slova "withr", by bylo možné ho přeložit) 2.5.0 xfun 0.34
xml2 1.3.3 xopen 1.0.0 xtable 1.8-4
yaml 2.3.6 komprimovaný soubor zip 2.2.2

Nainstalované Java a knihovny Scala (verze clusteru Scala 2.12)

ID skupiny Identifikátor artefaktu Version
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client (klient Amazon Kinesis) 1.12.0
com.amazonaws aws-java-sdk Automatické škálování 1.12.189
com.amazonaws aws-java-sdk-cloudformation 1.12.189
com.amazonaws aws-java-sdk-cloudfront 1.12.189
com.amazonaws aws-java-sdk-cloudhsm 1.12.189
com.amazonaws „aws-java-sdk-cloudsearch“ 1.12.189
com.amazonaws aws-java-sdk-cloudtrail 1.12.189
com.amazonaws aws-java-sdk-cloudwatch 1.12.189
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.189
com.amazonaws aws-java-sdk-codedeploy (Balíček AWS SDK pro Java - CodeDeploy) 1.12.189
com.amazonaws aws-java-sdk-cognitoidentity 1.12.189
com.amazonaws aws-java-sdk-cognitosync 1.12.189
com.amazonaws aws-java-sdk-config (konfigurace balíčku SDK pro Javu od AWS) 1.12.189
com.amazonaws aws-java-sdk-core 1.12.189
com.amazonaws aws-java-sdk-datapipeline 1.12.189
com.amazonaws aws-java-sdk-directconnect 1.12.189
com.amazonaws aws-java-sdk-directory 1.12.189
com.amazonaws aws-java-sdk-dynamodb 1.12.189
com.amazonaws aws-java-sdk-ec2 1.12.189
com.amazonaws aws-java-sdk-ecs 1.12.189
com.amazonaws aws-java-sdk-efs 1.12.189
com.amazonaws aws-java-sdk-elasticache 1.12.189
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.189
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.189
com.amazonaws aws-java-sdk-elastictranscoder 1.12.189
com.amazonaws aws-java-sdk-emr 1.12.189
com.amazonaws aws-java-sdk-glacier (AWS Java SDK pro Glacier) 1.12.189
com.amazonaws aws-java-sdk-glue (balíček pro vývoj softwaru v Java od AWS, určený pro Glue služby) 1.12.189
com.amazonaws aws-java-sdk-iam 1.12.189
com.amazonaws aws-java-sdk-importexport 1.12.189
com.amazonaws aws-java-sdk-kinesis 1.12.189
com.amazonaws aws-java-sdk-kms 1.12.189
com.amazonaws aws-java-sdk-lambda 1.12.189
com.amazonaws aws-java-sdk-logs 1.12.189
com.amazonaws aws-java-sdk-strojové učení 1.12.189
com.amazonaws aws-java-sdk-opsworks 1.12.189
com.amazonaws aws-java-sdk-rds 1.12.189
com.amazonaws aws-java-sdk-redshift 1.12.189
com.amazonaws aws-java-sdk-route53 1.12.189
com.amazonaws aws-java-sdk-s3 1.12.189
com.amazonaws aws-java-sdk-ses 1.12.189
com.amazonaws aws-java-sdk-simpledb 1.12.189
com.amazonaws aws-java-sdk-simpleworkflow 1.12.189
com.amazonaws aws-java-sdk-sns 1.12.189
com.amazonaws aws-java-sdk-sqs 1.12.189
com.amazonaws aws-java-sdk-ssm 1.12.189
com.amazonaws aws-java-sdk-storagegateway (balíček nástrojů pro přístup k AWS Storage Gateway) 1.12.189
com.amazonaws aws-java-sdk-sts 1.12.189
com.amazonaws podpora AWS Java SDK 1.12.189
com.amazonaws knihovny AWS Java SDK SWF 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.189
com.amazonaws jmespath-java 1.12.189
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics datový proud 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware technologie kryo-stínění 4.0.2
com.esotericsoftware Minlog 1.3.0
com.fasterxml spolužák 1.3.4
com.fasterxml.jackson.core jackson-annotations (poznámky Jackson) 2.13.4
com.fasterxml.jackson.core jackson-core 2.13.4
com.fasterxml.jackson.core Jackson-databind 2.13.4.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.13.4
com.fasterxml.jackson.datatype jackson-datatype-joda 2.13.4
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.13.4
com.fasterxml.jackson.module jackson-module-paranamer 2.13.4
com.fasterxml.jackson.module jackson-module-scala_2.12 2.13.4
com.github.ben-manes.kofein kofein 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib jádro 1.1.2
com.github.fommil.netlib Nativní odkaz pro Javu 1.1
com.github.fommil.netlib native_ref - nativní prvky javy 1.1
com.github.fommil.netlib nativní_systém-java 1.1
com.github.fommil.netlib nativní systém java-native 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib – nativní systém – linux – x86_64 – nativy 1.1
com.github.luben zstd-jni 1.5.2-1
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson Gson 2.8.6
com.google.crypto.tink Cink 1.6.1
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava guave 15,0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.0.204
com.helger profiler 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.VYDÁNÍ
com.lihaoyi zdrojový_kód_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk (software development kit pro úložiště dat Azure Data Lake) 2.3.9
com.ning compress-lzf (komprimační algoritmus LZF) 1.1
com.sun.mail javax.mail 1.5.2
com.tdunning JSON 1.8
com.thoughtworks.paranamer Paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app-2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.0
com.univocity univocity-parsers (nástroj pro analýzu dat) 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1.15
společné sbírky společné sbírky 3.2.2
commons-dbcp commons-dbcp 1.4
Nahrávání souborů v Commons Nahrávání souborů v Commons 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.11.0
commons-lang commons-lang 2.6
commons-logging (nástroj pro záznamy) commons-logging (nástroj pro záznamy) 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 2.2.1
dev.ludovic.netlib Blas 2.2.1
dev.ludovic.netlib LAPACK 2.2.1
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift vzduchový kompresor 0.21
io.delta delta-sharing-spark_2.12 0.5.2
io.dropwizard.metrics jádro metrik 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics metriky – kontroly stavu 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics Metrics-JMX 4.1.1
io.dropwizard.metrics Metriky-json 4.1.1
io.dropwizard.metrics metriky pro JVM 4.1.1
io.dropwizard.metrics metrikové servlety 4.1.1
io.netty netty-all 4.1.74.Final
io.netty netty-buffer 4.1.74.Final
io.netty netty-codec 4.1.74.Final
io.netty netty-common 4.1.74.Final
io.netty netty-handler 4.1.74.Final
io.netty netty-resolver 4.1.74.Final
io.netty netty-tcnative-classes (softwarová knihovna) 2.0.48.Final
io.netty netty-transport 4.1.74.Final
io.netty netty-transport-classes-epoll 4.1.74.Final
io.netty netty-transport-classes-kqueue 4.1.74.Final
io.netty netty-transport-native-epoll-linux-aarch_64 4.1.74.Final
io.netty netty-transport-native-epoll-linux-x86_64 4.1.74.Final
io.netty netty-transport-native-kqueue-osx-aarch_64 4.1.74.Final
io.netty netty-transport-native-kqueue-osx-x86_64 4.1.74.Final
io.netty netty-transport-native-unix-common 4.1.74.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleklient_obecný 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx kolektor 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktivace 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction API pro transakce 1.1
javax.xml.bind jaxb-api 2.2.11
Javolution Javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.13
net.java.dev.jna jna 5.8.0
net.razorvine nakládačka 1,2
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
síť.sněhová vločka snowflake-ingest-sdk 0.9.6
síť.sněhová vločka snowflake-jdbc 3.13.22
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr runtime 3.5.2
org.antlr antlr4-runtime 4.8
org.antlr StringTemplate 3.2.1
org.apache.ant mravenec 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant Ant launcher 1.9.2
org.apache.arrow šipkový formát 7.0.0
org.apache.arrow jádro šipkové paměti 7.0.0
org.apache.arrow šipka-paměť-netty 7.0.0
org.apache.arrow šipkový vektor 7.0.0
org.apache.avro Avro 1.11.0
org.apache.avro avro-ipc 1.11.0
org.apache.avro avro-mapred 1.11.0
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress (softwarová knihovna pro kompresi dat) 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons Commons-text (textové nástroje) 1.10.0
org.apache.kurátor kurátor-klient 2.13.0
org.apache.kurátor kurátorský rámec 2.13.0
org.apache.kurátor kurátorovy recepty 2.13.0
org.apache.derby fotbalové derby 10.14.2.0
org.apache.hadoop hadoop-klient-API 3.3.4-databricks
org.apache.hadoop běhové prostředí klienta Hadoop 3.3.4
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc (JDBC ovladač pro Apache Hive) 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive Hive-shims 2.3.9
org.apache.hive rozhraní pro úložiště Hive 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims plánovač hive-shims 2.3.9
org.apache.httpcomponents httpclient 4.5.13
org.apache.httpcomponents httpcore 4.4.14
org.apache.ivy břečťan 2.5.0
org.apache.logging.log4j log4j-1.2-api 2.18.0
org.apache.logging.log4j log4j-api 2.18.0
org.apache.logging.log4j log4j-core 2.18.0
org.apache.logging.log4j log4j-slf4j-impl 2.18.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.7.6
org.apache.orc orc-mapreduce 1.7.6
org.apache.orc orčí podložky 1.7.6
org.apache.parquet parquet-column 1.12.3-databricks-0001
org.apache.parquet parquet-common 1.12.3-databricks-0001
org.apache.parquet parquet-encoding 1.12.3-databricks-0001
org.apache.parquet parquet-format-structures 1.12.3-databricks-0001
org.apache.parquet parquet-hadoop 1.12.3-databricks-0001
org.apache.parquet parquet-jackson 1.12.3-databricks-0001
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-shaded 4.20
org.apache.yetus poznámky pro publikum 0.13.0
org.apache.zookeeper ošetřovatel zvířat v zoo 3.6.2
org.apache.zookeeper zookeeper-jute 3.6.2
org.checkerframework checker-qual 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino společný kompilátor 3.0.16
org.codehaus.janino Janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms (framework pro práci s relačními databázemi) 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.46.v20220331
org.eclipse.jetty pokračování Jetty 9.4.46.v20220331
org.eclipse.jetty jetty-http 9.4.46.v20220331
org.eclipse.jetty jetty-io 9.4.46.v20220331
org.eclipse.jetty jetty-jndi 9.4.46.v20220331
org.eclipse.jetty Jetty-plus 9.4.46.v20220331
org.eclipse.jetty proxy pro službu Jetty 9.4.46.v20220331
org.eclipse.jetty bezpečnost Jetty 9.4.46.v20220331
org.eclipse.jetty jetty-server 9.4.46.v20220331
org.eclipse.jetty jetty-servlet 9.4.46.v20220331
org.eclipse.jetty jetty-servlets 9.4.46.v20220331
org.eclipse.jetty jetty-util 9.4.46.v20220331
org.eclipse.jetty jetty-util-ajax 9.4.46.v20220331
org.eclipse.jetty Jetty-webová aplikace 9.4.46.v20220331
org.eclipse.jetty jetty-xml 9.4.46.v20220331
org.eclipse.jetty.websocket WebSocket API 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-klient 9.4.46.v20220331
org.eclipse.jetty.websocket websocket – běžné 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-server 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-servlet 9.4.46.v20220331
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-lokátor 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 Vyhledávač zdrojů OSGi 1.0.3
org.glassfish.hk2.external aopalliance-přebaleno 2.6.1
org.glassfish.hk2.external jakarta.inject (pokud je to potřeba, přidejte vysvětlení nebo typický český termín v závorce) 2.6.1
org.glassfish.jersey.containers jersey-container-servlet (nástroj pro zpracování požadavků v Java EE) 2.36
org.glassfish.jersey.containers jersey-container-servlet-jádro 2.36
org.glassfish.jersey.core jersey-client 2.36
org.glassfish.jersey.core společný dres 2.36
org.glassfish.jersey.core Jersey-server (aplikační server frameworku Jersey) 2.36
org.glassfish.jersey.inject jersey-hk2 2.36
org.hibernate.validator Hibernate Validator 6.1.0.Final
org.javassist Javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains anotace 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mariadb.jdbc MariaDB Java klient 2.7.4
org.mlflow mlflow-spark 1.27.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.3.3
org.roaringbitmap RoaringBitmap 0.9.25
org.roaringbitmap vymezovací pásky 0.9.25
org.rocksdb rocksdbjni 6.24.2
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.14
org.scala-lang scala-library_2.12 2.12.14
org.scala-lang scala-reflect_2.12 2.12.14
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt testovací rozhraní 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1,2
org.scalanlp breeze_2.12 1,2
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.36
org.slf4j jul-to-slf4j 1.7.36
org.slf4j slf4j-api 1.7.36
org.spark-project.spark nepoužitý 1.0.0
org.threeten threeten-extra 1.5.0
org.tukaani xz 1.8
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1,24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1
  • Last updated on