Condividi tramite

Databricks Runtime 12.0 (EoS)

Annotazioni

Il supporto per questa versione di Databricks Runtime è terminato. Per la data di fine del supporto, vedere Fine del supporto e cronologia di fine vita. Per tutte le versioni supportate di Databricks Runtime, vedere note di rilascio di Databricks Runtime: versioni e compatibilità.

Le note sulla versione seguenti forniscono informazioni su Databricks Runtime 12.0, basate su Apache Spark 3.3.1.

Databricks ha rilasciato questa versione nel dicembre 2022.

Nuove funzionalità e miglioramenti

L'I/O predittivo è in disponibilità generale

L'I/O predittivo è ora disponibile a livello generale. Per altre informazioni, vedere Informazioni sulle operazioni di I/O predittive.

Photon writer supporta la compressione zstd

Il writer nativo photon ora supporta il codec di compressione zstd quando zstd è abilitato impostandolo tramite spark.sql.parquet.compression.codeczstd.

Supporto per il profilo di risorse delle attività a livello di fase per i cluster autonomi

È ora possibile usare la pianificazione a livello di fase nei cluster autonomi quando l'allocazione dinamica è disabilitata. Per usare questa funzionalità, specificare le risorse dell'attività con ResourceProfileBuilder per ogni fase.

Supporto SQL per la sovrascrittura selettiva con REPLACE WHERE

È ora possibile sovrascrivere in modo selettivo i dati corrispondenti a un'espressione arbitraria in una tabella Delta usando il modello seguente.

INSERT INTO table_name REPLACE WHERE predicate append_relation

Vedere Sovrascrittura selettiva arbitraria con replaceWhere.

Le filigrane sono ora supportate in SQL

È ora possibile specificare filigrane temporali sia nell'interfaccia SQL DLT che nelle query SQL sui DataFrame di streaming. Vedere la clausola WATERMARK.

Profilatura della memoria PySpark

La profilatura della memoria è ora abilitata per le funzioni pySpark definite dall'utente. Vengono fornite informazioni sull'incremento della memoria, sull'utilizzo della memoria e sul numero di occorrenze per ogni riga di codice in una funzione definita dall'utente.

Potatura dinamica per DELETE e UPDATE

Quando si usa il calcolo DELETE abilitato per Photon e UPDATE ora si usa l'eliminazione dinamica di file e partizioni in cui migliora le prestazioni. Ad esempio, l'eliminazione dinamica è abilitata quando viene usata una tabella di origine più piccola per aggiornare o eliminare righe in una tabella più grande.

Metriche di eliminazione a livello di riga per le operazioni del linguaggio di manipolazione dei dati partizionate

Con i predicati partizionati, gli utenti possono ora controllare il numero di righe eliminate durante l'esecuzione di operazioni DML (Data Manipulation Language), ad esempio DELETE, TRUNCATEe replaceWhere.

Correzioni di bug

È stato risolto un problema relativo all'analisi JSON nel caricatore automatico in cui tutte le colonne venivano lasciate come stringhe. In precedenza, cloudFiles.inferColumnTypes non era impostato o impostato su false e l'oggetto JSON conteneva oggetti annidati.

Aggiornamenti della libreria

  • Librerie di Python aggiornate:
    • argon2-cffi da 20.1.0 a 21.3.0
    • attrs da 21.2.0 a 21.4.0
    • backports.entry-points-selectable da versione 1.1.1 a versione 1.2.0
    • scolorire da 4.0.0 a 4.1.0
    • boto3 da 1.21.18 a 1.21.32
    • botocore da 1.24.18 a 1.24.32
    • cffi da 1.14.6 a 1.15.0
    • fare clic da 8.0.3 a 8.0.4
    • cycler da 0.10.0 a 0.11.0
    • Cython da 0.29.24 a 0.29.28
    • debugpy da 1.4.1 a 1.5.1
    • decorator da 5.1.0 a 5.1.1
    • punti di ingresso da 0.3 a 0.4
    • idna da 3.2 a 3.3
    • Aggiornamento di ipykernel dalla versione 6.12.1 alla versione 6.15.3
    • ipython da 7.32.0 a 8.5.0
    • ipywidgets dalla versione 7.7.0 alla versione 7.7.2
    • jedi da 0.18.0 a 0.18.1
    • Aggiornamento di joblib dalla versione 1.0.1 alla versione 1.1.0
    • jsonschema da 3.2.0 a 4.4.0
    • kiwisolver da 1.3.1 a 1.3.2
    • matplotlib da 3.4.3 a 3.5.1
    • nbclient da 0.5.3 a 0.5.13
    • Aggiornamento di nbconvert dalla versione 6.1.0 alla versione 6.4.4
    • nbformat da 5.1.3 a 5.3.0
    • nest-asyncio da 1.5.1 a 1.5.5
    • notebook dalla versione 6.4.5 alla versione 6.4.8
    • numpy da 1.20.3 a 1.21.5
    • imballaggio da 21.0 a 21.3
    • pandas da 1.3.4 a 1.4.2
    • pandocfilters da 1.4.3 a 1.5.0
    • parso da 0.8.2 a 0.8.3
    • Cuscino da 8.4.0 a 9.0.1
    • platformdirs dalla versione 2.5.2 alla versione 2.5.4
    • plotly dalla versione 5.9.0 alla versione 5.6.0
    • prometheus-client da 0.11.0 a 0.13.1
    • protobuf da 4.21.5 a 3.19.4
    • pycparser da 2.20 a 2.21
    • Pygments da 2.10.0 a 2.11.2
    • Aggiornamento di pyodbc dalla versione 4.0.31 alla versione 4.0.32
    • Aggiornamento pyzmq dalla versione 22.2.1 alla versione 22.3.0
    • richieste dalla versione 2.26.0 alla versione 2.27.1
    • s3transfer dalla versione 0.5.2 alla 0.5.0
    • scikit-learn dalla versione 0.24.2 alla versione 1.0.2
    • scipy da 1.7.1 a 1.7.3
    • statsmodels da 0.12.2 a 0.13.2
    • terminado da 0.9.4 a 0.13.1
    • tomli da 2.0.1 a 1.2.2
    • traitlets da 5.1.0 a 5.1.1
    • urllib3 da 1.26.7 a 1.26.9
    • "widgetsnbextension" da 3.6.0 a 3.6.1
  • Librerie R aggiornate:
    • Versione base da 4.1.3 a 4.2.2
    • aggiornamento da 1.0-7 a 1.0-8
    • bslib da 0.4.0 a 0.4.1
    • callr dalla versione 3.7.2 alla 3.7.3
    • chron da 2.3-57 a 2.3-58
    • cli da 3.3.0 a 3.4.1
    • cluster dalla versione 2.1.3 alla versione 2.1.4
    • CommonMark dalla versione 1.8.0 alla 1.8.1
    • compilatore da 4.1.3 a 4.2.2
    • cpp11 da 0.4.2 a 0.4.3
    • crayon da 1.5.1 a 1.5.2
    • curl da 4.3.2 a 4.3.3
    • data.table da 1.14.2 a 1.14.4
    • set di dati da 4.1.3 a 4.2.2
    • descrizione da 1.4.1 a 1.4.2
    • Aggiornamento di devtools dalla versione 2.4.4 alla versione 2.4.5
    • digest da 0.6.29 a 0.6.30
    • e1071 da 1.7-11 a 1.7-12
    • valutare da 0.16 a 0.18
    • Aggiornamento di fontawesome da 0.3.0 a 0.4.0
    • aggiornamento futuro dalla versione 1.28.0 alla versione 1.29.0
    • future.apply dalla versione 1.9.1 alla versione 1.10.0
    • gargle da 1.2.0 a 1.2.1
    • gert da 1.8.0 a 1.9.1
    • ggplot2 da 3.3.6 a 3.4.0
    • gh da 1.3.0 a 1.3.1
    • gitcreds dalla versione 0.1.1 alla versione 0.1.2
    • grafica da 4.1.3 a 4.2.2
    • grDevices dalla versione 4.1.3 alla versione 4.2.2
    • griglia da 4.1.3 a 4.2.2
    • httpuv da 1.6.5 a 1.6.6
    • isoband da 0.2.5 a 0.2.6
    • jsonlite da 1.8.0 a 1.8.3
    • lava versioni da 1.6.10 a 1.7.0
    • ciclo di vita da 1.0.1 a 1.0.3
    • lubridate da 1.8.0 a 1.9.0
    • markdown da 1.1 a 1.3
    • MASS da 7.3-56 a 7.3-58
    • Matrice da 1.4-1 a 1.5-1
    • metodi da 4.1.3 a 4.2.2
    • mgcv da 1,8-40 a 1,8-41
    • nlme da 3.1-157 a 3.1-160
    • nnet da 7.3-17 a 7.3-18
    • openssl dalla versione 2.0.2 alla versione 2.0.4
    • parallelo da 4.1.3 a 4.2.2
    • pkgload da 1.3.0 a 1.3.1
    • processx da 3.7.0 a 3.8.0
    • ps da 1.7.1 a 1.7.2
    • purrr da 0.3.4 a 0.3.5
    • ragg da 1.2.2 a 1.2.4
    • RcppEigen da 0.3.3.9.2 a 0.3.3.9.3
    • readr dalla versione 2.1.2 alla versione 2.1.3
    • ricette da 1.0.1 a 1.0.3
    • rlang da 1.0.5 a 1.0.6
    • rmarkdown da 2.16 a 2.18
    • rpart da 4.1.16 a 4.1.19
    • RSQLite da 2.2.16 a 2.2.18
    • brillante da 1.7.2 a 1.7.3
    • SparkR dalla versione 3.3.0 alla versione 3.3.1
    • splines dalla versione 4.1.3 alla versione 4.2.2
    • statistiche da 4.1.3 a 4.2.2
    • stats4 da 4.1.3 a 4.2.2
    • sys dalla versione 3.4 alla versione 3.4.1
    • tcltk da 4.1.3 a 4.2.2
    • testthat da 3.1.4 a 3.1.5
    • tidyr da 1.2.0 a 1.2.1
    • tidyselect da 1.1.2 a 1.2.0
    • timeDate da 4021.104 a 4021.106
    • tinytex da 0,41 a 0,42
    • strumenti da 4.1.3 a 4.2.2
    • utils dalla versione 4.1.3 alla versione 4.2.2
    • vctrs da 0.4.1 a 0.5.0
    • vroom da 1.5.7 a 1.6.0
    • xfun da 0.32 a 0.34
    • yaml da 2.3.5 a 2.3.6
    • zip da 2.2.0 a 2.2.2
  • Librerie Java aggiornate:
    • com.fasterxml.jackson.core.jackson-databind da 2.13.4 a 2.13.4.2
    • org.apache.parquet.parquet-column da 1.12.0-databricks-0007 a 1.12.3-databricks-0001
    • org.apache.parquet-common da 1.12.0-databricks-0007 a 1.12.3-databricks-0001
    • org.apache.parquet.parquet-encoding da 1.12.0-databricks-0007 a 1.12.3-databricks-0001
    • org.apache.parquet-format-structures da 1.12.0-databricks-0007 a 1.12.3-databricks-0001
    • org.apache.parquet.parquet-hadoop da 1.12.0-databricks-0007 a 1.12.3-databricks-0001
    • org.apache.parquet-jackson da 1.12.0-databricks-0007 a 1.12.3-databricks-0001
    • org.apache.yetus.audience-annotations da 0.5.0 a 0.13.0

Apache Spark

Databricks Runtime 12.0 include Apache Spark 3.3.1. Questa versione include tutte le correzioni e i miglioramenti di Spark inclusi in Databricks Runtime 11.3 LTS (EoS), nonché le correzioni di bug e i miglioramenti aggiuntivi seguenti apportati a Spark:

  • [SPARK-40844] [SC-116996][12.x][12.0][12.0.0] Ripristinare "[SC-113542][ss] Capovolgere il valore predefinito della configurazione di recupero offset Kafka"
  • [SPARK-40646] [SC-116061] Annullare la modifica “[SC-113379][sql] Correzione della restituzione di risultati parziali nelle funzioni JSON e origine dati JSON”
  • [SPARK-41195] [SC-116305][sql] Supportare PIVOT/UNPIVOT con elementi figli join
  • [SPARK-41178] [SC-116139][sql] Correzione della precedenza della regola del parser tra JOIN e virgola
  • [SPARK-41072] [SC-116140][sc-116044][SC-115852][sql][SS] Aggiungere la classe STREAM_FAILED di errore a StreamingQueryException
  • [SPARK-40921] Ripristinare "[SC-115140][sc-114585][SQL] Aggiungere la clausola WHEN NOT MATCHED BY SOURCE a MERGE INTO
  • [SPARK-37980] [SC-115758] [SQL] Estendere la colonna METADATA per supportare gli indici di riga per i file Parquet
  • [SPARK-41055] [SC-115582][sql] Rinomina _LEGACY_ERROR_TEMP_2424 in GROUP_BY_AGGREGATE
  • [SPARK-41101] [SC-115849][python][PROTOBUF] Supporto del nome della classe messaggio per PYSPARK-PROTOBUF
  • [SPARK-40956] [SC-115867] Equivalente SQL per il comando di sovrascrittura del dataframe
  • [SPARK-41095] [SC-115659][sql] Trasformare gli operatori irrisolti in errori interni
  • [SPARK-41144] [SC-115866][sql] Hint non risolto non deve causare errori di query
  • [SPARK-41137] [SC-115858][sql] Rename LATERAL_JOIN_OF_TYPE to INVALID_LATERAL_JOIN_TYPE
  • [SPARK-40998] [SC-114754][sql] Rinominare la classe di errore _LEGACY_ERROR_TEMP_0040 in INVALID_IDENTIFIER
  • [SPARK-41015] [SC-115130][sql][PROTOBUF] Controllo nullità UnitTest per il generatore di dati
  • [SPARK-40769] [SC-114923][core][SQL] Spostare gli errori di controllo dei tipi delle espressioni di aggregazione in classi di errore
  • [SPARK-41043] [SC-115183][sql] Rinominare la classe _LEGACY_ERROR_TEMP_2429 di errore in NUM_COLUMNS_MISMATCH
  • [SPARK-40777] [SC-114855][sql][PROTOBUF] Supporto per l'importazione protobuf e spostamento di classi di errore.
  • [SPARK-41019] [SC-114987][sql] Fornire un contesto di query a failAnalysis()
  • [SPARK-41027] [SC-115131][sql] Usare UNEXPECTED_INPUT_TYPE anziché MAP_FROM_ENTRIES_WRONG_TYPE
  • [SPARK-40476] [SC-115868][sc-111163][ML][sql] Ridurre le dimensioni dello shuffle di ALS
  • [SPARK-41134] [SC-115851][sql] Miglioramento del messaggio di errore per gli errori interni
  • [SPARK-37980] Ripristinare " [SQL] Estendere la colonna METADATA per supportare gli indici di riga per i file Parquet
  • [SPARK-41109] [SC-115788][sql] Rinominare la classe di errore da _LEGACY_ERROR_TEMP_1216 a INVALID_LIKE_PATTERN
  • [SPARK-40984] [SC-115844][core][SQL] Usare NON_FOLDABLE_INPUT anziché FRAME_LESS_OFFSET_WITHOUT_FOLDABLE
  • [SPARK-41029] [SC-115828][sql] Ottimizzare l'uso del costruttore di GenericArrayData per Scala 2.13
  • [SPARK-40697] [SC-113648][sql] Aggiungere spaziatura char lato lettura per coprire i file di dati esterni
  • [SPARK-40978] [SC-114574][sql] Migrare senza contesto su classi di errore
  • [SPARK-40663] [SC-114586][sql] Migrare gli errori di esecuzione nelle classi di errore: _LEGACY_ERROR_TEMP_2251-2275
  • [SPARK-38959] [SC-115672][sc-112707][SQL] DS V2: Supporto del filtro dei gruppi di runtime nei comandi a livello di riga
  • [SPARK-40372] [SC-115668][sql] Trasferire i problemi dei controlli del tipo array nelle classi di errore
  • [SPARK-41038] [SC-115371][sql] Rinomina MULTI_VALUE_SUBQUERY_ERROR in SCALAR_SUBQUERY_TOO_MANY_ROWS
  • [SPARK-40965] [SC-114443][sql] Rinominare la classe di errore _LEGACY_ERROR_TEMP_1208 in FIELD_NOT_FOUND
  • [SPARK-40748] [SC-114696][sql] Eseguire la migrazione degli errori di controllo dei tipi di condizioni nelle classi di errore
  • [SPARK-40371] [SC-114557][sql] Migrare gli errori di controllo dei tipi di NthValue e NTile nelle classi di errore
  • [SPARK-41092] [SC-115547][sql] Non usare l'identificatore per corrispondere alle unità di intervallo
  • [SPARK-41009] [SC-115360][sql] Rinominare la classe di errore _LEGACY_ERROR_TEMP_1070 in LOCATION_ALREADY_EXISTS
  • [SPARK-37980] [SQL] Estendere la colonna METADATA per supportare gli indici di riga per i file Parquet
  • [SPARK-40967] [SC-114448][sql] Eseguire la migrazione failAnalysis() alle classi di errore
  • [SPARK-34265] [SC-115486][sc-113788][PYTHON][sql] Strumentare le UDF Python con metriche SQL
  • [SPARK-41012] [SC-114873][sql] Rename _LEGACY_ERROR_TEMP_1022 to ORDER_BY_POS_OUT_OF_RANGE
  • [SPARK-41042] [SC-115142][sql] Rinomina PARSE_CHAR_MISSING_LENGTH in DATATYPE_MISSING_SIZE
  • [SPARK-40752] [SC-114442][sql] Migrare i fallimenti dei controlli di tipo delle espressioni varie nelle classi di errore
  • [SPARK-37945] [SC-115534][sql][CORE] Usare classi di errore negli errori di esecuzione di operazioni aritmetiche
  • [SPARK-40374] [SC-114705][sql] Eseguire la migrazione degli errori di controllo dei tipi dei creatori di tipi nelle classi di errore
  • [SPARK-41056] [SC-115354][r] Correzione del nuovo comportamento di R_LIBS_SITE introdotto in R 4.2
  • [SPARK-41041] [SC-115357][sql] Integrazione _LEGACY_ERROR_TEMP_1279 in TABLE_OR_VIEW_ALREADY_EXISTS
  • [SPARK-40663] [SC-114852][sql] Trasferire gli errori di esecuzione nelle categorie di errori: _LEGACY_ERROR_TEMP_2201-2225
  • [SPARK-41020] [SC-114984][sql] Rinominare la classe di errore _LEGACY_ERROR_TEMP_1019 in STAR_GROUP_BY_POS
  • [SPARK-41035] [SC-115233][sql] Non modificare i figli piegabili delle funzioni aggregate in RewriteDistinctAggregates
  • [SPARK-39778] [SC-114353][sql] Migliorare classi di errore e messaggi
  • [SPARK-40798] [SC-113782][sql] Alter partitione dovrebbe verificare che il valore segua storeAssignmentPolicy
  • [SPARK-40810] [SC-113533][sql] Usare SparkIllegalArgumentException anziché IllegalArgumentException in CreateDatabaseCommand & AlterDatabaseSetLocationCommand
  • [SPARK-40921] [SC-115140][sc-114585][SQL] Aggiungere la clausola WHEN NOT MATCHED BY SOURCE a MERGE INTO
  • [SPARK-40360] [SC-114965] eccezioni ALREADY_EXISTS e NOT_FOUND
  • [SPARK-41007] [SC-115085][sql] Aggiungere serializzatore mancante per java.math.BigInteger
  • [SPARK-40751] [SC-114254][sql] Eseguire la migrazione degli errori di controllo dei tipi di funzioni di ordine elevato nelle classi di errore
  • [SPARK-40248] [SC-114704][sql] Usare un numero maggiore di bit per compilare il filtro Bloom
  • [SPARK-41040] [SC-115145][ss] Correzione del fallimento della query di streaming self-union quando si usa readStream.table
  • [SPARK-32380] [SC-114966][sql] Correzione dell'accesso alla tabella HBase tramite Hive da Spark
  • [SPARK-40749] [SC-114860][sql] Migrare gli errori di controllo dei tipi dei generatori nelle classi di errore
  • [SPARK-40925] [SC-114445][sql][SS][warmfix][12.x] Correzione dell'operatore con stato in ritardo...
  • [SPARK-40654] [SC-112783] Rimuovere le righe di log temporanee
  • [SPARK-40742] [SC-114913][sc-112646][CORE][sql] Correzione degli avvisi di compilazione Java correlati al tipo generico
  • [SPARK-40657] [SC-113642][cherry-pick] Aggiungere il supporto per le classi Java in Protob...
  • [SPARK-40898] [SC-113932][sql] Nominare i nomi delle funzioni tra virgolette negli errori di mancata corrispondenza del tipo di dati
  • [SPARK-40760] [SC-113750][sql] Eseguire la migrazione degli errori di controllo dei tipi di espressioni di intervallo nelle classi di errore
  • [SPARK-36114] [SC-113771][sql] Supporta sottoquery con predicati non di uguaglianza correlati
  • [SPARK-40856] [SC-113738][sql] Aggiornare il modello di errore di WRONG_NUM_PARAMS
  • [SPARK-40759] [SC-114251][sql] Eseguire la migrazione degli errori di controllo del tipo dell'intervallo di tempo nelle classi di errore
  • [SPARK-40750] [SC-113812][sql] Eseguire la migrazione degli errori di controllo dei tipi di espressioni matematiche verso le classi di errore
  • [SPARK-40756] [SC-113749][sql] Migrare i fallimenti di controllo dei tipi delle espressioni stringa verso le classi di errore
  • [SPARK-40768] [SC-113640][sql] Migrare gli errori nei controlli dei tipi di bloom_filter_agg() nelle classi di errore
  • [SPARK-40369] [SC-113402][core][SQL] Migrare i fallimenti dei controlli di tipo delle chiamate tramite reflection verso le classi di errore
  • [SPARK-39445] [SQL] Rimuovere la finestra se windowExpressions è vuoto nella potatura delle colonne
  • [SPARK-40761] [SC-113245][sql] Trasferire gli errori di verifica dei tipi delle espressioni percentili nelle classi di errore
  • [SPARK-40361] [SC-112789][sql] Spostare gli errori di controllo dei tipi aritmetici nelle classi di errore
  • [SPARK-40714] [SC-112576][sql] Remove PartitionAlreadyExistsException
  • [SPARK-40702] [SC-112437][sql] Correzione delle specifiche di partizione in PartitionsAlreadyExistException
  • [SPARK-40358] [SC-112631][sql] Migrare gli errori di controllo dei tipi di raccolta in classi di errore
  • [SPARK-40910] [SC-114259][sql] Sostituire UnsupportedOperationException con SparkUnsupportedOperationException
  • [SPARK-39876] [SC-112429][sql] Aggiungere UNPIVOT alla sintassi SQL
  • [SPARK-39783] [SC-113389][sql] Quote qualifiedName per correggere i backtick per i candidati di colonna nei messaggi di errore
  • [SPARK-40663] [SC-112520][sql] Eseguire la migrazione degli errori di esecuzione in classi di errore: _LEGACY_ERROR_TEMP_2026-2282
  • [SPARK-40975] [SC-114555][sql] Rinominare la classe di errore _LEGACY_ERROR_TEMP_0021 in UNSUPPORTED_TYPED_LITERAL
  • [SPARK-37935] [SC-114472][sql] Elimina campi di sottoclassi di errore separati
  • [SPARK-40944] [SC-114530][sql] Rilassare il vincolo di ordinamento per le opzioni di colonna CREATE TABLE
  • [SPARK-40815] [SC-114528][sql] Aggiungere DelegateSymlinkTextInputFormat come soluzione alternativa al bug SymlinkTextInputSplit
  • [SPARK-40933] [SC-114441][sql] Reimplement df.stat. {cov, corr} con funzioni sql predefinite
  • [SPARK-40932] [SC-114439][core] Correzione dei messaggi di errore per allGather che vengono sovrascritti
  • [SPARK-39312] [SQL] Usare il predicato In nativo parquet per la propagazione del filtro
  • [SPARK-40862] [SC-114352][sql] Supporta sottoquery non aggregate in RewriteCorrelatedScalarSubquery
  • [SPARK-40963] [SC-114446][sql] Impostare correttamente nullable nel progetto creato da ExtractGenerator
  • [SPARK-40663] [SC-112295][sql] Migrare gli errori di esecuzione verso le classi di errore: _LEGACY_ERROR_TEMP_2000-2024
  • [SPARK-40892] [SC-114347][sql][SS] Allentare il requisito della regola window_time: consentire più chiamate alla funzione window_time
  • [SPARK-40540] [SC-111639][sql] Eseguire la migrazione degli errori di compilazione nelle classi di errore: _LEGACY_ERROR_TEMP_1100-1347
  • [SPARK-40924] [SC-114258][sql] Correzione per Unhex quando l'input ha un numero dispari di simboli
  • [SPARK-40821] [SC-113754][sql][CORE][python][SS] Introdurre window_time funzione per estrarre l'ora dell'evento dalla colonna della finestra
  • [SPARK-40800] [SC-113772][sql] Sempre espressioni inline in OptimizeOneRowRelationSubquery.
  • [SPARK-40900] [SC-114006][sql] Reimplementare frequentItems con operazioni su dataframe
  • [SPARK-40735] [SC-114022][sc-112657] Richiamare costantemente bash con /usr/bin/env bash negli script per rendere il codice più portabile
  • [SPARK-40773] [SC-113091][sql] Refactor checkCorrelationsInSubquery
  • [SPARK-40615] [SC-113400][sql] Controllare i tipi di dati non supportati per la correlazione delle sottoquery
  • [SPARK-40660] [SC-112293][core][SQL] Passare a XORShiftRandom per distribuire gli elementi
  • [SPARK-40540] [SC-113926][sc-111331][SQL] Eseguire la migrazione degli errori di compilazione nelle classi di errore
  • [SPARK-40551] [SC-113135][sql] DataSource V2: Aggiungere API per operazioni a livello di riga basate su delta
  • [SPARK-39391] [SC-110676][core] Riutilizzare le classi partitioner
  • [SPARK-40368] [SC-113396][sql] Migrare gli errori di controllo del tipo di filtro Bloom alle classi di errore
  • [SPARK-39146] [SC-111814][core][SQL] Introdurre singleton locale per ObjectMapper che può essere riutilizzato
  • [SPARK-40357] [SC-113786][sc-111352][SQL] Migrare gli errori di controllo del tipo di finestra alle classi di errore
  • [SPARK-40874] [SC-113756][python] Correzione delle trasmissioni nelle funzioni definite dall'utente Python quando la crittografia è abilitata
  • [SPARK-40359] [SC-113770][sc-111146][SQL] Migrare i fallimenti del controllo del tipo nelle espressioni CSV/JSON verso le classi di errore
  • [SPARK-40880] [SC-113764][sql] Reimplementare summary con operazioni sui data frame
  • [SPARK-40877] [SC-113763][sql] Reimplementare crosstab con operazioni sui dataframe
  • [SPARK-40382] [SC-113098][sql] Raggruppare espressioni di aggregazione distinte per sottoelementi semanticamente equivalenti in RewriteDistinctAggregates
  • [SPARK-40826] [SC-113532][ss] Aggiungere un controllo del file di ridenominazione del checkpoint aggiuntivo
  • [SPARK-40829] [SC-113426][sql] STORED AS serde nella vista CREATE TABLE LIKE non funziona
  • [SPARK-40844] [SC-113542][ss] Capovolgi il valore predefinito della configurazione di recupero dell'offset Kafka
  • [SPARK-40488] [SC-113568][sc-111160] Non eseguire il wrapping delle eccezioni generate quando la scrittura dell'origine dati non riesce
  • [SPARK-40560] [SC-113631][sc-111335][SQL] Rinominare message in messageTemplate nel STANDARD formato degli errori
  • [SPARK-40618] [SC-113096][sql] Correzione del bug nella regola MergeScalarSubqueries con sottoquery annidate usando il rilevamento dei riferimenti
  • [SPARK-40530] [SC-113528][sc-111332][SQL] Aggiungere API per sviluppatori correlate agli errori
  • [SPARK-40806] [SC-113250][sql] Correzione typo: CREATE TABLE -> REPLACE TABLE
  • [SPARK-40646] [SC-113379][sql] Correzione della restituzione di risultati parziali nelle funzioni JSON origine dati e JSON
  • [SPARK-40654] [Cherry-pick][sc-112783][SQL] Supporto protobuf per Spark da...
  • [SPARK-40753] [SC-113539][sql] Correzione di un bug nel caso di test per l'operazione della directory del catalogo
  • [SPARK-40765] [SC-113056][sql] Ottimizzare l'operazione ridondante di fs nel metodo CommandUtils#calculateSingleLocationSize#getPathSize
  • [SPARK-40114] [ES-479282][r][11.X] Supporto di Arrow 9.0.0 con SparkR
  • [SPARK-40479] [SC-110935][sql] Eseguire la migrazione di un errore di tipo di input imprevisto a una classe di errore
  • [SPARK-40473] [SC-113388][sc-111141][SQL] Eseguire la migrazione degli errori di analisi nelle classi di errore
  • [SPARK-39853] [SC-111867][core] Supporto del profilo di risorse delle attività a livello di fase per il cluster autonomo quando l'allocazione dinamica è disabilitata (ripristino da PR-47157)
  • [SPARK-40407] [SC-111161][sql] Correzione dell'asimmetria dei dati potenziale causata da df.repartition
  • [SPARK-40425] [SC-110840][sql] DROP TABLE non è necessario eseguire la ricerca di tabelle
  • [SPARK-40703] [SC-113242][sql] Introdurre shuffle in SinglePartition per migliorare il parallelismo
  • [SPARK-40640] [SC-113138][core] SparkHadoopUtil per impostare l'origine delle opzioni di configurazione hadoop/hive
  • [SPARK-39062] [11.x][core] Aggiungere il supporto per la pianificazione delle risorse a livello di fase per il cluster autonomo
  • [SPARK-33861] [SC-109877]Annulla “[SQL] semplificazione del condizionale nel predicato”
  • [SPARK-40667] [SC-113136][sql] RefactorIng File Data Source Options
  • [SPARK-40370] [SC-110677][sql] Migrare gli errori di verifica dei tipi alle classi di errore in CAST
  • [SPARK-40611] [SC-113105][sql] Migliorare le prestazioni di setInterval & getInterval for UnsafeRow
  • [SPARK-40733] [SC-113126][sql] Rendere il contenuto di SERDEPROPERTIES nel risultato di ShowCreateTableAsSerdeCommand avere un ordine fisso
  • [SPARK-40585] [SC-112180][sql] Supporta identificatori tra virgolette doppie
  • [SPARK-40772] [SC-112992][sql] Migliorare spark.sql.adaptive.skewJoin.skewedPartitionFactor per supportare i valori Double
  • [SPARK-40565] [SC-112417][sql] Non spingere filtri non deterministici nelle fonti di file V2
  • [SPARK-8731] [SC-112784] Beeline non funziona con l'opzione -e all'avvio in background
  • [SPARK-35242] [SC-111398][sql] Supporto della modifica del database predefinito del catalogo di sessioni
  • [SPARK-40426] [SC-110672][sql] Restituire una mappa tramite SparkThrowable.getMessageParameters
  • [SPARK-40494] [SC-112655][sc-111025][CORE][sql][ML][mllib] Ottimizzare le prestazioni del modello di keys.zipWithIndex.toMap codice
  • [SPARK-40521] [SC-112430][sql] Restituisci solo le partizioni esistenti dalla creazione della partizione di Hive
  • [SPARK-40705] [SC-112567][sql] Gestire il caso dell'uso di array mutabili quando si converte Row in JSON per Scala 2.13
  • [SPARK-39895] [SC-112590][sql][PYTHON] Supportare l'eliminazione di più colonne
  • [SPARK-40607] [SC-112296][core][SQL][mllib][SS] Rimuovere le operazioni di interpolatore di stringhe ridondanti
  • [SPARK-40420] [SC-112604][sc-110569][SQL] Ordinare i parametri dei messaggi di errore in base ai nomi nei formati JSON
  • [SPARK-40403] [SC-110564][sql] Calcolare le dimensioni delle matrici non sicure usando longs per evitare dimensioni negative nel messaggio di errore
  • [SPARK-40482] [SC-110831][sql] Ripristinare SPARK-24544 Print actual failure cause when look up function failed
  • [SPARK-40400] [SC-112555][sc-110397][SQL] Passare i parametri del messaggio di errore alle eccezioni come mappe
  • [SPARK-40628] [SC-112414][sql] Non eseguire il push di una condizione semi/anti join complessa a sinistra tramite il progetto
  • [SPARK-40562] [SC-111455][sql] Aggiungi spark.sql.legacy.groupingIdWithAppendedUserGroupBy
  • [SPARK-40501] [SC-111333][sql] Aggiungi PushProjectionThroughLimit per l'ottimizzatore
  • [SPARK-39200] [SC-111244][core] Rendi il Fallback Storage in grado di leggere completamente il contenuto
  • [SPARK-38717] [SC-111241][sql] Gestire il comportamento di conservazione delle specifiche del bucket di Hive
  • [SPARK-40385] [SC-111123][sql] Correzione del percorso interpretato per il costruttore dell'oggetto complementare
  • [SPARK-40216] [SC-112413][sql] Estrarre il metodo comune ParquetUtils.prepareWrite per deduplicare il codice in ParquetFileFormat e ParquetWrite
  • [SPARK-40636] [SC-112160][core] Correggi il registro errato dei shuffle rimanenti in BlockManagerDecommissioner
  • [SPARK-40617] [SC-112009] Correzione della race condition nella gestione delle voci stageTCMP di ExecutorMetricsPoller
  • [SPARK-40618] [SC-112046][sql] Correzione di bug nella regola MergeScalarSubqueries con sottoquery annidate
  • [SPARK-40612] [SC-111933][core] Correzione del principale usato per il rinnovo dei token di delega nei gestori risorse non YARN
  • [SPARK-40595] [SC-111662][sql] Miglioramento del messaggio di errore per le relazioni CTE inutilizzate
  • [SPARK-40314] [SC-111879][sql][PYTHON] Aggiungere collegamenti Scala e Python per inline e inline_outer
  • [SPARK-40416] [SC-110945][sql] Spostare i messaggi di errore di CheckAnalysis delle espressioni di sottoselezione per utilizzare il nuovo framework di gestione degli errori
  • [SPARK-40318] [SC-111865][sc-109986][SQL] try_avg() deve generare le eccezioni dal figlio
  • [SPARK-40509] [SC-111644][ss][PYTHON] Aggiungere un esempio per applyInPandasWithState
  • [SPARK-40310] [SC-111329][sc-109842][SQL] try_sum() deve generare le eccezioni dai suoi figli
  • [SPARK-40016] [SQL] Rimuovere tryEval non necessario nell'implementazione di try_sum()
  • [SPARK-40527] [SC-111224][sql] Mantenere i nomi dei campi struct o le chiavi della mappa in CreateStruct
  • [SPARK-38098] [SC-111178][python] Aggiungere il supporto per ArrayType di StructType annidato alla conversione basata su freccia
  • [SPARK-40324] [SC-111359][sc-110293][SQL] Fornire un contesto alla query in AnalysisException
  • [SPARK-40492] [SC-111324][ss] Eseguire la manutenzione prima di scaricare StateStore di streaming
  • [SPARK-40487] [SC-111124][sql] Make defaultJoin in BroadcastNestedLoopJoinExec in esecuzione in parallelo
  • [SPARK-40474] [SC-111273][sql] Correggere il comportamento di inferenza e analisi dei dati dello schema CSV sulle colonne con date e timestamp misti
  • [SPARK-40508] [SC-111066][sql] Considera il partizionamento sconosciuto come UnknownPartitioning
  • [SPARK-40496] [SC-111234][sc-111013][SQL] Correzione delle configurazioni per controllare "enableDateTimeParsingFallback"
  • [SPARK-40435] [SC-111214][ss][PYTHON] Aggiungere gruppi di test per applyInPandasWithState in PySpark
  • [SPARK-40434] [SC-111125][ss][PYTHON] Implementare applyInPandasWithState su PySpark

Aggiornamenti di manutenzione

Vedere Aggiornamenti della manutenzione di Databricks Runtime 12.0.

Ambiente di sistema

  • Sistema operativo: Ubuntu 20.04.5 LTS
  • Java: Zulu 8.64.0.19-CA-linux64
  • Scala: 2.12.14
  • Python: 3.9.5
  • R: 4.2.2
  • Delta Lake: 2.2.0

Librerie di Python installate

Libreria Versione Libreria Versione Libreria Versione
argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0 asttoken 2.0.5
att. 21.4.0 chiamata di ritorno 0.2.0 backports.entry-points-selectable 1.2.0
beautifulsoup4 4.11.1 nero 22.3.0 candeggiare 4.1.0
boto3 1.21.32 botocore 1.24.32 certifi 2021.10.8
cffi 1.15.0 chardet 4.0.0 normalizzatore di set di caratteri 2.0.4
fai clic 8.0.4 criptografia 3.4.8 ciclista 0.11.0
Cython, un linguaggio di programmazione 0.29.28 dbus-python 1.2.16 debugpy 1.5.1
Decoratore 5.1.1 defusedxml 0.7.1 distlib 0.3.6
punti di ingresso 0.4 esecuzione 0.8.3 panoramica delle facette 1.0.0
fastjsonschema 2.16.2 blocco dei file 3.8.0 fonttools (strumenti per caratteri) 4.25.0
IDNA 3.3 ipykernel 6.15.3 ipython 8.5.0
ipython-genutils 0.2.0 ipywidgets 7.7.2 jedi 0.18.1
Jinja2 2.11.3 jmespath 0.10.0 joblib 1.1.0
jsonschema 4.4.0 jupyter-client 6.1.12 jupyter_core 4.11.2
jupyterlab-pygments 0.1.2 jupyterlab-widgets 1.0.0 kiwisolver 1.3.2
MarkupSafe 2.0.1 matplotlib 3.5.1 matplotlib-inline 0.1.2
Mistune 0.8.4 mypy-extensions 0.4.3 nbclient 0.5.13
nbconvert 6.4.4 nbformat 5.3.0 nest-asyncio 1.5.5
taccuino 6.4.8 numpy 1.21.5 imballaggio 21,3
Panda 1.4.2 pandocfilters 1.5.0 parso 0.8.3
pathspec 0.9.0 vittima 0.5.2 pexpect 4.8.0
pickleshare (libreria di software Python) 0.7.5 Cuscino 9.0.1 seme 21.2.4
platformdirs 2.5.4 plotly (software di visualizzazione dati) 5.6.0 prometheus-client 0.13.1
prompt-toolkit 3.0.20 protobuf 3.19.4 psutil 5.8.0
psycopg2 2.9.3 ptyprocess 0.7.0 pure-eval 0.2.2
pyarrow 7.0.0 pycparser (un parser scritto in Python) 2.21 Pygments 2.11.2
PyGObject 3.36.0 pyodbc 4.0.32 pyparsing 3.0.4
pyrsistent 0.18.0 python-dateutil (libreria Python per la gestione delle date) 2.8.2 pytz 2021.3
pyzmq 22.3.0 richieste 2.27.1 requests-unixsocket 0.2.0
s3transfer 0.5.0 scikit-learn 1.0.2 scipy 1.7.3
Seaborn 0.11.2 Send2Trash 1.8.0 setuptools (pacchetto Python per gestire la configurazione e la distribuzione) 58.0.4
sei 1.16.0 colino per la zuppa 2.3.1 ssh-import-id (comando per l'importazione di chiavi SSH) 5.10
dati accatastati 0.2.0 statsmodels 0.13.2 tenacità 8.0.1
finito 0.13.1 percorso di prova 0.5.0 threadpoolctl 2.2.0
tokenize-rt 4.2.1 tomli 1.2.2 tornado 6.1
traitlets (una libreria per la configurazione dei parametri nei programmi Python) 5.1.1 typing_extensions 4.1.1 aggiornamenti non supervisionati 0,1
urllib3 1.26.9 virtualenv 20.8.0 wcwidth (funzione per determinare la larghezza dei caratteri) 0.2.5
codifiche web 0.5.1 ruota 0.37.0 widgetsnbextension 3.6.1

Librerie R installate

Le librerie R vengono installate dallo snapshot MICROSOFT CRAN nel 2022-11-11.

Libreria Versione Libreria Versione Libreria Versione
freccia 10.0.0 askpass 1.1 assicura che 0.2.1
retroportazioni 1.4.1 base 4.2.2 base64enc 0.1-3
bit 4.0.4 bit 64 4.0.5 massa amorfa 1.2.3
avvio 1.3-28 fermentare 1.0-8 Brio 1.1.3
scopa 1.0.1 bslib 0.4.1 cashmere 1.0.6
chiamante 3.7.3 caret 6.0-93 cellranger 1.1.0
cronometro 2.3-58 class 7.3-20 CLI 3.4.1
Clipr 0.8.0 orologio 0.6.1 raggruppamento 2.1.4
strumenti per la codifica 0.2-18 spazio colorimetrico 2.0-3 segno comune 1.8.1
compilatore 4.2.2 configurazione 0.3.1 cpp11 0.4.3
crayon 1.5.2 credenziali 1.3.2 curva 4.3.3
tabella di dati 1.14.4 Insiemi di dati 4.2.2 DBI 1.1.3
dbplyr 2.2.1 descrizione 1.4.2 strumenti per sviluppatori 2.4.5
diffobj 0.3.5 digerire 0.6.30 illuminazione rivolta verso il basso 0.4.2
dplyr 1.0.10 dtplyr 1.2.2 e1071 1.7-12
puntini di sospensione 0.3.2 valutare 0.18 fan 1.0.3
colori 2.1.1 mappatura veloce 1.1.0 fontawesome 0.4.0
forzati 0.5.2 foreach 1.5.2 straniero 0.8-82
forgiare 0.2.0 fs 1.5.2 futuro 1.29.0
futuro.applicare 1.10.0 fare gargarismi 1.2.1 elementi generici 0.1.3
gert 1.9.1 ggplot2 3.4.0 gh 1.3.1
gitcreds 0.1.2 glmnet 4.1-4 elementi globali 0.16.1
colla 1.6.2 Google Drive 2.0.0 googlesheets4 1.0.1
Gower 1.0.0 grafica 4.2.2 grDispositivi 4.2.2
griglia 4.2.2 gridExtra 2.3 gsubfn 0.7
gtable 0.3.1 casco protettivo 1.2.0 rifugio 2.5.1
più alto 0.9 HMS 1.1.2 strumenti HTML 0.5.3
htmlwidgets 1.5.4 httpuv 1.6.6 httr 1.4.4
documenti di identità 1.0.1 ini 0.3.1 ipred 0.9-13
banderelle isografiche 0.2.6 Iteratori 1.0.14 jquerylib 0.1.4
jsonlite 1.8.3 KernSmooth 2.23-20 knitr 1,40
etichettatura 0.4.2 più tardi 1.3.0 reticolo 0.20-45
lava 1.7.0 ciclo di vita 1.0.3 ascolta 0.8.0
lubridate 1.9.0 magrittr 2.0.3 Markdown 1.3
Massa 7.3-58 Matrice 1.5-1 memorizza 2.0.1
metodi 4.2.2 mgcv 1.8-41 mime 0.12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 modelr 0.1.9
munsell 0.5.0 nlme 3.1-160 nnet (rete neurale) 7.3-18
Derivazione numerica 2016.8-1.1 openssl 2.0.4 parallelo 4.2.2
parallelamente 1.32.1 pilastro 1.8.1 pkgbuild 1.3.1
pkgconfig 2.0.3 pkgdown 2.0.6 pkgload 1.3.1
plogr 0.2.0 plyr 1.8.7 elogio 1.0.0
prettyunits 1.1.1 pROC 1.18.0 processx 3.8.0
prodlim 2019.11.13 profvis 0.3.7 Avanzamento 1.2.2
progressr 0.11.0 promesse 1.2.0.1 proto / prototipo 1.0.0
intermediario 0,4–27 P.S. 1.7.2 purrr 0.3.5
r2d3 0.2.6 R6 2.5.1 ragg 1.2.4
randomForest 4.7-1.1 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp (una libreria per il linguaggio di programmazione R) 1.0.9 RcppEigen 0.3.3.9.3
readr 2.1.3 readxl (software per leggere documenti Excel) 1.4.1 ricette 1.0.3
nuovo incontro 1.0.1 rematch2 2.1.2 Telecomandi 2.4.2
esempio riproducibile (reprex) 2.0.2 reshape2 1.4.4 rlang 1.0.6
rmarkdown 2.18 RODBC 1.3-19 roxygen2 7.2.1
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-11
RSQLite 2.2.18 rstudioapi 0.14 rversions 2.1.2
rvest 1.0.3 Sass 0.4.2 Scala 1.2.1
selettore 0,4-2 informazioni sulla sessione 1.2.2 Forma 1.4.6
brillante 1.7.3 sourcetools 0.1.7 sparklyr 1.7.8
SparkR 3.3.1 spaziale 7.3-11 Spline 4.2.2
sqldf 0,4-11 SQUAREM 2021.1 statistiche 4.2.2
statistiche4 4.2.2 string 1.7.8 stringr 1.4.1
Sopravvivenza 3.4-0 sys 3.4.1 systemfonts 1.0.4
tcltk 4.2.2 testthat 3.1.5 modellazione del testo 0.3.6
Tibble 3.1.8 tidyr 1.2.1 tidyselect 1.2.0
tidyverse 1.3.2 cambio d'ora 0.1.1 data e ora 4021.106
tinytex 0,42 strumenti 4.2.2 tzdb 0.3.0
verificatore di URL 1.0.1 Usa questo 2.1.6 utf8 1.2.2
Utilità 4.2.2 UUID (Identificatore Unico Universale) 1.1-0 vctrs 0.5.0
viridisLite 0.4.1 vrooom 1.6.0 Waldo 0.4.0
filo sottile 0.4 withr 2.5.0 xfun 0.34
xml2 1.3.3 xopen 1.0.0 xtable 1.8-4
yaml 2.3.6 formato zip 2.2.2

Librerie Java e Scala installate (versione cluster Scala 2.12)

ID del Gruppo ID dell'artefatto Versione
antlr antlr 2.7.7
com.amazonaws Amazon Kinesis Client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.189
com.amazonaws aws-java-sdk-cloudformation 1.12.189
com.amazonaws aws-java-sdk-cloudfront 1.12.189
com.amazonaws aws-java-sdk-cloudhsm 1.12.189
com.amazonaws aws-java-sdk-cloudsearch 1.12.189
com.amazonaws aws-java-sdk-cloudtrail 1.12.189
com.amazonaws aws-java-sdk-cloudwatch 1.12.189
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.189
com.amazonaws aws-java-sdk-codedeploy 1.12.189
com.amazonaws aws-java-sdk-cognitoidentity 1.12.189
com.amazonaws aws-java-sdk-cognitosync 1.12.189
com.amazonaws aws-java-sdk-config (configurazione SDK Java per AWS) 1.12.189
com.amazonaws aws-java-sdk-core 1.12.189
com.amazonaws aws-java-sdk-datapipeline 1.12.189
com.amazonaws aws-java-sdk-directconnect (strumento per la connessione diretta in Java di AWS) 1.12.189
com.amazonaws aws-java-sdk-directory 1.12.189
com.amazonaws aws-java-sdk-dynamodb 1.12.189
com.amazonaws aws-java-sdk-ec2 1.12.189
com.amazonaws aws-java-sdk-ecs 1.12.189
com.amazonaws aws-java-sdk-efs 1.12.189
com.amazonaws aws-java-sdk-elasticache 1.12.189
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.189
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.189
com.amazonaws aws-java-sdk-elastictranscoder 1.12.189
com.amazonaws aws-java-sdk-emr 1.12.189
com.amazonaws AWS Java SDK per Glacier 1.12.189
com.amazonaws aws-java-sdk-glue (collegamento SDK Java AWS) 1.12.189
com.amazonaws aws-java-sdk-iam 1.12.189
com.amazonaws aws-java-sdk-importexport 1.12.189
com.amazonaws aws-java-sdk-kinesis 1.12.189
com.amazonaws aws-java-sdk-kms 1.12.189
com.amazonaws aws-java-sdk-lambda 1.12.189
com.amazonaws aws-java-sdk-logs 1.12.189
com.amazonaws AWS Java SDK Machine Learning 1.12.189
com.amazonaws aws-java-sdk-opsworks 1.12.189
com.amazonaws aws-java-sdk-rds 1.12.189
com.amazonaws aws-java-sdk-redshift 1.12.189
com.amazonaws aws-java-sdk-route53 1.12.189
com.amazonaws aws-java-sdk-s3 1.12.189
com.amazonaws aws-java-sdk-ses 1.12.189
com.amazonaws aws-java-sdk-simpledb 1.12.189
com.amazonaws aws-java-sdk-simpleworkflow 1.12.189
com.amazonaws aws-java-sdk-sns 1.12.189
com.amazonaws aws-java-sdk-sqs 1.12.189
com.amazonaws aws-java-sdk-ssm 1.12.189
com.amazonaws aws-java-sdk-storagegateway (SDK di AWS per Java per Storage Gateway) 1.12.189
com.amazonaws aws-java-sdk-sts 1.12.189
com.amazonaws aws-java-sdk-support (supporto del kit di sviluppo software Java per AWS) 1.12.189
com.amazonaws Librerie aws-java-sdk-swf 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.189
com.amazonaws jmespath-java 1.12.189
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics torrente 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware ombreggiato criogenico 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml compagno di classe 1.3.4
com.fasterxml.jackson.core Annotazioni di Jackson 2.13.4
com.fasterxml.jackson.core jackson-core 2.13.4
com.fasterxml.jackson.core jackson-databind 2.13.4.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.13.4
com.fasterxml.jackson.datatype jackson-datatype-joda 2.13.4
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.13.4
com.fasterxml.jackson.module jackson-module-paranamer 2.13.4
com.fasterxml.jackson.module jackson-module-scala_2.12 2.13.4
com.github.ben-manes.caffeine caffeina 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib nucleo 1.1.2
com.github.fommil.netlib riferimento_nativo-java 1.1
com.github.fommil.netlib native_ref-java-natives (riferimenti a nativi Java) 1.1
com.github.fommil.netlib sistema_nativo-java 1.1
com.github.fommil.netlib sistema_nativo-java-nitidi 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-sistema_nativo-linux-x86_64-natives 1.1
com.github.luben zstd-jni (libreria open-source per compressione con Java Native Interface) 1.5.2-1
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.6
com.google.crypto.tink tink 1.6.1
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava guaiava 15,0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.0.204
com.helger profilatore 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RILASCIO
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure Azure Data Lake Store SDK 2.3.9
com.ning compress-lzf (algoritmo di compressione) 1.1
com.sun.mail javax.mail (package Java per la gestione della posta elettronica) 1.5.2
com.tdunning JSON 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenti_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe configurazione 1.2.1
com.typesafe.scala-logging scala-logging_2.12 (libreria per la gestione dei log in Scala, versione 2.12) 3.7.2
com.uber h3 3.7.0
com.univocity parser di univocità 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec (libreria per la codifica comune) commons-codec (libreria per la codifica comune) 1.15
collezioni-comuni collezioni-comuni 3.2.2
commons-dbcp commons-dbcp 1.4
funzione di caricamento file dei Commons funzione di caricamento file dei Commons 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.11.0
commons-lang commons-lang 2.6
commons-logging (no translation needed) commons-logging (no translation needed) 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 2.2.1
dev.ludovic.netlib Blas 2.2.1
dev.ludovic.netlib LAPACK 2.2.1
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift compressore d'aria 0.21
io.delta delta-sharing-spark_2.12 0.5.2
io.dropwizard.metrics nucleo delle metriche 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics metriche-controlli di salute 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json (Specificare ulteriormente se necessario a seconda del contesto) 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics metriche-servlet 4.1.1
io.netty netty-all 4.1.74.Final
io.netty netty-buffer 4.1.74.Final
io.netty netty-codec 4.1.74.Final
io.netty netty-common 4.1.74.Final
io.netty netty-handler 4.1.74.Final
io.netty netty-resolver 4.1.74.Final
io.netty netty-tcnative-classes 2.0.48.Final
io.netty netty-transport 4.1.74.Final
io.netty netty-transport-classes-epoll 4.1.74.Final
io.netty netty-transport-classes-kqueue 4.1.74.Final
io.netty netty-transport-native-epoll-linux-aarch_64 4.1.74.Final
io.netty "netty-transport-native-epoll-linux-x86_64" 4.1.74.Final
io.netty netty-transport-native-kqueue-osx-aarch_64 4.1.74.Final
io.netty netty-transport-native-kqueue-osx-x86_64 4.1.74.Final
io.netty netty-transport-native-unix-comune 4.1.74.Final
io.prometheus simpleclient 0.7.0
io.prometheus sempliceclient_comune 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx collezionista 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation attivazione 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction Java Transaction API (JTA) 1.1
javax.transaction API per le transazioni 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.13
net.java.dev.jna jna 5.8.0
net.razorvine sottaceto 1.2
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv (formato CSV avanzato) 2.2.0
net.snowflake snowflake-ingest-sdk (kit di sviluppo software per l'ingestione dati) 0.9.6
net.snowflake snowflake-jdbc 3.13.22
net.sourceforge.f2j arpack_combinato_tutto 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8
org.antlr modello di stringa 3.2.1
org.apache.ant formica 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant launcher 1.9.2
org.apache.arrow formato a freccia 7.0.0
org.apache.arrow arrow-nucleo-di-memoria 7.0.0
org.apache.arrow arrow-memory-netty 7.0.0
org.apache.arrow freccia-vettore 7.0.0
org.apache.avro Avro 1.11.0
org.apache.avro avro-ipc 1.11.0
org.apache.avro avro-mapred 1.11.0
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons testo comune 1.10.0
org.apache.curator curatore-cliente 2.13.0
org.apache.curator framework del curatore 2.13.0
org.apache.curator ricette del curatore 2.13.0
org.apache.derby derby sportivo 10.14.2.0
org.apache.hadoop API del client Hadoop 3.3.4-databricks
org.apache.hadoop runtime del client Hadoop 3.3.4
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive Hive-JDBC 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive spessori del sistema Hive 2.3.9
org.apache.hive API di archiviazione Hive 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims Hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.13
org.apache.httpcomponents httpcore 4.4.14
org.apache.ivy Edera 2.5.0
org.apache.logging.log4j log4j-1.2-api 2.18.0
org.apache.logging.log4j log4j-api 2.18.0
org.apache.logging.log4j log4j-core 2.18.0
org.apache.logging.log4j log4j-slf4j-impl 2.18.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.7.6
org.apache.orc orc-mapreduce 1.7.6
org.apache.orc orc-shims 1.7.6
org.apache.parquet parquet-column 1.12.3-databricks-0001
org.apache.parquet parquet-common 1.12.3-databricks-0001
org.apache.parquet parquet-encoding 1.12.3-databricks-0001
org.apache.parquet strutture in formato parquet 1.12.3-databricks-0001
org.apache.parquet parquet-hadoop 1.12.3-databricks-0001
org.apache.parquet parquet-jackson 1.12.3-databricks-0001
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-shaded 4.20
org.apache.yetus annotazioni per il pubblico 0.13.0
org.apache.zookeeper guardiano dello zoo 3.6.2
org.apache.zookeeper guardiano dello zoo-juta 3.6.2
org.checkerframework verificatore qualità 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino Commons-Compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus Datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.46.v20220331
org.eclipse.jetty continuazione di jetty 9.4.46.v20220331
org.eclipse.jetty jetty-http 9.4.46.v20220331
org.eclipse.jetty jetty-io 9.4.46.v20220331
org.eclipse.jetty jetty-jndi 9.4.46.v20220331
org.eclipse.jetty Jetty Plus 9.4.46.v20220331
org.eclipse.jetty jetty-proxy 9.4.46.v20220331
org.eclipse.jetty sicurezza del molo 9.4.46.v20220331
org.eclipse.jetty Jetty Server 9.4.46.v20220331
org.eclipse.jetty jetty-servlet 9.4.46.v20220331
org.eclipse.jetty jetty-servlets 9.4.46.v20220331
org.eclipse.jetty jetty-util 9.4.46.v20220331
org.eclipse.jetty jetty-util-ajax 9.4.46.v20220331
org.eclipse.jetty applicazione web di Jetty 9.4.46.v20220331
org.eclipse.jetty jetty-xml 9.4.46.v20220331
org.eclipse.jetty.websocket WebSocket-API 9.4.46.v20220331
org.eclipse.jetty.websocket cliente WebSocket 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-comune 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-server 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-servlet 9.4.46.v20220331
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-localizzatore 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 localizzatore di risorse OSGi 1.0.3
org.glassfish.hk2.external aopalliance-riconfezionato 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet (servlet del contenitore Jersey) 2.36
org.glassfish.jersey.containers modulo-nucleo-servlet-contenitore-jersey (if a translation is required as per the context) 2.36
org.glassfish.jersey.core jersey-client 2.36
org.glassfish.jersey.core jersey-comune 2.36
org.glassfish.jersey.core Jersey-server 2.36
org.glassfish.jersey.inject jersey-hk2 2.36
org.hibernate.validator validatore di Hibernate 6.1.0.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss-logging (strumento di registrazione per JBoss) 3.3.2.Finale
org.jdbi jdbi 2.63.1
org.jetbrains annotazioni 17.0.0
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mariadb.jdbc mariadb-java-client - Libreria Java per MariaDB 2.7.4
org.mlflow mlflow-spark 1.27.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.3.3
org.roaringbitmap RoaringBitmap 0.9.25
org.roaringbitmap Lamine di regolazione 0.9.25
org.rocksdb rocksdbjni 6.24.2
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.14
org.scala-lang scala-library_2.12 2.12.14
org.scala-lang scala-reflect_2.12 2.12.14
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt interfaccia di prova 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1.2
org.scalanlp breeze_2.12 1.2
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.36
org.slf4j jul-to-slf4j 1.7.36
org.slf4j slf4j-api 1.7.36
org.spark-project.spark inutilizzato 1.0.0
org.threeten threeten-extra 1.5.0
org.tukaani xz 1.8
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1.24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1
  • Last updated on