Databricks Runtime 18 (bèta)

Deze pagina bevat uniforme releaseopmerkingen voor Databricks Runtime 18, mogelijk gemaakt door Apache Spark 4.1.0. Hierin worden alle functies, gedragswijzigingen en oplossingen vermeld die in de releasecyclus van Databricks Runtime 18 zijn verzonden.

Note

Releases worden stapsgewijs uitgevoerd. Uw Azure Databricks-account wordt mogelijk enkele dagen na de eerste releasedatum niet bijgewerkt.

Over geünificeerde releaseopmerkingen

Azure Databricks brengt gedurende de releasecyclus stapsgewijs functies uit zonder het versienummer te wijzigen. In plaats van afzonderlijke pagina's voor elke secundaire versie worden alle updates op deze enkele pagina weergegeven als gedateerde vermeldingen. Clusters ontvangen updates wanneer ze opnieuw worden opgestart.

Databricks Runtime 18 is de eerste release voor het gebruik van deze uniforme indeling. Voorheen had elke functieversie (18.0, 18.1, 18.2) een eigen releaseopmerkingspagina. Deze pagina's blijven ter referentie beschikbaar. Functies die eerder als 18.3 of later zouden zijn uitgebracht, worden nu uitgebracht als updates met datumversie van Databricks Runtime 18.

In de toekomst volgen Databricks Runtime-versies een levenscyclus van bèta (vroege evaluatie) via GA (functieontwikkeling, ongeveer zes maanden) naar LTS (langetermijnondersteuning, drie jaar stabiliteits- en beveiligingsoplossingen). Omdat 18.0 tot en met 18.2 is verzonden onder het vorige model, is Databricks Runtime 18 een overgangsrelease die rechtstreeks van bèta naar LTS wordt verplaatst. Zie de ondersteuningslevenscycli van Databricks Runtime voor volledige levenscyclus.

Databricks Runtime 18: 29 mei 2026

  • Structured Streaming-ontdubbeling met NaN sleutels: Structured Streaming-ontdubbeling behandelt NaN nu waarden (not-a-Number) met verschillende bitpatronen als duplicaten wanneer een double of float kolom wordt gebruikt als ontdubbelingssleutel. NaN Voorheen werden waarden met verschillende interne representaties behandeld als uniek en werden ze niet ontdubbeld.
  • Er is een probleem opgelost waarbij machtigingen op tabelniveau konden worden verwijderd uit externe catalogustabellen van Unity Catalog (bijvoorbeeld Snowflake-verbindingstabellen) tijdens het vernieuwen van metagegevens, waardoor query's mislukken met INSUFFICIENT_PERMISSIONS fouten. Rechten blijven nu behouden wanneer de metadata van de externe tabel wordt vernieuwd.

Databricks Runtime 18: 18 mei 2026

Gedragswijzigingen

Bekijk de volgende wijzigingen, die van kracht worden wanneer clusters opnieuw worden opgestart in deze runtime.

  • CREATE OR REPLACE TABLE: CREATE OR REPLACE TABLE behoudt nu standaard bestaande kolom- en tabelopmerkingen. Eerder werden opmerkingen verwijderd bij het opnieuw maken van een tabel. Beheerde tabellen en weergaven volgen nu hetzelfde gedrag als gematerialiseerde weergaven en streamingtabellen.
  • DataFrame-schrijfbewerkingen op naam: writeTo().append(), writeTo().overwrite(), writeTo().overwritePartitions() en write.mode("append").saveAsTable() converteren nu automatisch typecompatibele kolommen (bijvoorbeeld int naar long) zodat ze overeenkomen met het schema van de Delta-doeltabel. Voorheen zijn deze bewerkingen mislukt met een DELTA_FAILED_TO_MERGE_FIELDS fout wanneer kolomtypen compatibel waren, maar niet identiek waren. Gedrag komt nu overeen met SQL INSERT INTO ... BY NAME. save() en saveAsTable() in overschrijfmodus worden niet beïnvloed.
  • ALTER TABLE SET TBLPROPERTIES voor pipelines.pipelineId: ALTER TABLE <table> SET TBLPROPERTIES('pipelines.pipelineId' = '<pipeline-id>') probeert nu de opgegeven tabel in aanmerking te laten komen voor schrijfbewerkingen door de pijplijn. Voorheen had het instellen van deze eigenschap voor een normale tabel geen effect. Als de tabel niet geschikt is voor pipeline-schrijfbewerkingen, genereert de opdracht SETTING_PIPELINES_PIPELINE_ID_NOT_SUPPORTED.
  • cloud_files_state: De cloud_files_state functie met tabelwaarde (TVF) bevat nu een discovery_mode kolom waarin wordt getoond hoe automatisch laadprogramma elk bestand heeft gedetecteerd. Bestanden die zijn gedetecteerd voordat een upgrade wordt uitgevoerd, hebben een null waarde in deze kolom.
  • DESCRIBE EXTENDED AS JSON: bevat nu ook evaluatieresultaten voor voorspellende optimalisatie in de uitvoer. Voorheen werd deze informatie niet geretourneerd in de JSON-uitvoer.
  • Metingen in het venster Metrische weergave: retourneert nu de juiste resultaten wanneer query's worden gebruikt GROUP BY, IN/BETWEEN filters of gemengde predicaten in de volgordekolom van het venster. Voorheen konden deze filterpatronen onjuiste resultaten opleveren.

Nieuwe functies en verbeteringen

De volgende functies en verbeteringen zijn beschikbaar in deze release.

  • Clusterbibliotheken: Wanneer u PyPI-bibliotheken, wielen of requirements.txt bestanden op een cluster installeert, worden op het tabblad Bibliotheken en de REST API van bibliotheken nu alle opgeloste en geïnstalleerde pakketten weergegeven, inclusief transitieve afhankelijkheden. Voor installaties die meer dan 500 pakketten oplossen, wordt de lijst afgekapt. Het volledige installatierapport is beschikbaar in de stuurprogrammalogboeken van het cluster.
  • Auto CDC van momentopname met SQL-syntaxis: Lakeflow Spark-declaratieve pijplijnen ondersteunt nu Auto CDC van momentopname met behulp van SQL-syntaxis. Voorheen was deze functie alleen beschikbaar via de Python-API. Gebruik CREATE STREAMING TABLE ... FLOW AUTO CDC FROM SNAPSHOT dit om momentopnamebronnen (zoals Delta-tabellen, cloudopslag of JDBC) één momentopname tegelijk te verwerken. Zowel SCD-type 1 (standaard) als SCD-type 2 worden ondersteund.
  • array_sort met aangepaste vergelijkingen: Photon versnelt array_sort nu expressies die gebruikmaken van aangepaste vergelijkingen om matrices van structs te sorteren op een of meer velden. Voorheen vielen deze expressies terug op niet-Photon-uitvoering. Als u deze optimalisatie wilt inschakelen, stelt u in op spark.databricks.photon.rewriteArraySortComparator.enabledtrue.

Apache Spark-oplossingen en -verbeteringen

Deze release bevat de volgende bugfixes en verbeteringen in Spark:

  • SQL-query's ondersteunen nu een QUALIFY component, waarmee u rechtstreeks in de query kunt filteren op vensterfuncties. Voorheen moest de query in een subquery worden verpakt.
  • spark.read.json, spark.read.csven spark.read.xml accepteert nu een DataFrame als invoer, zodat u gegevens in het geheugen kunt parseren zonder deze eerst op te slaan in een bestand.
  • DataFrame.changes() is nu beschikbaar voor het lezen van CDC-uitvoer (Change Data Capture) via de DataFrame-API.
  • Wanneer naar een DataFrame-kolom wordt verwezen vanuit het verkeerde DataFrame, krijgt de fout nu de naam van de specifieke kolom. U kunt ook spark.sql.columnResolution.strict instellen om Spark strengere kolomovereenkomst te laten afdwingen en deze fouten eerder op te sporen.
  • MERGE INTO schema-evolutie werkt nu correct wanneer de instructie WHEN MATCHED THEN DELETE bevat of via een alias naar geneste kolommen verwijst. Voorheen konden deze combinaties mislukken of op de achtergrond verkeerde resultaten opleveren.
  • SHOW COLLATIONS bevat alle ondersteunde sorteringen en de bijbehorende eigenschappen, wat handig is bij het kiezen van een sortering voor tekstsortering of vergelijking.
  • De query-optimizer van Spark schat nu correct in hoeveel filters de hoeveelheid gegevens zullen verminderen. Onjuiste schattingen zorgden er eerder voor dat Spark tijdens join-bewerkingen grote tabellen volledig in het geheugen laadde, wat leidde tot onvoldoende-geheugenfouten.
  • Query's met meerdere COUNT(DISTINCT) expressies worden sneller uitgevoerd omdat Spark nu de gegevens eerder in het uitvoeringsplan vermindert in plaats van deze eerst uit te breiden.
  • Python UDF's die gebruikmaken van de pijloptimalisatie, voeren geen onnodige conversie van gegevensindelingen meer uit, waardoor overhead wordt verminderd.
  • Stream-stream-joins die geen outer join zijn, kunnen nu uitvoer genereren in de modus Update, en niet alleen in de modus Append, waardoor ze naar meer uitvoerdoelen kunnen schrijven.
  • JDBC-verbindingen worden nu correct gesloten wanneer een taak wordt geannuleerd. Voorheen kon annulering een verbinding open laten, waardoor latere taken vastlopen.
  • array_insert levert geen verkeerde resultaten meer op wanneer een zeer groot negatief getal als invoegpositie wordt gegeven.

Databricks Runtime 18: 4 mei 2026

Gedragswijzigingen

Bekijk de volgende wijzigingen, die van kracht worden wanneer clusters opnieuw worden opgestart in deze runtime.

  • XPath: bij het evalueren van XPath via XML Azure Databricks worden externe documenttypedefinities (DTD's) niet meer geladen. Query's die eerder alleen zijn mislukt vanwege een onbereikbare externe DTD-verwijzing, kunnen nu slagen.
  • Gedrag van NULL-structs bij schema-evolutie: Voor INSERT, MERGE en streaming-schrijfbewerkingen die gebruikmaken van schema-evolutie, wordt een NULL-struct in de bron nu als NULL opgeslagen in het doel. Voorheen werden NULL-structs onjuist gematerialiseerd als niet-NULL-structs, waarbij elk veld op NULL was ingesteld. Werk alle code bij die ervan uitging een niet-null-struct met uitsluitend NULL-velden te ontvangen — die gevallen geven nu een NULL-struct terug.
  • NATURAL JOIN: gebruikt nu correct niet-hoofdlettergevoelige kolomovereenkomst wanneer spark.sql.caseSensitive is ingesteld op false (de standaardinstelling). Eerder werden kolommen die alleen verschilden in hoofdlettergebruik (bijvoorbeeld ID vs id) niet als overeenkomend herkend, waardoor NATURAL JOIN stilzwijgend cross-join-resultaten produceerde. Deze oplossing brengt het gedrag van NATURAL JOIN in lijn met dat van USING-koppelingen.
  • AWS SDK v1-afhankelijkheden: nu geïsoleerd verpakt en niet langer rechtstreeks beschikbaar op de classpath. Als uw code afhankelijk is van AWS SDK v1-bibliotheken die eerder door Databricks Runtime zijn geleverd, voegt u deze toe als expliciete afhankelijkheden in uw project.
  • Validatie van SQL UDF-afhankelijkheid in Unity Catalog: Unity Catalog dwingt nu afhankelijkheidsvalidatie af voor door de gebruiker gedefinieerde SQL-functies om te voorkomen dat toegangsbeheer wordt omzeild. SQL UDF's met ongeldige afhankelijkheidsconfiguraties kunnen niet worden uitgevoerd.
  • LEFT OUTER JOIN LATERAL: Een bug waardoor rijen onjuist werden verwijderd, is opgelost. Query's die deze constructie gebruiken, retourneren nu de juiste resultaten. Als u tijdelijk wilt terugkeren naar het vorige gedrag, stelt u in spark.databricks.sql.optimizer.lateralJoinPreserveOuterSemantic op true.
  • regr_r2: behandelt nu de eerste parameter correct als de afhankelijke variabele. Query's die afhankelijk waren van het vorige onjuiste gedrag, retourneren verschillende resultaten.
  • Hyperbolische functies: sinh, cosh, tanhen gerelateerde hyperbolische functies retourneren Infinity nu in plaats van een overloopfout te genereren bij zeer grote invoer.
  • asinh en acosh: gebruik nu het fdlibm-algoritme voor consistentie tussen motoren. De resultaten kunnen enigszins afwijken van eerdere versies voor edge-case-invoer.
  • LIKE patroonkoppeling: verwerkt nu correct aanvullende Unicode-tekens (codepunten boven U+FFFF). Patronen die eerder voor deze tekens onjuist overeenkwamen of onjuist mislukten, geven nu de juiste resultaten.
  • VOID (NullType) kolommen: Delta-tabellen ondersteunen VOID nu (NullType) kolommen. VOID kolommen worden niet meer verwijderd uit het tabelschema wanneer ze worden gelezen. Schrijfbewerkingen worden niet beïnvloed.

Nieuwe functies en verbeteringen

De volgende functies en verbeteringen zijn beschikbaar in deze release.

  • CREATE OR REPLACE TEMP TABLE: Nu ondersteund, zodat u tijdelijke tabellen in één instructie kunt maken of vervangen.
  • agg(): Nu beschikbaar als alias voor de measure() functie. Bestaande query’s die measure() gebruiken, blijven zonder aanpassingen werken.
  • pyspark.pipelines.testing: Nu beschikbaar als een gemaksalias voor dlt.testing API's.
  • Prestaties van automatisch laden: Auto Loader maakt nu gebruik van een efficiëntere vermeldingsmethode die de snelheid van vermeldingen voor cloudopslagbronnen verbetert. Als uw streamtriggers elkaar overlappen vanwege langdurige vermeldingstaken, kan deze optimalisatie leiden tot hogere API-kosten voor cloudvermeldingen.
  • DESCRIBE HISTORY schrijfoptievlagmen: Delta-tabelgeschiedenis (DESCRIBE HISTORY) bevat nu schrijfoptievlagmen voor operationParametersWRITE en REPLACE TABLE bewerkingen. Vlaggen worden alleen weergegeven wanneertrue: isDynamicPartitionOverwrite, canOverwriteSchema, canMergeSchema, en predicateisV1WriterSaveAsTableOverwrite.
  • Gestructureerd streamen terugspoelen en opnieuw afspelen: Structured Streaming ondersteunt nu terugspoelen en opnieuw afspelen, waardoor het opnieuw verwerken vanaf een eerder punt in de stream wordt ingeschakeld om te herstellen van fouten, zoals schemawijzigingen of logische fouten, zonder een volledige statusherstel.
  • SparkSession.emptyDataFrame: Nu beschikbaar als een handige API voor het maken van een lege DataFrame kolom zonder kolommen en geen rijen.
  • TIMESTAMP WITH LOCAL TIME ZONE: Nu ondersteund als een SQL-syntaxisalias voor het TIMESTAMP_LTZ type.
  • to_json sortKeys optie: De to_json functie accepteert nu een sortKeys optie voor het produceren van JSON-uitvoer met sleutels in gesorteerde volgorde.
  • spark.catalog.*: API-methoden hebben nu functiepariteit met hun equivalente DDL-opdrachten voor catalogus-, schema- en tabelbewerkingen.
  • [Beveiligingsoplossing] Beveiligingsupdates van het besturingssysteem.

Databricks Runtime 18: 20 april 2026

  • De autoriteit van de CRS-ruimtelijke referentie voor het type GEOMETRY(102100) is gecorrigeerd. De instantie wordt nu gerapporteerd als ESRI:102100 in plaats van EPSG:102100.
  • [Beveiligingsoplossing] Beveiligingsupdates van het besturingssysteem.

Databricks Runtime 18: 2 april 2026

  • Verbeterde foutafhandeling voor query's die gegevens schrijven naar Delta-tabellen die een VOID (NullType) kolom in een door de gebruiker gedefinieerd type (UDT) bevatten.
  • JDBC-streaming-sinkverbindingen passen nu een time-out van 30 seconden toe, logica voor opnieuw proberen met exponentieel uitstel voor tijdelijke fouten (verbindingsfouten, impasses, snelheidsbeperking) en foutloze terugdraaiactie op verbroken verbindingen.
  • Er is een probleem opgelost met beschadigde SQL-tekst die is opgetreden bij het gebruik van Unicode-tekens in geparameteriseerde query's.
  • SHOW CREATE TABLE geeft nu correcte uitvoer voor tabellen en weergaven met een niet-standaardsortering.
  • [Beveiligingsoplossing] Beveiligingsupdates van het besturingssysteem.

Databricks Runtime 18: 11 maart 2026

Gedragswijzigingen

Bekijk de volgende wijzigingen, die van kracht worden wanneer clusters opnieuw worden opgestart in deze runtime.

  • Metrische fouten bij observatie: veroorzaken geen fouten meer bij het uitvoeren van query's. Voorheen konden fouten in OBSERVE componenten (zoals delen door nul) de hele query blokkeren of mislukken. De query wordt nu succesvol voltooid en de fout wordt gemeld wanneer u aanroept observation.get.
  • FILTER-clausule voor MEASURE: aggregatiefuncties van MEASURE ondersteunen nu FILTER-clausules. Voorheen werden filters stilletjes genegeerd.
  • DESCRIBE FLOW: De DESCRIBE FLOW opdracht is nu beschikbaar. Als u een tabel hebt met de naam flow, gebruik DESCRIBE schema.flow, DESCRIBE TABLE flow of DESCRIBE `flow` met backticks.
  • SpatialSQL-booleaanse setbewerkingen: ST_Difference, ST_Intersectionen ST_Union gebruik een nieuwe implementatie met de volgende verbeteringen:
    • Geldige invoergeometrieën produceren altijd een resultaat en veroorzaken geen fouten meer.
    • Ongeveer 2x snellere prestaties.
    • Resultaten worden genormaliseerd voor consistente, vergelijkbare uitvoer.
  • Uitzonderingstypen voor SQLSTATE: Uitzonderingstypen worden bijgewerkt ter ondersteuning van SQLSTATE. Als uw code uitzonderingen parseert door middel van tekenreeksvergelijking of specifieke uitzonderingstypen onderschept, werk uw foutafhandelingslogica bij.
  • Automatische typeverbreding bij streaming: Streamingbewerkingen op Delta-tabellen gaan automatisch om met typeverbreding van kolommen. Om handmatige bevestiging te vereisen, stelt u spark.databricks.delta.typeWidening.enableStreamingSchemaTracking in op true.

Nieuwe functies en verbeteringen

De volgende functies en verbeteringen zijn beschikbaar in deze release.

  • AutoLoader-bestandsevenementen standaard: Automatisch laden maakt standaard gebruik van bestandsevenementen bij het laden vanaf een externe locatie waarvoor bestandsevenementen zijn ingeschakeld, waardoor lijstbewerkingen en -kosten worden verminderd in vergelijking met mapvermeldingen. Zie Auto Loader met overzicht van bestandsevenementen. Als u in plaats daarvan de adreslijstvermelding wilt gebruiken, stelt u useManagedFileEvents in op false.

  • Schemaontwikkeling met INSERT: Gebruik de WITH SCHEMA EVOLUTION component met SQL-instructies INSERT om het schema van de doeltabel automatisch te ontwikkelen tijdens invoegbewerkingen. Ondersteund voor INSERT INTO, INSERT OVERWRITEen INSERT INTO ... REPLACE. Voorbeeld:

    INSERT WITH SCHEMA EVOLUTION INTO students TABLE visiting_students_with_additional_id;

  • Transacties met meerdere instructies voor Delta Sharing: Delta Sharing-tabellen die gebruikmaken van vooraf ondertekende URL- of cloudtokendelingsmodi bieden ondersteuning voor transacties met meerdere instructies. Bij eerste toegang binnen een transactie wordt de tabelversie vastgemaakt en opnieuw gebruikt voor alle volgende leesbewerkingen in die transactie.

  • parse_timestamp: De parse_timestamp SQL-functie parseert tijdstempeltekenreeksen met behulp van meerdere patronen, met ondersteuning voor Photon-engine voor verbeterde prestaties.

  • max_by en min_by met optioneel limit: de statistische functies max_by en min_by nu een optioneel derde argument limit accepteren (maximaal 100.000). Indien opgegeven, retourneren de functies een matrix van maximaal limit waarden, waardoor top-K- en bottom-K-query's zonder vensterfuncties of CTE's worden vereenvoudigd.

  • DATETIMEOFFSET voor Azure Synapse: het gegevenstype DATETIMEOFFSET wordt ondersteund voor Microsoft Azure Synapse-verbindingen.

  • Google BigQuery-tabelopmerkingen: Beschrijvingen van Google BigQuery-tabellen worden opgelost en weergegeven als tabelopmerkingen.

  • IGNORE NULLS / RESPECT NULLS voor array_agg en collect_list: de array_agg- en collect_list-aggregatiefuncties ondersteunen nu IGNORE NULLS- en RESPECT NULLS-clausules.

  • PIVOT aliassen: De PIVOT component ondersteunt nu aliassen, zodat u de naam van de expressies van draaitabelkolommen in de uitvoer kunt wijzigen.

  • SQL-scriptvariabelenCURSOR: SQL-scripting ondersteunt CURSOR nu variabelen voor het herhalen van een rij met queryresultaten per rij in een scriptblok.

  • Statistische functies voor vectorberekeningen: nieuwe statistische functies voor vectorberekeningen zijn beschikbaar: vector_avg, vector_sum, vector_norm en vector_normalize. Deze functies werken op dichte vectorkolommen en ondersteunen ML-workloads.

  • Trigger.AvailableNow in Python streaminglezers: Python streaminglezers voor gegevensbronnen ondersteunen nu Trigger.AvailableNow en Toegangsbeheer, waardoor eenmalige batchverwerking van alle beschikbare gegevens mogelijk is.

  • De state-herpartitionerings-API in PySpark: De state-herpartitionerings-API voor TransformWithState streaming-operators is nu naast Scala ook beschikbaar in PySpark. Zie statusherpartitionering op aanvraag voor stateful streaming-query's.

  • applyInPandas prestatieverbetering: Een 3x prestatieregressie in applyInPandas voor grote groepen is opgelost.

Databricks Runtime 18: 10 maart 2026

  • Foutberichten voor scalaire subquery’s die met EXEC IMMEDIATE worden gebruikt, geven nu duidelijker aan wat de specifieke oorzaak is.
  • Er is een racevoorwaarde opgelost in het comprimeren van controlepuntenlogboeken die niet-deterministisch gedrag in structured streaming-query's konden veroorzaken.
  • [Beveiligingsoplossing] Beveiligingsupdates van het besturingssysteem.

Databricks Runtime 18: 26 februari 2026

  • SET METADATA ON COLUMN en UNSET METADATA ON COLUMN SQL-opdrachten zijn nu beschikbaar voor het beheren van semantische metagegevens in tabelkolommen van Unity Catalog. Hiermee SET METADATA ON COLUMN voegt u eigenschappen (display_name, formaten synonyms) toe aan kolommen. Gebruik UNSET METADATA ON COLUMN deze optie om eerder ingestelde metagegevenseigenschappen te verwijderen.
  • DESCRIBE TABLE bevat nu een metadata kolom met semantische metagegevens op kolomniveau als een JSON-tekenreeks.
  • Er is een pySpark-importfout opgelost in Windows omgevingen die worden veroorzaakt door een ontbrekende UnixStreamServer.
  • [Beveiligingsoplossing] Beveiligingsupdates van het besturingssysteem.

Databricks Runtime 18: 19 februari 2026

  • Wanneer het schema van Excel-bestanden wordt afgeleid, worden tekstcellen nu afgeleid naar Spark StringType, met inachtneming van het in Excel ingestelde celtype. Eerder werden tekenreeksen met numerieke waarden automatisch omgezet in smallere typen zoals Long of Decimal. Werk de code bij die afhankelijk was van het eerdere gedrag.
  • DataFrame.toJSON() is nu beschikbaar in de Python Spark Connect-client.
  • [Beveiligingsoplossing] Beveiligingsupdates van het besturingssysteem.

Databricks Runtime 18: 27 januari 2026

  • Auto Loader rapporteert nu batchSizeNumFiles, batchSizeNumBytes en statussen voor bestandsverwerking (numFilesProcessed, numFilesSkippedCorrupted, numFilesSkippedMissing, numFilesUnknownState) als metrische gegevens.
  • INSERT INTO ... BY NAME ondersteunt nu de REPLACE WHERE component.
  • De naam van de configuratie-eigenschap spark.sql.xml.legacyXMLParser.enabled is gewijzigd in spark.sql.legacy.useLegacyXMLParser. Werk cluster- of sessieconfiguraties bij die gebruikmaken van de oude naam.
  • Wanneer spark.task.resource.gpu.amount deze groter is dan 1, start Torch Distributor nu één torchrun proces per GPU in plaats van per taak.
  • [Beveiligingsoplossing] Beveiligingsupdates van het besturingssysteem.

Databricks Runtime 18: 15 januari 2026

Databricks Runtime 18 is nu in functieontwikkeling, mogelijk gemaakt door Apache Spark 4.1.0. Deze versie bevat alle functies, verbeteringen en bugfixes van alle eerdere Databricks Runtime-releases.

Gedragswijzigingen

Bekijk de volgende wijzigingen, die van kracht worden wanneer clusters opnieuw worden opgestart in deze runtime.

  • JDK 21: Databricks Runtime 18 maakt gebruik van JDK 21 als de standaard-Java Development Kit. JDK 21 is algemeen beschikbaar en is een LTS-release (long-term support). Voorheen was de standaardwaarde JDK 17. Belangrijke wijzigingen:

    • Double.toString() en Float.toString() produceren nu de kortste unieke tekenreeksweergaven, die in sommige randgevallen kunnen verschillen van de JDK 17-uitvoer.
    • Thread.stop(), Thread.suspend()en Thread.resume() gooi nu UnsupportedOperationException.
    • Bijgewerkte lokale gegevens (CLDR v42) kunnen van invloed zijn op de indeling van datum, tijd en getallen.

    Als u compatibiliteitsproblemen ondervindt, kunt u terugvallen op JDK 17. Zie Een cluster maken met een specifieke JDK-versie voor meer informatie over het configureren van JDK-versies.

  • FSCK REPAIR TABLE: bevat nu een eerste stap voor het herstellen van metagegevens voordat u controleert op ontbrekende gegevensbestanden. De opdracht werkt op tabellen met beschadigde controlepunten of ongeldige partitiewaarden.

  • Nullabiliteit van Spark Connect Scala: de null-waarde van matrix- en kaarttypen blijft nu behouden voor getypte letterlijke waarden in de Spark Connect Scala-client. Voorheen waren elementen van matrices en waarden van kaarten altijd null-baar.

  • FSCK REPAIR TABLE DRY RUN: De dataFilePath kolom in het FSCK REPAIR TABLE DRY RUN uitvoerschema is nu nullable ter ondersteuning van het rapporteren van nieuwe probleemtypen waarbij het pad naar het gegevensbestand niet van toepassing is.

  • SHOW TABLES DROPPED: Houdt nu correct rekening met de LIMIT clausule.

  • Python UDF-uitvoering: Unity Catalog Python UDF's maken nu gebruik van Apache Arrow als standaardindeling voor uitwisseling, waardoor de algehele prestaties worden verbeterd. Als onderdeel van deze wijziging TIMESTAMP bevatten waarden die worden doorgegeven aan Python UDF's geen tijdzonegegevens meer in het kenmerk van datetime het tzinfo object. De tijdstempelwaarden zelf blijven in UTC, maar de metagegevens van de tijdzone worden nu verwijderd. Als uw UDF afhankelijk is van de tijdzonegegevens, herstelt u deze met date = date.replace(tzinfo=timezone.utc). Zie voor meer informatie tijdstempel-tijdzonegedrag voor invoer.

  • Tijd en VACUUM retentie: Azure Databricks blokkeert nu query's voor tijdreizen buiten de drempelwaarde voor deletedFileRetentionDuration voor alle tabellen. De VACUUM opdracht negeert het argument retentieduur, behalve wanneer de waarde 0 uur is. U kunt deletedFileRetentionDuration niet groter instellen dan logRetentionDuration of omgekeerd.

  • BinaryType in PySpark: In PySpark wordt BinaryType nu consistent toegewezen aan Python bytes. Eerder heeft PySpark BinaryType toegewezen aan bytes of bytearray afhankelijk van de context. Als u het oude gedrag wilt herstellen, stelt u in op spark.sql.execution.pyspark.binaryAsBytesfalse.

  • NULL-structs in Delta MERGE en UPDATE: Worden nu als NULL behouden in Delta MERGE, UPDATE en streamende schrijfbewerkingen die typeconversies van structuren bevatten. Voorheen werden NULL-structuren uitgebreid tot structuren met NULL-velden.

  • Materialisatie van partitiekolommen: Gepartitioneerde Delta-tabellen materialiseren nu partitiekolommen in nieuw geschreven Parquet-gegevensbestanden. Voorheen werden partitiewaarden opgeslagen in de metagegevens van het Delta-transactielogboek en weergegeven in mappaden, maar niet als kolommen in de Parquet-bestanden zelf geschreven. Deze wijziging is afgestemd op het gedrag van Apache Iceberg en UniForm en kan van invloed zijn op workloads die rechtstreeks Parquet-bestanden lezen die zijn geschreven door Delta Lake.

  • Tijdstempelpartitietijdzone: Tijdstempelpartitiewaarden zijn eerder geconverteerd naar UTC met behulp van de JVM-tijdzone in plaats van de spark.sql.session.timeZone configuratie. Tijdstempelpartitiewaarden worden nu correct aangepast met behulp van de instelling voor de spark-sessietijdzone.

  • DESCRIBE TABLE metagegevenskolom: De uitvoer van DESCRIBE TABLE [EXTENDED] nu bevat een nieuwe metadata kolom voor alle tabeltypen. Deze kolom bevat semantische metagegevens (weergavenaam, opmaak en synoniemen) die in de tabel zijn gedefinieerd als een JSON-tekenreeks.

Nieuwe functies en verbeteringen

De volgende functies en verbeteringen zijn beschikbaar in deze release.

  • SQL-scripting: de sql-scriptfunctie is nu algemeen beschikbaar.
  • Gedeelde isolatie voor Unity Catalog Python UDF’s: Unity Catalog Python UDF’s met dezelfde eigenaar kunnen nu standaard een isolatieomgeving delen. Dit verbetert de prestaties en vermindert het geheugengebruik door het aantal afzonderlijke omgevingen te verminderen dat wordt gestart. Voeg de STRICT ISOLATION kenmerkcomponent toe om ervoor te zorgen dat een UDF altijd wordt uitgevoerd in een volledig geïsoleerde omgeving. Zie Omgevingsisolatie.
  • SQL-vensterfuncties in metrische weergaven: u kunt nu SQL-vensterfuncties in metrische weergaven gebruiken om lopende totalen, classificaties en andere op vensters gebaseerde berekeningen te berekenen.
  • Dynamische shufflepartities in staatloze streaming: U kunt nu het aantal shufflepartities in staatloze streamingquery’s wijzigen zonder de query opnieuw te starten.
  • AQE en AOS in staatloze streaming: Adaptive Query Execution (AQE) en automatisch geoptimaliseerde shuffle (AOS) worden nu ondersteund in staatloze streamingquery's.
  • Parametermarkeringen: U kunt nu benoemde (:param) en niet-benoemde (?) parametermarkeringen gebruiken, vrijwel overal waar een letterlijke waarde van het juiste type kan worden gebruikt. Dit omvat DDL-instructies zoals CREATE VIEW v AS SELECT ? AS c1, kolomtypen DECIMAL(:p, :s) of COMMENT ON t IS :comment. Zie parametermarkeringen voor meer informatie.
  • IDENTIFIER component: Het bereik van de IDENTIFIER component, die tekenreeksen naar SQL-objectnamen cast, is uitgebreid naar vrijwel overal waar een id is toegestaan. Zie IDENTIFIER clausule voor meer informatie.
  • BITMAP_AND_AGG: De bestaande bibliotheek met BITMAP functies bevat nu een nieuwe BITMAP_AND_AGG functie.
  • Theta-schetsfuncties: U kunt nu een nieuwe bibliotheek met functies gebruiken voor geschatte afzonderlijke aantallen en setbewerkingen met behulp van Datasketches Theta Sketch. Zie theta_sketch_agg en gerelateerde functies.
  • KLL-schetsfuncties: U kunt nu een nieuwe bibliotheek met functies gebruiken voor geschatte kwantielberekeningen met behulp van KLL-schetsen. Zie kll_sketch_agg_bigint en gerelateerde functies.
  • Nieuwe georuimtelijke functies: st_azimuth, st_boundary, st_closestpoint en st_geogfromewkt zijn nu beschikbaar.
  • GeometryType en GeographyType: Apache Spark ondersteunt nu systeemeigen GeometryType en GeographyType gegevenstypen in pySpark en Java API's. Deze typen ondersteunen serialisatie van pijlen en Parquet-lees- en schrijfbewerkingen en verschillen van de georuimtelijke SQL-functies.
  • approx_top_k: De nieuwe approx_top_k-aggregatiefunctie geeft met behulp van een ruimte-efficiënt sketchalgoritme de ongeveer K meest voorkomende waarden in een kolom terug.
  • Spark Connect JDBC-stuurprogramma: Apache Spark bevat nu een JDBC-stuurprogramma voor Spark Connect, waardoor clients en hulpprogramma's op basis van JDBC verbinding kunnen maken met Spark via het Spark Connect-protocol.
  • Iterator[pandas.DataFrame] in applyInPandas: DataFrame.applyInPandas accepteert nu een functie met een Iterator[pandas.DataFrame] handtekening, waardoor overhead wordt verminderd bij het verwerken van grote groepen door gegevens in batches te streamen.
  • Checkbeperkingen: ondersteunen nu vergelijkingen met null-waarden in de constraintexpressie.
  • API voor herverdeling van status voor TransformWithState: Er is een nieuwe API voor herverdeling van status beschikbaar voor TransformWithState streaming-operators in Scala, waarmee u de sleutelverdeling van statusgegevens bij het opnieuw starten van query's kunt wijzigen. Zie statusherpartitionering op aanvraag voor stateful streaming-query's.
  • Python 3.14 in pyspark-connect: pyspark-client en pyspark-connect ondersteunt nu Python 3.14.

Bibliotheekverbeteringen

  • Bijgewerkte Python-bibliotheken:

    • anyio van 4.6.2 tot 4.7.0
    • asttokens van 2.0.5 tot 3.0.0
    • azure-core van 1.34.0 tot 1.37.0
    • azure-mgmt-core van 1.5.0 tot 1.6.0
    • azure-storage-blob van 12.23.0 tot 12.28.0
    • azure-storage-file-datalake van 12.17.0 tot 12.22.0
    • boto3 van 1.36.2 tot 1.40.45
    • botocore van 1.36.3 tot 1.40.45
    • certifi van 2025.1.31 tot 2025.4.26
    • klik van 8.1.7 tot 8.1.8
    • cryptografie van 43.0.3 tot 44.0.1
    • Cython van 3.0.12 tot 3.1.5
    • databricks-sdk van 0.49.0 tot 0.67.0
    • Afgeschaft van 1.2.13 tot 1.2.18
    • wordt uitgevoerd van 0.8.3 tot 1.2.0
    • fastapi van 0.115.12 tot 0.128.0
    • filelock van 3.18.0 tot 3.17.0
    • google-api-core van 2.20.0 tot 2.28.1
    • google-auth van 2.40.0 tot 2.47.0
    • google-cloud-core van 2.4.3 tot 2.5.0
    • google-cloud-storage van 3.1.0 tot 3.7.0
    • google-crc32c van 1.7.1 tot 1.8.0
    • google-resumable-media van 2.7.2 tot 2.8.0
    • h11 van 0.14.0 tot 0.16.0
    • httpcore van 1.0.2 tot 1.0.9
    • httpx van 0.27.0 tot 0.28.1
    • isodate van 0.6.1 tot 0.7.2
    • Jinja2 van 3.1.5 tot 3.1.6
    • jupyter-events van 0.10.0 tot 0.12.0
    • jupyter-lsp van 2.2.0 tot 2.2.5
    • jupyter_server van 2.14.1 tot 2.15.0
    • jupyter_server_terminals van 0.4.4 tot 0,5.3
    • Versie-update van mistune van 2.0.4 naar 3.1.2
    • mlflow-skinny van 3.0.1 tot 3.8.1
    • mmh3 van 5.1.0 tot 5.2.0
    • msal van 1.32.3 tot 1.34.0
    • nbclient van 0.8.0 tot 0.10.2
    • nbconvert van versie 7.16.4 naar 7.16.6
    • nodeenv van 1.9.1 tot 1.10.0
    • notebook_shim van 0.2.3 naar 0.2.4
    • opentelemetry-api van 1.32.1 tot 1.39.1
    • opentelemetry-sdk van 1.32.1 tot 1.39.1
    • opentelemetry-semantic-conventions van 0.53b1 tot 0.60b1
    • platformdirs van 3.10.0 tot 4.3.7
    • prometheus_client van 0.21.0 tot 0.21.1
    • proto-plus van 1.26.1 tot 1.27.0
    • psycopg2 van 2.9.3 tot 2.9.11
    • pyarrow van 19.0.1 tot 21.0.0
    • Pygments van 2.15.1 tot 2.19.1
    • pyiceberg van versie 0.9.0 naar versie 0.10.0
    • python-lsp-server van 1.12.0 tot 1.12.2
    • touw van 1.12.0 tot 1.13.0
    • s3transfer van 0.11.3 tot 0.14.0
    • scipy van 1.15.1 tot 1.15.3
    • setuptools van 74.0.0 tot 78.1.1
    • six van 1.16.0 naar 1.17.0
    • sqlparse van 0.5.3 tot 0.5.5
    • stack-data van 0.2.0 tot 0.6.3
    • starlette bijgewerkt van versie 0.46.2 naar versie 0.50.0
    • tornado van 6.4.2 tot 6.5.1
    • types-python-dateutil van 2.9.0.20241206 tot 2.9.0.20251115
    • uvicorn van 0.34.2 tot 0.40.0
    • webcolors versie 24.11.1 naar versie 25.10.0

  • Bijgewerkte R-bibliotheken:

    • pijl van 19.0.1 tot 22.0.0
    • basis van 4.4.2 tot 4.5.1
    • bigD van 0.3.0 tot 0.3.1
    • bezem van 1.0.7 tot 1.0.10
    • bijwerken van 0.7.2 naar 0.7.3
    • commonmark van 1.9.5 naar 2.0.0
    • compiler van 4.4.2 tot 4.5.1
    • referenties van 2.0.2 naar 2.0.3
    • curl van 6.4.0 naar 7.0.0
    • data.table van 1.17.0 tot 1.17.8
    • gegevenssets van 4.4.2 tot 4.5.1
    • dbplyr van 2.5.0 tot 2.5.1
    • devtools van 2.4.5 tot 2.4.6
    • diffobj van 0.3.5 tot 0.3.6
    • Digest van versie 0.6.37 naar versie 0.6.39
    • downlit van 0.4.4 tot 0.4.5
    • dtplyr van 1.3.1 tot 1.3.2
    • evalueren van versie 1.0.3 naar 1.0.5
    • fansi van 1.0.6 tot 1.0.7
    • forcats van 1.0.0 tot 1.0.1
    • fs van 1.6.5 tot 1.6.6
    • toekomst van 1.34.0 tot 1.68.0
    • future.apply van 1.11.3 naar 1.20.0
    • gargle van versie 1.5.2 naar 1.6.0
    • bijgewerkt van 2.1.4 naar 2.2.0
    • ggplot2 van 3.5.1 tot 4.0.1
    • gh van 1.4.1 tot 1.5.0
    • git2r van 0.35.0 tot 0.36.2
    • glmnet van 4.1-8 tot 4.1-10
    • googledrive van 2.1.1 tot 2.1.2
    • googlesheets4 van 1.1.1 tot 1.1.2
    • afbeeldingen van 4.4.2 tot 4.5.1
    • grDevices bijgewerkt van 4.4.2 naar 4.5.1
    • raster van 4.4.2 tot 4.5.1
    • gt van 0.11.1 tot 1.1.0
    • hardhat van 1.4.1 tot 1.4.2
    • haven van 2.5.4 tot 2.5.5
    • hms van 1.1.3 tot 1.1.4
    • httpuv van 1.6.15 tot 1.6.16
    • httr2 van 1.1.1 tot 1.2.1
    • jsonlite van 1.9.1 tot 2.0.0
    • later van 1.4.1 tot 1.4.4
    • lava van 1.8.1 tot 1.8.2
    • listenv van 0.9.1 tot 0.10.0
    • magrittr van 2.0.3 tot 2.0.4
    • markdown van 1.13 tot 2.0
    • methoden van 4.4.2 tot 4.5.1
    • miniUI van 0.1.1.1 tot 0.1.2
    • mlflow van 2.20.4 tot 3.6.0
    • openssl van 2.3.3 tot 2.3.4
    • parallel van 4.4.2 tot 4.5.1
    • parallel vanaf 1.42.0 tot 1.45.1
    • pijler van 1.11.0 tot 1.11.1
    • pkgbuild van 1.4.6 tot 1.4.8
    • pkgdown van 2.1.1 tot 2.2.0
    • pkgload van 1.4.0 tot 1.4.1
    • pROC van 1.18.5 tot 1.19.0.1
    • prodlim van 2024.06.25 tot 2025.04.28
    • progressr van 0.15.1 naar 0.18.0
    • belooft van 1.3.2 tot 1.5.0
    • ps van 1.9.0 tot 1.9.1
    • purrr bijwerken van 1.0.4 naar 1.2.0
    • ragg van 1.3.3 tot 1.5.0
    • Rcpp van 1.0.14 tot 1.1.0
    • readr van 2.1.5 tot 2.1.6
    • recepten van 1.2.0 tot 1.3.1
    • reshape2 van 1.4.4 naar 1.4.5
    • rmarkdown van versie 2.29 naar versie 2.30
    • roxygen2 van 7.3.2 tot 7.3.3
    • rprojroot van 2.0.4 tot 2.1.1
    • RSQLite van 2.3.9 tot 2.4.4
    • Versies van 2.1.2 tot 3.0.0
    • rvest van 1.0.4 tot 1.0.5
    • sass van 0.4.9 tot 0.4.10
    • schaalt van 1.3.0 tot 1.4.0
    • glanzend van 1.10.0 tot 1.11.1
    • sparklyr van 1.9.1 tot 1.9.3
    • SparkR van 4.0.0 tot 4.1.0
    • sparsevctrs van 0.3.1 tot 0.3.4
    • splines van 4.4.2 tot 4.5.1
    • statistieken van 4.4.2 tot 4.5.1
    • stats4 van 4.4.2 tot 4.5.1
    • stringr van 1.5.1 naar 1.6.0
    • systemfonts van 1.2.1 tot 1.3.1
    • tcltk van 4.4.2 tot 4.5.1
    • testthat van 3.2.3 tot 3.3.0
    • textshaping versie 1.0.0 tot 1.0.4
    • timeDate van 4041.110 tot 4051.111
    • tinytex van 0,56 tot 0,58
    • hulpprogramma's van 4.4.2 tot 4.5.1
    • usethis van 3.1.0 naar 3.2.1
    • utiliteiten van 4.4.2 tot 4.5.1
    • V8 van 6.0.2 tot 8.0.1
    • vroom van 1.6.5 tot 1.6.6
    • waldo van 0.6.1 tot 0.6.2
    • xfun van 0,51 tot 0,54
    • xml2 van 1.3.8 tot 1.5.0
    • zeallot van 0.1.0 tot 0.2.0
    • zip van 2.3.2 naar 2.3.3

  • Bijgewerkte Java-bibliotheken:

    • com.amazonaws.amazon-kinesis-client van 1.12.0 tot 1.15.3
    • com.amazonaws.aws-java-sdk-autoscaling van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-cloudformation van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-cloudfront van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-cloudhsm van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-cloudsearch van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-cloudtrail van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-cloudwatch van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-cloudwatchmetrics van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-codedeploy bijgewerkt van 1.12.638 naar 1.12.681
    • com.amazonaws.aws-java-sdk-cognitoidentity van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-cognitosync van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-config van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-core van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-datapipeline van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-directconnect van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-directory van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-dynamodb van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-ec2 van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-ecs van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-efs van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-elasticache van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-elasticbeanstalk van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-elasticloadbalancing van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-elastictranscoder van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-emr van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-glacier van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-glue van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-iam van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-importexport: van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-kinesis van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-kms van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-lambda van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-logs van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-machinelearning van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-opsworks van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-rds van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-redshift van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-route53 van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-s3 van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-ses van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-simpledb van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-simpleworkflow van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-sns van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-sqs van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-ssm van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-storagegateway van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-sts van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-support van 1.12.638 tot 1.12.681
    • com.amazonaws.aws-java-sdk-workspaces van 1.12.638 tot 1.12.681
    • com.amazonaws.jmespath-java van 1.12.638 tot 1.12.681
    • com.databricks.databricks-sdk-java van 0.27.0 tot 0.53.0
    • com.fasterxml.jackson.datatype.jackson-datatype-jsr310 van 2.18.2 tot 2.18.3
    • com.github.luben.zstd-jni van 1.5.6-10 tot 1.5.7-6
    • com.google.flatbuffers.flatbuffers-java van 24.3.25 tot 25.2.10
    • com.google.guava.failureaccess van 1.0.2 tot 1.0.3
    • com.google.guava.guava bijwerken van 33.4.0-jre naar 33.4.8-jre
    • com.microsoft.sqlserver.mssql-jdbc van 11.2.3.jre8 tot 12.8.0.jre8
    • commons-cli.commons-cli van 1.9.0 tot 1.10.0
    • commons-codec.commons-codec van 1.17.2 tot 1.19.0
    • commons-fileupload.commons-fileupload van 1.5 tot 1.6.0
    • commons-io.commons-io van 2.18.0 tot 2.21.0
    • dev.netlib.arpack van 3.0.3 naar 3.0.4
    • dev.ludovic.netlib.blas van 3.0.3 tot 3.0.4
    • dev.ontwikkeling.netlib.lapack bijwerken van 3.0.3 naar 3.0.4
    • io.dropwizard.metrics.metrics-annotatie van 4.2.30 tot 4.2.37
    • io.dropwizard.metrics.metrics-core van 4.2.30 tot 4.2.37
    • io.dropwizard.metrics.metrics-graphite van 4.2.30 tot 4.2.37
    • io.dropwizard.metrics.metrics-healthchecks van 4.2.30 tot 4.2.37
    • io.dropwizard.metrics.metrics-jmx bijgewerkt van versie 4.2.30 naar 4.2.37
    • io.dropwizard.metrics.metrics-json update van versie 4.2.30 naar versie 4.2.37
    • io.dropwizard.metrics.metrics-jvm van 4.2.30 tot 4.2.37
    • io.dropwizard.metrics.metrics-servlets van 4.2.30 tot 4.2.37
    • io.delta.delta-sharing-client_2.13 van 1.3.10 tot 1.3.11
    • io.netty.netty-all van 4.1.118.Final tot 4.2.7.Final
    • io.netty.netty-buffer van 4.1.118.Final naar 4.2.7.Final
    • io.netty.netty-codec van 4.1.118.Final tot 4.2.7.Final
    • io.netty.netty-codec-http van 4.1.118.Final tot 4.2.7.Final
    • io.netty.netty-codec-http2 van 4.1.118.Final naar 4.2.7.Final
    • io.netty.netty-codec-socks van 4.1.118.Final naar 4.2.7.Final
    • io.netty.netty-common van 4.1.118.Final tot 4.2.7.Final
    • io.netty.netty-handler van 4.1.118.Final naar 4.2.7.Final
    • io.netty.netty-handler-proxy van 4.1.118.Final tot 4.2.7.Final
    • io.netty.netty-resolver van versie 4.1.118.Final naar versie 4.2.7.Final
    • io.netty.netty-tcnative-boringssl-static van 2.0.70.Final-db-r0-windows-x86_64 tot 2.0.74.Final-db-r0-windows-x86_64
    • io.netty.netty-tcnative-classes van 2.0.70.Final naar 2.0.74.Final
    • io.netty.netty-transport van 4.1.118.Final naar 4.2.7.Final
    • io.netty.netty-transport-classes-epoll van 4.1.118.Final tot 4.2.7.Final
    • io.netty.netty-transport-classes-kqueue van 4.1.118.Final tot 4.2.7.Final
    • io.netty.netty-transport-native-epoll van 4.1.118.Final-linux-x86_64 naar 4.2.7.Final-linux-x86_64
    • io.netty.netty-transport-native-kqueue van 4.1.118.Final-osx-x86_64 naar 4.2.7.Final-osx-x86_64
    • io.netty.netty-transport-native-unix-common van 4.1.118.Final tot 4.2.7.Final
    • joda-time.joda-time van 2.13.0 tot 2.14.0
    • org.apache.arrow.arrow-format van 18.2.0 naar 18.3.0
    • org.apache.arrow.arrow-memory-core van 18.2.0 tot 18.3.0
    • org.apache.arrow.arrow-memory-netty van 18.2.0 naar 18.3.0
    • org.apache.arrow.arrow-memory-netty-buffer-patch van 18.2.0 naar 18.3.0
    • org.apache.arrow.arrow-vector van 18.2.0 naar 18.3.0
    • org.apache.avro.avro van 1.12.0 tot 1.12.1
    • org.apache.avro.avro-ipc van 1.12.0 tot 1.12.1
    • org.apache.avro.avro-mapred van 1.12.0 tot 1.12.1
    • org.apache.commons.commons-collections4 van 4.4 tot 4.5.0
    • org.apache.commons.commons-compress van 1.27.1 tot 1.28.0
    • org.apache.commons.commons-lang3 van 3.17.0 tot 3.19.0
    • org.apache.commons.commons-text van 1.13.0 tot 1.14.0
    • org.apache.curator.curator-client van 5.7.1 tot 5.9.0
    • org.apache.curator.curator-framework van versie 5.7.1 naar versie 5.9.0
    • org.apache.curator.curator-recipes van 5.7.1 tot 5.9.0
    • org.apache.datasketches.datasketches-java van 6.1.1 tot 6.2.0
    • org.apache.hadoop.hadoop-client-runtime van versie 3.4.1 naar versie 3.4.2
    • org.apache.orc.orc-core van 2.1.1-shaded-protobuf naar 2.2.0-shaded-protobuf
    • org.apache.orc.orc-format van 1.1.0-shaded-protobuf naar 1.1.1-shaded-protobuf
    • org.apache.orc.orc-mapreduce van 2.1.1-shaded-protobuf naar 2.2.0-shaded-protobuf
    • org.apache.orc.orc-shims van 2.1.1 tot 2.2.0
    • org.apache.xbean.xbean-asm9-shaded bijgewerkt van versie 4.26 naar versie 4.28
    • org.apache.zookeeper.zookeeper van 3.9.3 tot 3.9.4
    • org.apache.zookeeper.zookeeper-jute van 3.9.3 naar 3.9.4
    • org.eclipse.jetty.jetty-client van 9.4.53.v20231009 tot 10.0.26
    • org.eclipse.jetty.jetty-http van 9.4.53.v20231009 tot 10.0.26
    • org.eclipse.jetty.jetty-io van 9.4.53.v20231009 tot 10.0.26
    • org.eclipse.jetty.jetty-jndi van 9.4.53.v20231009 tot 10.0.26
    • org.eclipse.jetty.jetty-plus van 9.4.53.v20231009 tot 10.0.26
    • org.eclipse.jetty.jetty-proxy van 9.4.53.v20231009 tot 10.0.26
    • org.eclipse.jetty.jetty-security van 9.4.53.v20231009 tot 10.0.26
    • org.eclipse.jetty.jetty-server van 9.4.53.v20231009 tot 10.0.26
    • org.eclipse.jetty.jetty-servlet van 9.4.53.v20231009 tot 10.0.26
    • org.eclipse.jetty.jetty-servlets van 9.4.53.v20231009 tot 10.0.26
    • org.eclipse.jetty.jetty-util van 9.4.53.v20231009 tot 10.0.26
    • org.eclipse.jetty.jetty-webapp van 9.4.53.v20231009 tot 10.0.26
    • org.eclipse.jetty.jetty-xml van 9.4.53.v20231009 tot 10.0.26
    • org.mlflow.mlflow-spark_2.13 van 2.9.1 tot 2.22.1
    • org.objenesis.objenesis van 3.3 tot 3.4
    • org.scala-lang.modules.scala-xml_2.13 van 2.3.0 tot 2.4.0

Ondersteuning voor Databricks ODBC-/JDBC-stuurprogramma's

Databricks ondersteunt ODBC-/JDBC-stuurprogramma's die in de afgelopen 2 jaar zijn uitgebracht. Download de onlangs uitgebrachte stuurprogramma's en upgrade (download ODBC, download JDBC).

Systeemomgeving

  • Besturingssysteem: Ubuntu 24.04.4 LTS
  • Java: Zulu21.42+19-CA
  • Scala: 2.13.16
  • Python: 3.12.3
  • R: 4.5.1
  • Delta Lake: 4.2.0

Geïnstalleerde Python-bibliotheken

Bibliotheek Versie Bibliotheek Versie Bibliotheek Versie
aiohappyeyeballs 2.4.4 aiohttp 3.11.10 aiosignal 1.2.0
geannoteerd document 0.0.4 annotated-types 0.7.0 anyio 4.7.0
argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0 arro3-core 0.6.5
arrow 1.3.0 asttokens 3.0.0 astunparse 1.6.3
async-lru 2.0.4 attrs 24.3.0 autocommand 2.2.2
azure-common 1.1.28 azure-core 1.37.0 azure-identity 1.20.0
azure-mgmt-core 1.6.0 azure-mgmt-web 8.0.0 azure-storage-blob 12.28.0
azure-storage-file-datalake 12.22.0 Babel 2.16.0 backports.tarfile 1.2.0
beautifulsoup4 4.12.3 black 24.10.0 bleach 6.2.0
blinker 1.7.0 boto3 1.40.45 botocore 1.40.45
cachetools 5.5.1 certifi 2025.4.26 cffi 1.17.1
chardet 4.0.0 charset-normalizer 3.3.2 click 8.1.8
cloudpickle 3.0.0 comm 0.2.1 contourpy 1.3.1
cryptography 44.0.1 cycler 0.11.0 Cython 3.1.5
databricks-agents 1.9.1 databricks-sdk 0.67.0 dataclasses-json 0.6.7
dbus-python 1.3.2 debugpy 1.8.11 decorator 5.1.1
defusedxml 0.7.1 deltalake 1.1.4 Deprecated 1.2.18
distlib 0.3.9 docstring-to-markdown 0.11 executing 1.2.0
facets-overview 1.1.1 fastapi 0.128.0 fastjsonschema 2.21.1
filelock 3.17.0 fonttools 4.55.3 fqdn 1.5.1
bevroren lijst 1.5.0 fsspec 2023.5.0 gitdb 4.0.11
GitPython 3.1.43 google-api-core 2.28.1 google-auth 2.47.0
google-cloud-core 2.5.0 google-cloud-storage 3.7.0 google-crc32c 1.8.0
google-resumable-media 2.8.0 googleapis-common-protos 1.65.0 grpcio 1.67.0
grpcio-status 1.67.0 h11 0.16.0 hf-xet 1.2.0
httpcore 1.0.9 httplib2 0.20.4 httpx 0.28.1
huggingface_hub 1.2.4 idna 3.7 importlib_metadata 8.5.0
inflect 7.3.1 iniconfig 1.1.1 ipyflow-core 0.0.209
ipykernel 6.29.5 ipython 8.30.0 ipython-genutils 0.2.0
ipywidgets 7.8.1 isodate 0.7.2 isoduration 20.11.0
jaraco.collections 5.1.0 jaraco.context 5.3.0 jaraco.functools 4.0.1
jaraco.text 3.12.1 jedi 0.19.2 Jinja2 3.1.6
jiter 0.12.0 jmespath 1.0.1 joblib 1.4.2
json5 0.9.25 jsonpatch 1,33 jsonpointer 3.0.0
jsonschema 4.23.0 jsonschema-specifications 2023.7.1 jupyter-events 0.12.0
jupyter-lsp 2.2.5 jupyter_client 8.6.3 jupyter_core 5.7.2
jupyter_server 2.15.0 jupyter_server_terminals 0.5.3 jupyterlab 4.3.4
jupyterlab_pygments 0.3.0 jupyterlab_server 2.27.3 jupyterlab_widgets 1.1.11
kiwisolver 1.4.8 langchain-core 1.2.6 langchain-openai 1.1.6
langsmith 0.6.1 launchpadlib 1.11.0 lazr.restfulclient 0.14.6
lazr.uri 1.0.6 litellm 1.75.9 markdown-it-py 2.2.0
MarkupSafe 3.0.2 spekje 3.26.2 matplotlib 3.10.0
matplotlib-inline 0.1.7 mccabe 0.7.0 mdurl 0.1.0
mistune 3.1.2 mlflow-skinny 3.8.1 mmh3 5.2.0
more-itertools 10.3.0 msal 1.34.0 msal-extensions 1.3.1
meervoudig woordenboek 6.1.0 mypy-extensions 1.0.0 nbclient 0.10.2
nbconvert 7.16.6 nbformat 5.10.4 nest-asyncio 1.6.0
nodeenv 1.10.0 notebook 7.3.2 notebook_shim 0.2.4
numpy 2.1.3 oauthlib 3.2.2 openai 2.14.0
opentelemetry-api 1.39.1 opentelemetry-proto 1.39.1 opentelemetry-sdk 1.39.1
opentelemetry-semantic-conventions 0.60b1 orjson 3.11.5 overrides 7.4.0
packaging 24.2 pandas 2.2.3 pandocfilters 1.5.0
parso 0.8.4 pathspec 0.10.3 patsy 1.0.1
pexpect 4.8.0 pillow 11.1.0 pip 25.0.1
platformdirs 4.3.7 plotly 5.24.1 pluggy 1.5.0
prometheus_client 0.21.1 prompt-toolkit 3.0.43 propcache 0.3.1
proto-plus 1.27.0 protobuf 5.29.4 psutil 5.9.0
psycopg2 2.9.11 ptyprocess 0.7.0 pure-eval 0.2.2
pyarrow 21.0.0 pyasn1 0.4.8 pyasn1-modules 0.2.8
pyccolo 0.0.71 pycparser 2.21 pydantic 2.10.6
pydantic_core 2.27.2 pyflakes 3.2.0 Pygments 2.19.1
PyGObject 3.48.2 pyiceberg 0.10.0 PyJWT 2.10.1
pyodbc 5.2.0 pyparsing 3.2.0 pyright 1.1.394
pyroaring 1.0.3 pytest 8.3.5 python-dateutil 2.9.0.post0
python-dotenv 1.2.1 python-json-logger 3.2.1 python-lsp-jsonrpc 1.1.2
python-lsp-server 1.12.2 pytoolconfig 1.2.6 pytz 2024.1
PyYAML 6.0.2 pyzmq 26.2.0 referencing 0.30.2
regex 2024.11.6 requests 2.32.3 requests-toolbelt 1.0.0
rfc3339-validator 0.1.4 rfc3986-validator 0.1.1 rich 13.9.4
rope 1.13.0 rpds-py 0.22.3 rsa 4.9.1
s3transfer 0.14.0 scikit-learn 1.6.1 scipy 1.15.3
seaborn 0.13.2 Send2Trash 1.8.2 setuptools 78.1.1
shellingham 1.5.4 six 1.17.0 smmap 5.0.0
sniffio 1.3.0 sortedcontainers 2.4.0 soupsieve 2,5
sqlparse 0.5.5 ssh-import-id 5.11 stack-data 0.6.3
starlette 0.50.0 strictyaml 1.7.3 tenacity 9.0.0
terminado 0.17.1 threadpoolctl 3.5.0 tiktoken 0.12.0
tinycss2 1.4.0 tokenize_rt 6.1.0 tokeniseerders 0.22.2
tomli 2.0.1 tornado 6.5.1 tqdm 4.67.1
traitlets 5.14.3 typeguard 4.3.0 typer-slim 0.21.1
types-python-dateutil 2.9.0.20251115 Typeringsinspectie 0.9.0 typing_extensions 4.12.2
tzdata 2024.1 ujson 5.10.0 unattended-upgrades 0.1
uri-template 1.3.0 urllib3 2.3.0 uuid_utils 0.12.0
uvicorn 0.40.0 virtualenv 20.29.3 wadllib 1.3.6
wcwidth 0.2.5 webcolors 25.10.0 webencodings 0.5.1
websocket-client 1.8.0 whatthepatch 1.0.2 wheel 0.45.1
wanneer 0.7.3 widgetsnbextension 3.6.6 wrapt 1.17.0
yapf 0.40.2 yarl 1.18.0 zipp 3.21.0
zstandard 0.23.0

Geïnstalleerde R-bibliotheken

R-bibliotheken worden geïnstalleerd vanuit de Posit Pakketbeheer CRAN-momentopname op PACKAGES.

Bibliotheek Versie Bibliotheek Versie Bibliotheek Versie
arrow 22.0.0 askpass 1.2.1 assertthat 0.2.1
backports 1.5.0 base 4.5.1 base64enc 0.1-3
bigD 0.3.1 bit 4.6.0 bit64 4.6.0-1
bitops 1.0-9 blob 1.2.4 boot 1.3-30
brew 1.0-10 brio 1.1.5 broom 1.0.10
bslib 0.9.0 cachem 1.1.0 callr 3.7.6
Caret 7.0-1 cellranger 1.1.0 chron 2.3-62
class 7.3-22 cli 3.6.5 clipr 0.8.0
clock 0.7.3 cluster 2.1.6 codetools 0.2-20
commonmark 2.0.0 compiler 4.5.1 config 0.3.2
conflicted 1.2.0 cpp11 0.5.2 crayon 1.5.3
aanmeldingsgegevens 2.0.3 curl 7.0.0 data.table 1.17.8
datasets 4.5.1 DBI 1.2.3 dbplyr 2.5.1
desc 1.4.3 devtools 2.4.6 diagram 1.6.5
diffobj 0.3.6 digest 0.6.39 downlit 0.4.5
dplyr 1.1.4 dtplyr 1.3.2 e1071 1.7-16
ellipsis 0.3.2 evaluate 1.0.5 fansi 1.0.7
farver 2.1.2 fastmap 1.2.0 fontawesome 0.5.3
forcats 1.0.1 foreach 1.5.2 foreign 0.8-86
fs 1.6.6 future 1.68.0 future.apply 1.20.0
gargle 1.6.0 generics 0.1.4 gert 2.2.0
ggplot2 4.0.1 gh 1.5.0 git2r 0.36.2
gitcreds 0.1.2 glmnet 4.1-10 globals 0.18.0
glue 1.8.0 googledrive 2.1.2 googlesheets4 1.1.2
gower 1.0.2 graphics 4.5.1 grDevices 4.5.1
grid 4.5.1 gridExtra 2.3 gsubfn 0.7
gt 1.1.0 gtable 0.3.6 hardhat 1.4.2
haven 2.5.5 highr 0.11 hms 1.1.4
htmltools 0.5.8.1 htmlwidgets 1.6.4 httpuv 1.6.16
httr 1.4.7 httr2 1.2.1 ids 1.0.1
ini 0.3.1 ipred 0.9-15 isoband 0.2.7
iterators 1.0.14 jquerylib 0.1.4 jsonlite 2.0.0
juicyjuice 0.1.0 KernSmooth 2.23-22 knitr 1.50
labeling 0.4.3 later 1.4.4 lattice 0.22-5
lava 1.8.2 lifecycle 1.0.4 listenv 0.10.0
litedown 0.8 lubridate 1.9.4 magrittr 2.0.4
markdown 2.0 MASS 7.3-60.0.1 Matrix 1.6-5
memoise 2.0.1 methods 4.5.1 mgcv 1.9-1
mime 0.13 miniUI 0.1.2 mlflow 3.6.0
ModelMetrics 1.2.2.2 modelr 0.1.11 nlme 3.1-164
nnet 7.3-19 numDeriv 2016.8-1.1 openssl 2.3.4
otel 0.2.0 parallel 4.5.1 parallelly 1.45.1
pillar 1.11.1 pkgbuild 1.4.8 pkgconfig 2.0.3
pkgdown 2.2.0 pkgload 1.4.1 plogr 0.2.0
plyr 1.8.9 praise 1.0.0 prettyunits 1.2.0
pROC 1.19.0.1 processx 3.8.6 prodlim 2025.04.28
profvis 0.4.0 progress 1.2.3 progressr 0.18.0
promises 1.5.0 proto 1.0.0 proxy 0.4-27
ps 1.9.1 purrr 1.2.0 R6 2.6.1
ragg 1.5.0 randomForest 4.7-1.2 rappdirs 0.3.3
rcmdcheck 1.4.0 RColorBrewer 1.1-3 Rcpp 1.1.0
RcppEigen 0.3.4.0.2 reactable 0.4.4 reactR 0.6.1
readr 2.1.6 readxl 1.4.5 recipes 1.3.1
rematch 2.0.0 rematch2 2.1.2 remotes 2.5.0
reprex 2.1.1 reshape2 1.4.5 rlang 1.1.6
rmarkdown 2.30 RODBC 1.3-26 roxygen2 7.3.3
rpart 4.1.23 rprojroot 2.1.1 Rserve 1.8-15
RSQLite 2.4.4 rstudioapi 0.17.1 rversions 3.0.0
rvest 1.0.5 S7 0.2.1 sass 0.4.10
scales 1.4.0 selectr 0.4-2 sessioninfo 1.2.3
shape 1.4.6.1 shiny 1.11.1 sourcetools 0.1.7-1
sparklyr 1.9.3 SparkR 4.1.0 sparsevctrs 0.3.4
spatial 7.3-17 splines 4.5.1 sqldf 0.4-11
SQUAREM 2021.1 stats 4.5.1 stats4 4.5.1
stringi 1.8.7 stringr 1.6.0 survival 3.5-8
swagger 5.17.14.1 sys 3.4.3 systemfonts 1.3.1
tcltk 4.5.1 testthat 3.3.0 textshaping 1.0.4
tibble 3.3.0 tidyr 1.3.1 tidyselect 1.2.1
tidyverse 2.0.0 timechange 0.3.0 timeDate 4051.111
tinytex 0.58 tools 4.5.1 tzdb 0.5.0
urlchecker 1.0.1 usethis 3.2.1 utf8 1.2.6
utils 4.5.1 uuid 1.2-1 V8 8.0.1
vctrs 0.6.5 viridisLite 0.4.2 vroom 1.6.6
waldo 0.6.2 whisker 0.4.1 withr 3.0.2
xfun 0.54 xml2 1.5.0 xopen 1.0.1
xtable 1.8-4 yaml 2.3.10 zeallot 0.2.0
zip 2.3.3

Geïnstalleerde Java- en Scala-bibliotheken (Scala 2.13-clusterversie)

Groeps-id Artefact-ID Versie
antlr antlr 2.7.7
com.clearspring.analytics stream 2.9.8
com.databricks Rserve 1.8-3
com.databricks databricks-sdk-java 0.53.0
com.databricks jets3t 0.7.1-0
com.databricks.scalapb scalapb-runtime_2.13 0.4.15-11
com.esotericsoftware kryo-shaded 4.0.3
com.esotericsoftware minlog 1.3.0
com.fasterxml classmate 1.5.1
com.fasterxml.jackson.core jackson-annotations 2.18.2
com.fasterxml.jackson.core jackson-core 2.18.2
com.fasterxml.jackson.core jackson-databind 2.18.2
com.fasterxml.jackson.dataformat jackson-dataformat-yaml 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.18.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.18.3
com.fasterxml.jackson.module jackson-module-paranamer 2.18.2
com.fasterxml.jackson.module jackson-module-scala_2.13 2.18.2
com.github.ben-manes.caffeine caffeine 2.9.3
com.github.blemale scaffeine_2.13 4.1.0
com.github.fommil jniloader 1.1
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java 1.1-natives
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java 1.1-natives
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1-natives
com.github.fommil.netlib netlib-native_system-linux-x86_64 1.1-natives
com.github.luben zstd-jni 1.5.7-6
com.github.virtuald curvesapi 1.08
com.github.wendykierp JTransforms 3.1
com.google.api.grpc proto-google-common-protos 2.5.1
com.google.auth google-auth-library-credentials 1.20.0
com.google.auth google-auth-library-oauth2-http 1.20.0
com.google.auto.value automatische waardeaantekeningen 1.10.4
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.11.0
com.google.crypto.tink tink 1.16.0
com.google.errorprone error_prone_annotations 2.36.0
com.google.flatbuffers flatbuffers-java 25.2.10
com.google.guava failureaccess 1.0.3
com.google.guava guava 33.4.8-jre
com.google.http-client google-http-client 1.43.3
com.google.http-client google-http-client-gson 1.43.3
com.google.j2objc j2objc-annotations 3.0.0
com.google.protobuf protobuf-java 3.25.5
com.google.protobuf protobuf-java-util 3.25.5
com.helger profiler 1.1.1
com.ibm.icu icu4j 75.1
com.jcraft jsch 0.1.55
com.lihaoyi sourcecode_2.13 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.10
com.microsoft.sqlserver mssql-jdbc 12.8.0.jre11
com.microsoft.sqlserver mssql-jdbc 12.8.0.jre8
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.13 0.4.13
com.twitter chill-java 0.10.0
com.twitter chill_2.13 0.10.0
com.twitter util-app_2.13 19.8.1
com.twitter util-core_2.13 19.8.1
com.twitter util-function_2.13 19.8.1
com.twitter util-jvm_2.13 19.8.1
com.twitter util-lint_2.13 19.8.1
com.twitter util-registry_2.13 19.8.1
com.twitter util-stats_2.13 19.8.1
com.typesafe config 1.4.3
com.typesafe.scala-logging scala-logging_2.13 3.9.2
com.uber h3 3.7.3
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
com.zaxxer SparseBitSet 1.3
commons-cli commons-cli 1.10.0
commons-codec commons-codec 1.19.0
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.6.0
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.21.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 3.0.4
dev.ludovic.netlib blas 3.0.4
dev.ludovic.netlib lapack 3.0.4
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 2.0.2
io.delta delta-sharing-client_2.13 1.3.11
io.dropwizard.metrics metrics-annotation 4.2.37
io.dropwizard.metrics metrics-core 4.2.37
io.dropwizard.metrics metrics-graphite 4.2.37
io.dropwizard.metrics metrics-healthchecks 4.2.37
io.dropwizard.metrics metrics-jetty10 4.2.37
io.dropwizard.metrics metrics-jmx 4.2.37
io.dropwizard.metrics metrics-json 4.2.37
io.dropwizard.metrics metrics-jvm 4.2.37
io.dropwizard.metrics metrics-servlets 4.2.37
io.github.java-diff-utils java-diff-utils 4.15
io.netty netty-all 4.2.7.Final
io.netty netty-buffer 4.2.7.Final
io.netty netty-codec 4.2.7.Final
io.netty netty-codec-base 4.2.7.Final
io.netty Netty-codec-classes-quic 4.2.7.Final
io.netty netty-codec-compression 4.2.7.Final
io.netty netty-codec-http 4.2.7.Final
io.netty netty-codec-http2 4.2.7.Final
io.netty netty-codec-http3 4.2.7.Final
io.netty netty-codec-marshalling 4.2.7.Final
io.netty netty-codec-native-quic 4.2.7.Final-linux-aarch_64
io.netty netty-codec-native-quic 4.2.7.Final-linux-x86_64
io.netty netty-codec-native-quic 4.2.7.Final-osx-aarch_64
io.netty netty-codec-native-quic 4.2.7.Final-osx-x86_64
io.netty netty-codec-native-quic 4.2.7.Final-windows-x86_64
io.netty netty-codec-protobuf 4.2.7.Final
io.netty netty-codec-socks 4.2.7.Final
io.netty netty-common 4.2.7.Final
io.netty netty-handler 4.2.7.Final
io.netty netty-handler-proxy 4.2.7.Final
io.netty netty-resolver 4.2.7.Final
io.netty netty-tcnative-boringssl-static 2.0.74.Final-db-r0-linux-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.74.Final-db-r0-linux-x86_64
io.netty netty-tcnative-boringssl-static 2.0.74.Final-db-r0-osx-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.74.Final-db-r0-osx-x86_64
io.netty netty-tcnative-boringssl-static 2.0.74.Final-db-r0-windows-x86_64
io.netty netty-tcnative-classes 2.0.74.Final
io.netty netty-transport 4.2.7.Final
io.netty netty-transport-classes-epoll 4.2.7.Final
io.netty netty-transport-klassen-io_uring 4.2.7.Final
io.netty netty-transport-classes-kqueue 4.2.7.Final
io.netty netty-transport-native-epoll 4.2.7.Final
io.netty netty-transport-native-epoll 4.2.7.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.2.7.Final-linux-riscv64
io.netty netty-transport-native-epoll 4.2.7.Final-linux-x86_64
io.netty netty-transport-native-io_uring 4.2.7.Final-linux-aarch_64
io.netty netty-transport-native-io_uring 4.2.7.Final-linux-riscv64
io.netty netty-transport-native-io_uring 4.2.7.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.2.7.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.2.7.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.2.7.Final
io.opencensus opencensus-api 0.31.1
io.opencensus opencensus-contrib-http-util 0.31.1
io.prometheus simpleclient 0.16.1-databricks
io.prometheus simpleclient_common 0.16.1-databricks
io.prometheus simpleclient_dropwizard 0.16.1-databricks
io.prometheus simpleclient_pushgateway 0.16.1-databricks
io.prometheus simpleclient_servlet 0.16.1-databricks
io.prometheus simpleclient_servlet_common 0.16.1-databricks
io.prometheus simpleclient_tracer_common 0.16.1-databricks
io.prometheus simpleclient_tracer_otel 0.16.1-databricks
io.prometheus simpleclient_tracer_otel_agent 0.16.1-databricks
io.prometheus.jmx collector 0.18.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation activation 1.1.1
javax.annotation javax.annotation-api 1.3.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.14.0
net.java.dev.jna jna 5.8.0
net.razorvine pickle 1.5
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.13.1
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.10.11
org.apache.ant ant-jsch 1.10.11
org.apache.ant ant-launcher 1.10.11
org.apache.arrow pijlcompressie 18.3.0
org.apache.arrow arrow-format 18.3.0
org.apache.arrow arrow-memory-core 18.3.0
org.apache.arrow arrow-memory-netty 18.3.0
org.apache.arrow arrow-memory-netty-buffer-patch 18.3.0
org.apache.arrow arrow-vector 18.3.0
org.apache.avro avro 1.12.1
org.apache.avro avro-ipc 1.12.1
org.apache.avro avro-mapred 1.12.1
org.apache.commons commons-collections4 4.5.0
org.apache.commons commons-compress 1.28.0
org.apache.commons commons-configuration2 2.11.0
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.19.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.14.0
org.apache.curator curator-client 5.9.0
org.apache.curator curator-framework 5.9.0
org.apache.curator curator-recipes 5.9.0
org.apache.datasketches datasketches-java 6.2.0
org.apache.datasketches datasketches-memory 3.0.2
org.apache.derby derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.4.2
org.apache.hive hive-beeline 2.3.10
org.apache.hive hive-cli 2.3.10
org.apache.hive hive-jdbc 2.3.10
org.apache.hive hive-llap-client 2.3.10
org.apache.hive hive-llap-common 2.3.10
org.apache.hive hive-serde 2.3.10
org.apache.hive hive-shims 2.3.10
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.10
org.apache.hive.shims hive-shims-common 2.3.10
org.apache.hive.shims hive-shims-scheduler 2.3.10
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy ivy 2.5.3
org.apache.logging.log4j log4j-1.2-api 2.24.3
org.apache.logging.log4j log4j-api 2.24.3
org.apache.logging.log4j log4j-core 2.24.3
org.apache.logging.log4j log4j-layout-template-json 2.24.3
org.apache.logging.log4j log4j-slf4j2-impl 2.24.3
org.apache.orc orc-core 2.2.0-shaded-protobuf
org.apache.orc orc-format 1.1.1-gearceerde protobuf
org.apache.orc orc-mapreduce 2.2.0-shaded-protobuf
org.apache.orc orc-shims 2.2.0
org.apache.poi poi 5.4.1
org.apache.poi poi-ooxml 5.4.1
org.apache.poi poi-ooxml-full 5.4.1
org.apache.poi poi-ooxml-lite 5.4.1
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.16.0
org.apache.ws.xmlschema xmlschema-core 2.3.1
org.apache.xbean xbean-asm9-shaded 4.28
org.apache.xmlbeans xmlbeans 5.3.0
org.apache.yetus audience-annotations 0.13.0
org.apache.zookeeper zookeeper 3.9.4
org.apache.zookeeper zookeeper-jute 3.9.4
org.checkerframework checker-qual 3.43.0
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-alpn-client 10.0.26
org.eclipse.jetty jetty-client 10.0.26
org.eclipse.jetty jetty-http 10.0.26
org.eclipse.jetty jetty-io 10.0.26
org.eclipse.jetty jetty-jndi 10.0.26
org.eclipse.jetty jetty-plus 10.0.26
org.eclipse.jetty jetty-proxy 10.0.26
org.eclipse.jetty jetty-security 10.0.26
org.eclipse.jetty jetty-server 10.0.26
org.eclipse.jetty jetty-servlet 10.0.26
org.eclipse.jetty jetty-servlets 10.0.26
org.eclipse.jetty jetty-util 10.0.26
org.eclipse.jetty jetty-webapp 10.0.26
org.eclipse.jetty jetty-xml 10.0.26
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.41
org.glassfish.jersey.containers jersey-container-servlet-core 2.41
org.glassfish.jersey.core jersey-client 2.41
org.glassfish.jersey.core jersey-common 2.41
org.glassfish.jersey.core jersey-server 2.41
org.glassfish.jersey.inject jersey-hk2 2.41
org.hibernate.validator hibernate-validator 6.2.5.Final
org.ini4j ini4j 0.5.4
org.javassist javassist 3.29.2-GA
org.jboss.logging jboss-logging 3.4.1.Final
org.jdbi jdbi 2.63.1
org.jline jline 3.27.1-jdk8
org.joda joda-convert 1.7
org.json4s json4s-ast_2.13 4.0.7
org.json4s json4s-core_2.13 4.0.7
org.json4s json4s-jackson-core_2.13 4.0.7
org.json4s json4s-jackson_2.13 4.0.7
org.json4s json4s-scalap_2.13 4.0.7
org.locationtech.jts jts-core 1.20.0
org.lz4 lz4-java 1.8.0-databricks-1
org.mlflow mlflow-spark_2.13 2.22.1
org.objenesis objenesis 3.4
org.postgresql postgresql 42.6.1
org.roaringbitmap RoaringBitmap 1.2.1
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.13 2.13.16
org.scala-lang scala-library_2.13 2.13.16
org.scala-lang scala-reflect_2.13 2.13.16
org.scala-lang.modules scala-collection-compat_2.13 2.11.0
org.scala-lang.modules scala-java8-compat_2.13 0.9.1
org.scala-lang.modules scala-parallel-collections_2.13 1.2.0
org.scala-lang.modules scala-parser-combinators_2.13 2.4.0
org.scala-lang.modules scala-xml_2.13 2.4.0
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.13 1.18.0
org.scalactic scalactic_2.13 3.2.19
org.scalanlp breeze-macros_2.13 2.1.0
org.scalanlp breeze_2.13 2.1.0
org.scalatest scalatest-compatible 3.2.19
org.scalatest scalatest-core_2.13 3.2.19
org.scalatest scalatest-diagrams_2.13 3.2.19
org.scalatest scalatest-featurespec_2.13 3.2.19
org.scalatest scalatest-flatspec_2.13 3.2.19
org.scalatest scalatest-freespec_2.13 3.2.19
org.scalatest scalatest-funspec_2.13 3.2.19
org.scalatest scalatest-funsuite_2.13 3.2.19
org.scalatest scalatest-matchers-core_2.13 3.2.19
org.scalatest scalatest-mustmatchers_2.13 3.2.19
org.scalatest scalatest-propspec_2.13 3.2.19
org.scalatest scalatest-refspec_2.13 3.2.19
org.scalatest scalatest-shouldmatchers_2.13 3.2.19
org.scalatest scalatest-wordspec_2.13 3.2.19
org.scalatest scalatest_2.13 3.2.19
org.slf4j jcl-over-slf4j 2.0.16
org.slf4j jul-to-slf4j 2.0.16
org.slf4j slf4j-api 2.0.16
org.slf4j slf4j-simple 1.7.25
org.threeten threeten-extra 1.8.0
org.tukaani xz 1.10
org.typelevel algebra_2.13 2.8.0
org.typelevel cats-kernel_2.13 2.8.0
org.typelevel spire-macros_2.13 0.18.0
org.typelevel spire-platform_2.13 0.18.0
org.typelevel spire-util_2.13 0.18.0
org.typelevel spire_2.13 0.18.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.10.3
org.yaml snakeyaml 2.0
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 2.5.0-linux-x86_64
stax stax-api 1.0.1
  • Last updated on