Udostępnij przez

Databricks Runtime 14.1 (EoS)

Uwaga

Obsługa tej wersji środowiska Databricks Runtime została zakończona. Aby uzyskać datę zakończenia pomocy technicznej, zobacz Historia zakończenia pomocy technicznej. Wszystkie obsługiwane wersje środowiska Databricks Runtime można znaleźć w sekcji Notatki o wersjach i zgodności środowiska Databricks Runtime.

Poniższe informacje o wersji zawierają informacje o środowisku Databricks Runtime 14.1 obsługiwanym przez platformę Apache Spark 3.5.0.

Usługa Databricks wydała tę wersję w październiku 2023 r.

Nowe funkcje i ulepszenia

array_insert() używa indeksowania zaczynającego się od 1 dla indeksów ujemnych.

Funkcja array_insert jest oparta na 1 dla indeksów dodatnich i ujemnych. Teraz wstawia nowy element na końcu tablic wejściowych dla indeksu -1. Aby przywrócić poprzednie zachowanie, ustaw spark.sql.legacy.negativeIndexInArrayInsert na wartość true.

Punkty kontrolne funkcji Delta w wersji 2 są domyślnie włączone z klastrowaniem płynnym

Nowo utworzone tabele delty z płynnym klastrowaniem domyślnie używają punktów kontrolnych w wersji 2. Zobacz Zgodność tabel z klastrowaniem płynnym.

Usuwanie funkcji tabeli delty w publicznej wersji zapoznawczej

Teraz możesz usunąć niektóre funkcje tabeli dla tabel Delta. Bieżące wsparcie obejmuje usuwanie deletionVectors i v2Checkpoint. Zobacz Usuwanie funkcji tabeli usługi Delta Lake i obniżanie poziomu protokołu tabeli.

Udostępnianie Delta: odbiorcy mogą wykonywać zapytania wsadowe na udostępnionych tabelach z wektorami usuwania (wersja publiczna zapoznawcza)

Odbiorcy Delta Sharing mogą teraz wykonywać zapytania wsadowe na udostępnionych tabelach wykorzystujących wektory usuwania. Zobacz Dodaj tabele z wektorami usuwania lub mapowaniem kolumn do współdzielenia, Odczytywanie tabel z włączonymi wektorami usuwania lub mapowaniem kolumn oraz Odczytywanie tabel z włączonymi wektorami usuwania lub mapowaniem kolumn.

Delta Sharing: odbiorcy mogą wykonywać zapytania wsadowe na udostępnionych tabelach z mapowaniem kolumn (publiczna wersja testowa)

Odbiorcy Delta Sharing mogą teraz wykonywać zapytania wsadowe w tabelach udostępnionych, które używają mapowania kolumn. Zobacz Dodaj tabele z wektorami usuwania lub mapowaniem kolumn do współdzielenia, Odczytywanie tabel z włączonymi wektorami usuwania lub mapowaniem kolumn oraz Odczytywanie tabel z włączonymi wektorami usuwania lub mapowaniem kolumn.

Przesyłanie strumieniowe z widoków Unity Catalog w wersji publicznej zapoznawczej

Teraz możesz użyć Strukturalnego Przesyłania Strumieniowego, aby przeprowadzać odczyty strumieniowe z widoków zarejestrowanych w Unity Catalog. Usługa Azure Databricks obsługuje tylko odczyty strumieniowe z widoków zdefiniowanych dla Tabeli Delta.

Łącznik Apache Pulsar w publicznej wersji zapoznawczej

Teraz możesz używać Ustrukturyzowanego Przesyłania Strumieniowego do przesyłania danych z Apache Pulsar na Azure Databricks. Zobacz Strumień z usługi Apache Pulsar.

Zaktualizowany sterownik Snowflake

Sterownik Snowflake JDBC używa teraz wersji 3.13.33.

Zmienne sesji SQL

W tej wersji wprowadzono możliwość deklarowania zmiennych tymczasowych w sesji, którą można ustawić, a następnie odwoływać się z poziomu zapytań. Zobacz Zmienne.

Wywołanie nazwanych parametrów dla funkcji SQL i Python UDF.

Teraz można użyć wywołania z nazwanymi parametrami w SQL i Python UDF.

Argumenty tabeli do funkcji obsługują partycjonowanie i porządkowanie.

Teraz można użyć PARTITION BY klauzul i ORDER BY , aby kontrolować sposób przekazywania argumentów tabeli do funkcji podczas wywołania funkcji.

Nowe i ulepszone wbudowane funkcje SQL

Dodano następujące wbudowane funkcje:

  • from_xml: analizuje XML STRING do obiektu STRUCT.
  • schema_of_xml: tworzy schemat z pliku XML STRING.
  • session_user: zwraca zalogowanego użytkownika.
  • try_reflect: Zwraca element wskazany przez NULL zamiast wyjątku, jeśli metoda Java zakończy się niepowodzeniem.

Ulepszono następujące wbudowane funkcje:

  • tryb: Wsparcie dla opcjonalnego parametru, który wymusza deterministyczny wynik.
  • to_char: Nowe wsparcie dla DATE, TIMESTAMP i BINARY.
  • to_varchar: nowa obsługa DATE, TIMESTAMP i BINARY.

Ulepszona obsługa skorelowanych podzapytania

Możliwość przetwarzania korelacji w podzapytaniach została rozszerzona:

  • Obsługa limitu i kolejności według skorelowanych podzapytań skalarnych (bocznych).
  • Obsługa funkcji okien w skorelowanych podzapytaniach skalarnych.
  • Obsługa skorelowanych odwołań w predykatach sprzężenia dla podzapytań skalarnych i lateralnych

Zmiana zachowania

Ścisłe sprawdzanie typów w czytniku Photon Parquet

Funkcja Photon kończy się niepowodzeniem podczas próby odczytania wartości dziesiętnej z kolumny Parquet, która nie jest typem dziesiętnym. Funkcja Photon również kończy się niepowodzeniem podczas odczytywania tablicy bajtów o stałej długości z Parquet jako ciągu.

Uaktualnienia biblioteki

  • Uaktualnione biblioteki języka Python:
    • filelock z wersji 3.12.2 do 3.12.3
    • s3transfer z 0.6.1 do 0.6.2
  • Uaktualnione biblioteki Java:
    • Aktualizacja com.uber.h3 z wersji 3.7.0 do 3.7.3
    • io.aircompressor od 0.24 do 0.25
    • io.delta.delta-sharing-spark_2.12 z 0.7.1 do 0.7.5
    • io.netty.netty-all od 4.1.93.Final do 4.1.96.Final
    • io.netty.netty-buffer z 4.1.93.Final do 4.1.96.Final
    • io.netty.netty-codec z wersji 4.1.93.Final do 4.1.96.Final
    • io.netty.netty-codec-http od 4.1.93.Final do 4.1.96.Final
    • io.netty.netty-codec-http2 z wersji 4.1.93.Final do wersji 4.1.96.Final
    • io.netty.netty-codec-socks z wersji 4.1.93.Final do 4.1.96.Final
    • io.netty.netty-common z 4.1.93.Final do 4.1.96.Final
    • io.netty.netty-handler z 4.1.93.Final do 4.1.96.Final
    • io.netty.netty-handler-proxy z wersji 4.1.93.Final do 4.1.96.Final
    • io.netty.netty-resolver zaktualizowany z wersji 4.1.93.Final do 4.1.96.Final
    • io.netty.netty-transport z wersji 4.1.93.Final do wersji 4.1.96.Final
    • io.netty.netty-transport-classes-epoll z 4.1.93.Final do 4.1.96.Final
    • io.netty.netty-transport-classes-kqueue z 4.1.93.Final na 4.1.96.Final
    • io.netty.netty-transport-native-epoll od wersji 4.1.93.Final-linux-x86_64 do wersji 4.1.96.Final-linux-x86_64
    • io.netty.netty-transport-native-kqueue od 4.1.93.Final-osx-x86_64 do 4.1.96.Final-osx-x86_64
    • io.netty.netty-transport-native-unix-common z 4.1.93.Final do 4.1.96.Final
    • net.snowflake.snowflake-jdbc od 3.13.29 do 3.13.33
    • org.apache.orc.orc-core z wersji 1.9.0-shaded-protobuf do wersji 1.9.1-shaded-protobuf
    • org.apache.orc.orc-mapreduce from 1.9.0-shaded-protobuf to 1.9.1-shaded-protobuf
    • org.apache.orc.orc-shims od 1.9.0 do 1.9.1

Apache Spark

Środowisko Databricks Runtime 14.1 obejmuje platformę Apache Spark 3.5.0. Ta wersja zawiera wszystkie poprawki i ulepszenia platformy Spark zawarte w środowisku Databricks Runtime 14.0 (EoS), a także następujące dodatkowe poprawki błędów i ulepszenia wprowadzone na platformie Spark:

  • [SPARK-45088] [DBRRM-557] Przywróć „[SC-142785][python][CONNECT] Dostosuj działanie getitem dla zduplikowanych kolumn”
  • [SPARK-43453] [DBRRM-557]Przywracanie "[SC-143135][ps] Ignoruj names wartość MultiIndex "axis=1concat
  • [SPARK-45225] [SC-143207][sql] XML: obsługa adresów URL plików XSD
  • [SPARK-45156] [SC-142782][sql] Zawijanie inputName przez backticks w NON_FOLDABLE_INPUT klasie błędów
  • [SPARK-44910] [SC-143082][sql] Encoders.bean nie obsługuje superklas z argumentami typów ogólnych
  • [SPARK-43453] [SC-143135][ps] Ignoruj wartość namesMultiIndex dla axis=1concat
  • [SPARK-44463] [SS][connect] Ulepszanie obsługi błędów w przypadku łączenia procesu roboczego języka Python
  • [SPARK-44960] [SC-141023][ui] Unescape i składać się z podsumowania błędów na stronach interfejsu użytkownika
  • [SPARK-44788] [SC-142980][connect][PYTHON][sql] Dodaj funkcje from_xml i schema_of_xml do pyspark, spark connect i funkcji sql
  • [SPARK-44614] [SC-138460][python][CONNECT][3.5] Dodawanie brakujących pakietów w setup.py
  • [SPARK-45151] [SC-142861][core][UI] Obsługa zrzutu wątków na poziomie zadania
  • [SPARK-45056] [ SC-142779][python][SS][connect] Testy zakończenia dla elementu streamingQueryListener i foreachBatch
  • [SPARK-45084] [SC-142828][ss] StateOperatorProgress do używania dokładnego efektywnego numeru partycji mieszania
  • [SPARK-44872] [SC-142405][connect] Testowanie infrastruktury serwera i ReattachableExecuteSuite
  • [SPARK-45197] [ SC-142984][core] Dodaj StandaloneRestServerJavaModuleOptions do sterowników
  • [SPARK-44404] [ SC-139601][sql] Przypisz nazwy do klasy błędów LEGACY_ERROR_TEMP[1009,1010,1013,1015,1016,1278]
  • [SPARK-44647] [SC-142297][sql] Wspieranie SPJ, gdzie klucze łączenia są mniejsze niż klucze klastra
  • [SPARK-45088] [SC-142785][python][CONNECT] Umożliwienie działania getitem ze zduplikowanymi kolumnami
  • [SPARK-45128] [SC-142851][sql] Obsługa CalendarIntervalType w Arrow
  • [SPARK-45130] [ SC-142976][connect][ML][python] Unikanie modelu spark connect ML w celu zmiany ramki danych biblioteki pandas
  • [SPARK-45034] [ SC-142959][sql] Obsługa funkcji trybu deterministycznego
  • [SPARK-45173] [SC-142931][ui] Usuń niepotrzebne pliki sourceMapping w interfejsie użytkownika
  • [SPARK-45162] [SC-142781][sql] Obsługa parametrów map i tablic utworzonych za pomocą call_function
  • [SPARK-45143] [SC-142840][python][CONNECT] Make PySpark compatible with PyArrow 13.0.0
  • [SPARK-45174] [SC-142837][core] Obsługa spark.deploy.maxDrivers
  • [SPARK-45167] [ SC-142956][connect][PYTHON] Klient języka Python musi wywołać release_all
  • [SPARK-36191] [SC-142777][sql] Obsługa limit i order by w korelacyjnych podzapytaniach skalarnych (bocznych)
  • [SPARK-45159] [ SC-142829][python] Obsługa nazwanych argumentów tylko wtedy, gdy jest to konieczne
  • [SPARK-45133] [ SC-142512][connect] Zapytania Spark Connect są oznaczane jako ZAKOŃCZONE, gdy ostatnie zadanie wyniku się zakończy
  • [SPARK-44801] [SC-140802][sql][interfejs użytkownika] Przechwytywanie analizy nieudanych zapytań w Listenerze i interfejsie użytkownika
  • [SPARK-45139] [SC-142527][sql] Dodano DatabricksDialect do obsługi konwersji typu SQL
  • [SPARK-45157] [ SC-142546][sql] Unikanie powtarzających się if sprawdzeń [On|Off|HeapColumnVector
  • [SPARK-45077] Cofnij “[SC-142069][ui] Uaktualnienie dagre-d3.js z 04.3 do 0.6.4”
  • [SPARK-45145] [SC-142521][przykład] Dodaj przykład JavaSparkSQLCli
  • [SPARK-43295] Cofnij “[SC-142254][ps] Obsługa kolumn typu string dla DataFrameGroupBy.sum”
  • [SPARK-44915] [SC-142383][core] Zweryfikuj sumę kontrolną danych przetasowania odmontowanego PVC przed rozpoczęciem odzyskiwania
  • [SPARK-45147] [SC-142524][core] Usuń System.setSecurityManager użycie
  • [SPARK-45104] [SC-142206][ui] Uaktualnienie graphlib-dot.min.js do wersji 1.0.2
  • [SPARK-44238] [SC-141606][core][SQL] Wprowadzenie nowej metody z wejściową tablicą bajtową dla readFrom
  • [SPARK-45060] [SC-141742][sql] Naprawić błąd wewnętrzny z formatu to_char()NULL
  • [SPARK-43252] [ SC-142381][sql] Zastąp klasę _LEGACY_ERROR_TEMP_2016 błędów błędem wewnętrznym
  • [SPARK-45069][SC-142279][sql] Zmienna SQL powinna zawsze być rozwiązywana po uprzednim rozpatrzeniu odwołania zewnętrznego
  • [SPARK-44911] [ SC-142388][sql] Tworzenie tabeli hive z nieprawidłową kolumną powinno zwrócić klasę błędu
  • [SPARK-42754] [SC-125567][sql][UI] Naprawiono problem ze zgodnością z poprzednimi wersjami w zagnieżdżonym wykonaniu zapytań SQL
  • [SPARK-45121] [ SC-142375][connect][PS] Obsługa Series.empty programu Spark Connect.
  • [SPARK-44805] [SC-142203][sql] getBytes/getShorts/getInts/etc. powinien działać w wektorze kolumn, który ma słownik
  • [SPARK-45027] [ SC-142248][python] Ukrywanie wewnętrznych funkcji/zmiennych z pyspark.sql.functions automatycznego uzupełniania
  • [SPARK-45073] [SC-141791][ps][CONNECT] Zamień na LastNotNullLast(ignoreNulls=True)
  • [SPARK-44901] [SC-141676][sql] Ręczny backport: Dodaj interfejs API w metodzie "analyze" w języku Python, aby zwracać wyrażenia partycjonowania/zamawiania
  • [SPARK-45076] [ SC-141795][ps] Przełączanie do wbudowanej repeat funkcji
  • [SPARK-44162] [ SC-141605][core] Obsługa G1GC w metrykach platformy Spark
  • [SPARK-45053] [SC-141733][python][MINOR] Ulepszenie logowania w przypadku niezgodności wersji Pythona
  • [SPARK-44866] [ SC-142221][sql] Dodaj SnowflakeDialect , aby poprawnie obsługiwać typ LOGICZNY
  • [SPARK-45064] [ SC-141775][python][CONNECT] Dodaj brakujący scale parametr w ceil/ceiling
  • [SPARK-45059] [ SC-141757][connect][PYTHON] Dodawanie try_reflect funkcji do języka Scala i Python
  • [SPARK-43251] [ SC-142280][sql] Zastąp klasę _LEGACY_ERROR_TEMP_2015 błędów błędem wewnętrznym
  • [SPARK-45052] [ SC-141736][sql][PYTHON][connect] Utwórz nazwę kolumny wyjściowej aliasów funkcji spójną z językiem SQL
  • [SPARK-44239] [ SC-141502][sql] Wolna pamięć przydzielona przez duże wektory, gdy wektory są resetowane
  • [SPARK-43295] [SC-142254][ps] Obsługa kolumn typu tekstowego dla DataFrameGroupBy.sum
  • [SPARK-45080] [ SC-142062][ss] Wyraźnie zaznacz wsparcie dla przetwarzania kolumnowego w strumieniowych źródłach danych DSv2
  • [SPARK-45036] [ SC-141768][sql] SPJ: Upraszczanie logiki do obsługi częściowo klastrowanej dystrybucji
  • [SPARK-45077] [SC-142069][ui] Uaktualnianie dagre-d3.js z wersji 0.4.3 do 0.6.4
  • [SPARK-45091] [ SC-142020][python][CONNECT][sql] Funkcja floor/round/bround akceptuje typ kolumny scale
  • [SPARK-45090] [SC-142019][python][CONNECT] DataFrame.{cube, rollup} obsługa kolejności kolumn
  • [SPARK-44743] [SC-141625][sql] Dodaj funkcję try_reflect
  • [SPARK-45086] [SC-142052][ui] Wyświetlanie kodu skrótu blokady wątku w formacie szesnastkowym
  • [SPARK-44952] [ SC-141644][sql][PYTHON] Obsługa nazwanych argumentów w Pandas UDF-ach agregujących
  • [SPARK-44987] [SC-141552][sql] Przypisz nazwę do klasy błędów _LEGACY_ERROR_TEMP_1100
  • [SPARK-45032] [ SC-141730][connect] Naprawiono ostrzeżenia kompilacji związane z Top-level wildcard is not allowed and will error under -Xsource:3
  • [SPARK-45048] [ SC-141629][connect] Dodaj dodatkowe testy dla klienta języka Python i wykonywanie dołączalne
  • [SPARK-45072] [SC-141807][connect] Naprawiono zewnętrzne zakresy dla klas ammonite
  • [SPARK-45033] [SC-141759][sql] Obsługa map przez parametr sql()
  • [SPARK-45066] [SC-141772][sql][PYTHON][connect] Spraw, aby funkcja repeat akceptowała typ kolumny n
  • [SPARK-44860] [ SC-141103][sql] Dodawanie funkcji SESSION_USER
  • [SPARK-45074] [SC-141796][python][CONNECT] DataFrame.{sort, sortWithinPartitions} obsługa pozycji kolumn
  • [SPARK-45047] [SC-141774][python][CONNECT] DataFrame.groupBy — obsługa zwykłych elementów
  • [SPARK-44863] [ SC-140798][ui] Dodaj przycisk do pobrania zrzutu wątku jako txt w interfejsie użytkownika platformy Spark
  • [SPARK-45026] [ SC-141604][connect] spark.sql powinna obsługiwać typy danych niezgodne ze strzałką
  • [SPARK-44999] [ SC-141145][core] Refaktoryzacja ExternalSorter w celu zmniejszenia sprawdzeń shouldPartition podczas wywoływania getPartition
  • [SPARK-42304] [SC-141501][sql] Zmień nazwę _LEGACY_ERROR_TEMP_2189 na GET_TABLES_BY_TYPE_UNSUPPORTED_BY_HIVE_VERSION
  • [SPARK-43781] [ SC-139450][sql] Fix IllegalStateException podczas kogrupowania dwóch zestawów danych pochodzących z tego samego źródła
  • [SPARK-45018] [ SC-141516][python][CONNECT] Dodaj CalendarIntervalType do klienta Python
  • [SPARK-45024] [ SC-141513][python][CONNECT] Odfiltruj niektóre konfiguracje w obszarze Tworzenie sesji
  • [SPARK-45017] [SC-141508][python] Dodaj CalendarIntervalType do PySpark
  • [SPARK-44720] [SC-139375][connect] Make Dataset use Encoder zamiast AgnosticEncoder
  • [SPARK-44982] [SC-141027][connect] Oznacz konfiguracje serwera Spark Connect jako statyczne
  • [SPARK-44839] [SC-140900][ss][CONNECT] Lepsze rejestrowanie błędów podczas próby serializacji sesji spark przez użytkownika
  • [SPARK-44865] [SC-140905][ss] Dodanie obsługi kolumny metadanych w StreamingRelationV2
  • [SPARK-45001] [SC-141141][python][CONNECT] Zaimplementować DataFrame.foreachPartition
  • [SPARK-44497] [ SC-141017][webui] Pokaż identyfikator partycji zadania w tabeli zadań
  • [SPARK-45006] [ SC-141143][ui] Użyj tego samego formatu dat innych elementów daty interfejsu użytkownika dla osi x osi osi czasu
  • [SPARK-45000] [SC-141135][python][CONNECT] Zaimplementuj DataFrame.foreach
  • [SPARK-44967] [SC-141137][sql][CONNECT] Należy rozważyć jednostkę przed użyciem wartości logicznej dla tagu TreeNode
  • [SPARK-44993] [SC-141088][core] Dodaj ShuffleChecksumUtils.compareChecksums poprzez ponowne użycie ShuffleChecksumTestHelp.compareChecksums
  • [SPARK-44807] [ SC-140176][connect] Dodaj Dataset.metadataColumn do Scala Client
  • [SPARK-44965] [SC-141098][python] Ukryj funkcje wewnętrzne/zmienne z pyspark.sql.functions
  • [SPARK-44983] [SC-141030][sql] Konwertuj dane binarne na ciąg według to_char dla formatów: hex, , base64utf-8
  • [SPARK-44980] [DBRRM-462][sc-141024][PYTHON][connect] Poprawka dziedziczona nazwanych elementów do pracy w createDataFrame
  • [SPARK-44985][SC-141033][core] Użyj metody toString zamiast stacktrace dla wątku usuwającego zadania
  • [SPARK-44984] [SC-141028][python][CONNECT] Usuń _get_alias z ramki danych
  • [SPARK-44975] [SC-141013][sql] Usuń bezużyteczne zastąpienie BinaryArithmetic rozwiązanego
  • [SPARK-44969] [SC-140957][sql] Ponowne użycie ArrayInsert w ArrayAppend
  • [SPARK-44549] [SC-140714][sql] Obsługa funkcji okna w skorelowanych podzapytaniach skalarnych
  • [SPARK-44938] [ SC-140811][sql] Zmień wartość domyślną na spark.sql.maxSinglePartitionBytes 128 m
  • [SPARK-44918] [SC-140816][sql][PYTHON] Obsługa nazwanych argumentów w Scalar Python/Pandas UDF
  • [SPARK-44966] [ SC-140907][core][CONNECT] Zmień nigdy niezmienioną wartość var na val
  • [SPARK-41471] [ SC-140804][sql] Redukcja operacji mieszania w platformie Spark, kiedy tylko jedna strona złączenia jest KeyGroupedPartitioning
  • [SPARK-44214] [ SC-140528][core] Obsługa interfejsu użytkownika dziennika na żywo sterownika Spark
  • [SPARK-44861] [ SC-140716][connect] jsonignore SparkListenerConnectOperationStarted.planRequest
  • [SPARK-44776] [ SC-140519][connect] Add ProducedRowCount to SparkListenerConnectOperationFinished
  • [SPARK-42017] [ SC-140765][python][CONNECT] df['col_name'] powinien zweryfikować nazwę kolumny
  • [SPARK-40178] [SC-140433][sql][CONNECT] Obsługa podpowiedzi dla funkcji coalesce z łatwością w PySpark i R
  • [SPARK-44840] [SC-140593][sql] Ustaw indeksy ujemne jako zaczynające się od 1
  • [SPARK-44939] [ SC-140778][r] Obsługa Java 21 w SystemRequirements w SparkR
  • [SPARK-44936] [ SC-140770][core] Uprość dziennik, gdy usługa Spark HybridStore osiągnie limit pamięci
  • [SPARK-44908] [SC-140712][ml][CONNECT] Naprawa funkcji parametru foldCol z fałdatorem krzyżowym.
  • [SPARK-44816] [ SC-140717][connect] Poprawić komunikat o błędzie, gdy klasa UDF nie zostanie znaleziona
  • [SPARK-44909] [ SC-140710][ml] Pomiń uruchamianie serwera przesyłania strumieniowego dziennika dystrybutora, jeśli nie jest dostępny
  • [SPARK-44920] [ SC-140707][core] Użyj funkcji await() zamiast awaitUninterruptibly() w elemencie TransportClientFactory.createClient()
  • [SPARK-44905] [SC-140703][sql] Stateful lastRegex powoduje wyjątek NullPointerException podczas oceny dla regexp_replace
  • [SPARK-43987] [SC-139594][shuffle] Oddzielenie procesu finalizowania przetwarzania ShuffleMerge w dedykowanych pulach wątków
  • [SPARK-42768] [SC-140549][sql] Domyślnie umożliwia stosowanie AQE na buforowanym planie
  • [SPARK-44741] [SC-139447][core] Wsparcie dla filtrowania metryk na podstawie wyrażeń regularnych w StatsdSink
  • [SPARK-44751] [SC-140532][sql] Implementacja interfejsu FileFormat XML
  • [SPARK-44868] [SC-140438][sql] Konwertowanie daty/godziny na ciąg przez to_char/to_varchar
  • [SPARK-44748] [SC-140504][sql] Wykonywanie zapytań dla PARTITION klauzuli BY w argumentach UDTF TABLE
  • [SPARK-44873] [SC-140427] Obsługa zmiany widoku przy użyciu kolumn zagnieżdżonych w kliencie programu Hive
  • [SPARK-44876] [SC-140431][python] Poprawka zoptymalizowanej pod kątem Arrow funkcji UDF w Pythonie na platformie Spark Connect
  • [SPARK-44520] [SC-137845][sql] Zastąp termin UNSUPPORTED_DATA_SOURCE_FOR_DIRECT_QUERY na UNSUPPORTED_DATASOURCE_FOR_DIRECT_QUERY oraz ujawnij główny AE.
  • [SPARK-42664] [SC-139769][connect] Obsługa funkcji bloomFilter dla DataFrameStatFunctions
  • [SPARK-43567] [SC-139227][ps] Wsparcie use_na_sentinel dla factorize
  • [SPARK-44859] [SC-140254][ss] Poprawiono nieprawidłową nazwę właściwości w strukturalnych dokumentach przesyłania strumieniowego
  • [SPARK-44822] [SC-140182][python][SQL] Uczynienie domyślnie niedeterministycznych funkcji UDTF w języku Python
  • [SPARK-44731] [SC-139524][python][CONNECT] Umożliwienie działania TimestampNTZ z literałami w Python Spark Connect
  • [SPARK-44836] [SC-140180][python] Refactor Arrow Python UDTF
  • [SPARK-44714] [SC-139238] Złagodzenie ograniczeń dotyczących rozpoznawania LCA w przypadku zapytań z klauzulą HAVING
  • [SPARK-44749] [SC-139664][sql][PYTHON] Obsługa nazwanych argumentów w języku Python UDTF
  • [SPARK-44737] [ SC-139512][sql][UI] Nie powinny wyświetlać błędów formatu json na stronie SQL dla elementów innych niż SparkThrowable na karcie SQL
  • [SPARK-44665] [SC-139307][python] Dodanie obsługi dla pandas DataFrame assertDataFrameEqual
  • [SPARK-44736] [SC-139622][connect] Dodaj Dataset.explode do klienta Spark Connect Scala
  • [SPARK-44732] [SC-139422][sql] Wbudowana obsługa źródła danych XML
  • [SPARK-44694] [SC-139213][python][CONNECT] Refaktoryzacja aktywnych sesji i uwidacznianie ich jako interfejsu API
  • [SPARK-44652] [SC-138881] Zgłoś błąd, gdy tylko jeden df ma wartość None
  • [SPARK-44562] [SC-138824][sql] Dodaj element OptimizeOneRowRelationSubquery w partii podzapytania
  • [SPARK-44717] [SC-139319][python][PS] Uwzględnij TimestampNTZ podczas próbkowania ponownego
  • [SPARK-42849] [SC-139365] [SQL] Zmienne sesji
  • [SPARK-44236] [SC-139239][sql] Wyłącz WholeStageCodegen, ustawiając spark.sql.codegen.factoryMode na NO_CODEGEN
  • [SPARK-44695] [SC-139316][python] Ulepszanie komunikatu o błędzie dla DataFrame.toDF
  • [SPARK-44680] [SC-139234][sql] Poprawienie komunikatu błędu dotyczącego parametrów w DEFAULT
  • [SPARK-43402] [SC-138321][sql] FileSourceScanExec obsługuje wypychanie filtru danych z podzapytaniem skalarnym
  • [SPARK-44641] [ SC-139216][sql] Nieprawidłowy wynik w niektórych scenariuszach, gdy nie jest aktywowany SPJ
  • [SPARK-44689] [ SC-139219][connect] Uczyń obsługę wyjątków funkcji SparkConnectPlanner#unpackScalarScalaUDF bardziej uniwersalną
  • [SPARK-41636] [ SC-139061][sql] Upewnij się, że selectFilters zwraca predykaty w kolejności deterministycznej
  • [SPARK-44132] [SC-139197][sql] Zmaterializuj nazwy kolumn sprzężenia, aby uniknąć błędu generowania kodu
  • [SPARK-42330] [ SC-138838][sql] Przypisz nazwę RULE_ID_NOT_FOUND do klasy błędów _LEGACY_ERROR_TEMP_2175
  • [SPARK-44683] [ SC-139214][ss] Poziom rejestrowania nie jest prawidłowo przekazywany do dostawcy magazynu stanów bazy danych RocksDB
  • [SPARK-44658] [SC-138868][core] ShuffleStatus.getMapStatus powinno zwrócić None zamiast Some(null)
  • [SPARK-44603] [SC-138353] Dodawanie pliku pyspark.testing do setup.py
  • [SPARK-44252] [ SC-137505][ss] Zdefiniuj nową klasę błędów i zastosuj dla przypadku, gdy stan ładowania z systemu plików DFS kończy się niepowodzeniem
  • [SPARK-29497] [DBRRM-396][sc-138477][CONNECT] Zgłasza błąd, gdy funkcja UDF nie jest deserializowana.
  • [SPARK-44624] [DBRRM-396][sc-138900][CONNECT] Ponów próbę wykonania planu w przypadku, gdy początkowe żądanie nie dotarło do serwera
  • [SPARK-41400] [DBRRM-396][sc-138287][CONNECT] Usuń zależność Catalyst dla klienta Connect
  • [SPARK-44059] [SC-138833][sql] Dodawanie lepszych komunikatów o błędach dla języka SQL o nazwie argumnts
  • [SPARK-44620] [SC-138831][sql][PS][connect] Spraw, aby ResolvePivot zachowało Plan_ID_TAG
  • [SPARK-43838] [SC-137413][sql] Naprawa podzapytania w pojedynczej tabeli z klauzulą HAVING, której nie można zoptymalizować
  • [SPARK-44555] [SC-138820][sql] Użyj checkError(), aby sprawdzić wyjątek w pakiecie poleceń i przypisać nazwy klas błędów
  • [SPARK-44280] [SC-138821][sql] Dodaj convertJavaTimestampToTimestamp w interfejsie API JDBCDialect
  • [SPARK-44602] [SC-138337][sql][CONNECT][ps] Upewnij się, że WidenSetOperationTypes zachowuje Plan_ID_TAG
  • [SPARK-42941] [ SC-138389][ss][CONNECT] Python StreamingQueryListener
  • [SPARK-43838] Przywróć "[SC-137413][sql] Poprawka podzapytania dla pojedynczej tabeli..."
  • [SPARK-44538] [SC-138178][connect][SQL] Przywrócenie funkcji Row.jsonValue i podobnych funkcji
  • [SPARK-44421] [SC-138434][spark-44423][CONNECT] Ponowne łączenie w Spark Connect
  • [SPARK-43838] [SC-137413][sql] Naprawa podzapytania w pojedynczej tabeli z klauzulą HAVING, której nie można zoptymalizować
  • [SPARK-44587] [SC-138315][sql][CONNECT] Zwiększenie limitu rekursji protobuf marshaller
  • [SPARK-44605] [SC-138338][core] Uściślij wewnętrzny interfejs API ShuffleWriteProcessor
  • [SPARK-44394] [SC-138291][connect][WEBUI] Dodawanie strony interfejsu użytkownika platformy Spark dla programu Spark Connect
  • [SPARK-44585] [SC-138286][mllib] Napraw warunki ostrzegawcze w MLLib RankingMetrics ndcgAk
  • [SPARK-44198] [ SC-138137][core] Wsparcie propagacji poziomu dziennika do egzekutorów
  • [SPARK-44454] [SC-138071][sql][HIVE] HiveShim getTablesByType obsługa alternatywna
  • [SPARK-44425] [ SC-138135][connect] Sprawdź, czy podany przez użytkownika identyfikator sessionId jest identyfikatorem UUID
  • [SPARK-43611] [SC-138051][sql][PS][connect] Umożliw ExtractWindowExpressions zachowanie PLAN_ID_TAG
  • [SPARK-44560] [SC-138117][python][CONNECT] Ulepszenie testów i dokumentacji dla Python UDF w Arrow
  • [SPARK-44482] [ SC-138067][connect] Serwer połączenia powinien móc określać adres wiązania
  • [SPARK-44528] [SC-138047][connect] Obsługa prawidłowego użycia hasattr() dla ramki danych Connect
  • [SPARK-44525] [ SC-138043][sql] Ulepszanie komunikatu o błędzie, gdy nie znaleziono metody Invoke
  • [SPARK-44355] [SC-137878][sql] Przenieść WithCTE do zapytań komend

Obsługa sterowników ODBC/JDBC usługi Databricks

Usługa Databricks obsługuje sterowniki ODBC/JDBC wydane w ciągu ostatnich 2 lat. Pobierz ostatnio wydane sterowniki i uaktualnij (pobierz plik ODBC, pobierz plik JDBC).

Zobacz Aktualizacje serwisowe środowiska Databricks Runtime 14.1.

Środowisko systemu

  • System operacyjny: Ubuntu 22.04.3 LTS
  • Java: Zulu 8.72.0.17-CA-linux64
  • Scala: 2.12.15
  • Python: 3.10.12
  • R: 4.3.1
  • Delta Lake: 3.0.0

Zainstalowane biblioteki języka Python

Biblioteka Wersja Biblioteka Wersja Biblioteka Wersja
anyio 3.5.0 argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0
asttokens 2.0.5 attrs 22.1.0 Wezwanie zwrotne 0.2.0
beautifulsoup4 4.11.1 czarny 22.6.0 wybielacz 4.1.0
kierunkowskaz 1.4 boto3 1.24.28 botocore 1.27.96
certyfikat 2022.12.7 cffi 1.15.1 chardet 4.0.0
normalizator zestawu znaków 2.0.4 kliknij 8.0.4 komunikacja 0.1.2
ContourPy 1.0.5 kryptografia 39.0.1 rowerzysta 0.11.0
Cython 0.29.32 databricks-sdk 0.1.6 dbus-python 1.2.18
debugpy 1.6.7 dekorator 5.1.1 defusedxml (biblioteka zabezpieczająca przetwarzanie XML) 0.7.1
distlib 0.3.7 Konwertowanie docstringów na markdown 0,11 punkty wejścia 0,4
Wykonywanie 0.8.3 aspekty — omówienie 1.1.1 fastjsonschema 2.18.0
blokada plików 3.12.3 fonttools 4.25.0 Biblioteka środowiska uruchomieniowego GCC 1.10.0
googleapis-common-protos 1.60.0 grpcio 1.48.2 status grpcio 1.48.1
httplib2 0.20.2 IDNA 3.4 importlib-metadata 4.6.4
ipykernel 6.25.0 ipython 8.14.0 ipython-genutils 0.2.0
ipywidgets 7.7.2 Jedi 0.18.1 autobus typowy dla Filipin znany jako jeepney 0.7.1
Jinja2 3.1.2 jmespath 0.10.0 joblib 1.2.0
jsonschema 4.17.3 jupyter-client 7.3.4 serwer Jupyter 1.23.4
jupyter_core 5.2.0 jupyterlab-pygments 0.1.2 Widżety JupyterLab 1.0.0
breloczek 23.5.0 kiwisolver 1.4.4 launchpadlib 1.10.16
lazr.restfulclient 0.14.4 lazr.uri 1.0.6 lxml jest biblioteką do analizy XML i HTML. 4.9.1
MarkupSafe 2.1.1 biblioteka matplotlib 3.7.0 biblioteka matplotlib-inline 0.1.6
Mccabe 0.7.0 Mistune 0.8.4 więcej itertools 8.10.0
mypy-extensions 0.4.3 nbclassic 0.5.2 NBClient 0.5.13
nbconvert - narzędzie do konwersji plików Jupyter Notebook 6.5.4 nbformat 5.7.0 nest-asyncio 1.5.6
nodeenv 1.8.0 notes 6.5.2 notebook_shim 0.2.2
numpy 1.23.5 oauthlib 3.2.0 opakowanie 22,0
Pandas 1.5.3 pandocfilters 1.5.0 parso 0.8.3
specyfikacja ścieżki 0.10.3 ofiara 0.5.3 pexpect 4.8.0
pickleshare (jeśli to nazwa własna, nie trzeba tłumaczyć) 0.7.5 Poduszka 9.4.0 pip (menedżer pakietów Pythona) 22.3.1
platformdirs 2.5.2 kreślenie 5.9.0 wtyczkowy 1.0.0
prometheus-client 0.14.1 zestaw narzędzi prompt 3.0.36 Protobuf (w skrócie od Protocol Buffers) 4.24.0
psutil 5.9.0 psycopg2 2.9.3 ptyprocess 0.7.0
pure-eval 0.2.2 pyarrow 8.0.0 pycparser 2.21
pydantic (biblioteka do walidacji danych w Pythonie) 1.10.6 pyflakes (narzędzie do analizy statycznej kodu Python) 3.0.1 Pygments 2.11.2
PyGObject 3.42.1 PyJWT 2.3.0 pyodbc 4.0.32
pyparsing – biblioteka do przetwarzania tekstu w Pythonie 3.0.9 pyright 1.1.294 pirstent 0.18.0
python-dateutil (biblioteka Pythona do zarządzania datami) 2.8.2 python-lsp-jsonrpc 1.0.0 python-lsp-server 1.7.1
pytoolconfig 1.2.5 pytz (biblioteka Pythona do obliczeń stref czasowych) 2022.7 pyzmq 23.2.0
żądania 2.28.1 lina 1.7.0 s3transfer 0.6.2
scikit-learn 1.1.1 seaborn - biblioteka wizualizacji danych w Pythonie 0.12.2 SecretStorage 3.3.1
Send2Trash 1.8.0 setuptools 65.6.3 sześć 1.16.0
Sniffio 1.2.0 sitko do zupy 2.3.2.post1 ssh-import-id (narzędzie do importowania kluczy SSH) 5.11
stos danych 0.2.0 statsmodels - biblioteka do modelowania statystycznego 0.13.5 Wytrzymałość 8.1.0
zakończony 0.17.1 threadpoolctl 2.2.0 tinycss2 1.2.1
tokenize-rt 4.2.1 tomli 2.0.1 tornado 6.1
traitlety 5.7.1 moduł typing_extensions 4.4.0 ujson (szybka biblioteka do obsługi formatu JSON) 5.4.0
nienadzorowane uaktualnienia 0.1 urllib3 1.26.14 virtualenv 20.16.7
wadllib 1.3.6 szerokość(wcwidth) 0.2.5 kodowania webowe 0.5.1
websocket-klient 0.58.0 czymjestłatka 1.0.2 wheel 0.38.4
widgetsnbextension 3.6.1 yapf (Yet Another Python Formatter - Kolejny Formatator Pythona) 0.31.0 zamek błyskawiczny 1.0.0
SciPy 1.10.1

Zainstalowane biblioteki języka R

Biblioteki języka R są instalowane z migawki CRAN z Menedżera pakietów Posit z dnia 2023-02-10.

Biblioteka Wersja Biblioteka Wersja Biblioteka Wersja
strzałka 12.0.1 askpass 1.1 potwierdzić to 0.2.1
porty wsteczne 1.4.1 baza 4.3.1 base64enc 0.1-3
odrobina 4.0.5 bit-64 4.0.5 blob 1.2.4
rozruch systemu 1.3-28 warzyć (piwo) / parzyć (kawę, herbatę) 1.0-8 Brio 1.1.3
miotła 1.0.5 bslib 0.5.0 kaszmir 1.0.8
dzwoniący 3.7.3 karetka 6.0-94 cellranger 1.1.0
Chroń 2.3-61 klasa 7.3-22 CLI 3.6.1
clipr 0.8.0 zegar 0.7.0 klaster 2.1.4
codetools 0.2-19 przestrzeń kolorów 2.1-0 commonmark 1.9.0
kompilator 4.3.1 konfig 0.3.1 zdezorientowany 1.2.0
cpp11 0.4.4 kredka 1.5.2 dane logowania 1.3.2
skręt 5.0.1 tabela danych 1.14.8 zbiory danych 4.3.1
DBI 1.1.3 dbplyr 2.3.3 Opis 1.4.2
devtools 2.4.5 schemat 1.6.5 diffobj 0.3.5
skrót 0.6.33 przyciemnione oświetlenie 0.4.3 dplyr 1.1.2
dtplyr 1.3.1 e1071 1.7-13 wielokropek 0.3.2
ocenić 0.21 fani 1.0.4 kolory 2.1.1
szybka mapa 1.1.1 Font Awesome 0.5.1 dla kotów 1.0.0
foreach 1.5.2 zagraniczny 0.8-82 kuźnia 0.2.0
Fs 1.6.2 przyszłość 1.33.0 wprowadź przyszłość 1.11.0
płukać gardło 1.5.1 typy ogólne 0.1.3 Gert 1.9.2
ggplot2 3.4.2 Gh 1.4.0 gitcreds 0.1.2
glmnet 4.1-7 globalna 0.16.2 klej 1.6.2
googledrive 2.1.1 googlesheets4 1.1.1 Gower 1.0.1
grafika 4.3.1 grDevices 4.3.1 siatka 4.3.1
gridExtra 2.3 gsubfn 0,7 gtabela 0.3.3
hełm ochronny 1.3.0 przystań 2.5.3 wyżej 0.10
HMS 1.1.3 htmltools – narzędzie do tworzenia stron internetowych 0.5.5 widżety HTML 1.6.2
httpuv 1.6.11 httr 1.4.6 httr2 0.2.3
Numery identyfikacyjne 1.0.1 ini 0.3.1 ipred 0.9-14
isoband 0.2.7 Obiekty iterujące 1.0.14 jquerylib 0.1.4
jsonlite 1.8.7 KernSmooth 2.23-21 knitr (narzędzie do generowania dynamicznych raportów w R) 1,43
etykietowanie 0.4.2 później 1.3.1 siatka 0.21-8
lawa 1.7.2.1 cykl życia 1.0.3 nasłuchiwanie 0.9.0
lubridate 1.9.2 magrittr 2.0.3 Markdown 1,7
MASA 7.3-60 Matryca 1.5-4.1 zapamiętywanie 2.0.1
metody 4.3.1 mgcv 1.8-42 mim 0,12
miniUI (interfejs użytkownika) 0.1.1.1 Metryki modelowe 1.2.2.2 modeler 0.1.11
munsell 0.5.0 nlme 3.1-162 sieć neuronowa (nnet) 7.3-19
numDeriv 2016.8-1.1 openssl 2.0.6 równoległy 4.3.1
równolegle 1.36.0 kolumna 1.9.0 pkgbuild 1.4.2
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.2.1
plogr 0.2.0 plyr 1.8.8 pochwała 1.0.0
prettyunits 1.1.1 Proc 1.18.4 Procesx 3.8.2
prodlim 2023.03.31 profvis 0.3.8 postęp 1.2.2
progressr 0.13.0 Obietnice 1.2.0.1 Prototyp 1.0.0
serwer proxy 0.4-27 Postscriptum 1.7.5 mruczenie 1.0.1
r2d3 0.2.6 R6 2.5.1 ragg 1.2.5
"randomForest" 4.7-1.1 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.11 RcppEigen 0.3.3.9.3
czytnik 2.1.4 readxl (biblioteka do odczytu plików Excel) 1.4.3 przepisy 1.0.6
rewanż 1.0.1 rewanż 2 2.1.2 Zdalne sterowanie 2.4.2
przykład powtarzalny 2.0.2 zmień kształt2 1.4.4 rlang 1.1.1
rmarkdown (narzędzie do tworzenia dokumentów w R) 2.23 RODBC 1.3-20 roxygen2 7.2.3
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-11
RSQLite 2.3.1 rstudioapi 0.15.0 rversions (rversions) 2.1.2
rvest 1.0.3 Sass 0.4.6 waga (urządzenie) 1.2.1
selektor 0.4-2 Informacje o sesji 1.2.2 kształt 1.4.6
błyszczący 1.7.4.1 sourcetools 0.1.7-1 sparklyr 1.8.1
SparkR 3.5.0 przestrzenny 7.3-15 Splatiny 4.3.1
sqldf 0.4-11 KWADRAT 2021.1 Statystyki 4.3.1
statystyki4 4.3.1 łańcuchy 1.7.12 stringr 1.5.0
przetrwanie 3.5-5 sys 3.4.2 systemfonts 1.0.4
tcltk 4.3.1 testthat 3.1.10 kształtowanie tekstu 0.3.6
tibble 3.2.1 tidyr 1.3.0 tidyselect 1.2.0
tidyverse 2.0.0 zmiana czasu 0.2.0 czasData 4022.108
tinytex 0.45 narzędzia 4.3.1 Baza Danych Stref Czasowych (tzdb) 0.4.0
sprawdzacz URL 1.0.1 użyj tego 2.2.2 utf8 1.2.3
oprogramowanie użytkowe 4.3.1 UUID (Uniwersalnie Unikalny Identyfikator) 1.1-0 vctrs 0.6.3
viridisLite 0.4.2 Vroom 1.6.3 Waldo 0.5.1
wibrys 0.4.1 Withr 2.5.0 xfun 0.39
xml2 1.3.5 xopen 1.0.0 Xtable 1.8-4
yaml 2.3.7 zamek / zip 2.3.0

Zainstalowane biblioteki Java i Scala (wersja klastra Scala 2.12)

Identyfikator grupy Identyfikator artefaktu Wersja
antlr antlr 2.7.7
com.amazonaws Klient Amazon Kinesis 1.12.0
com.amazonaws aws-java-sdk-automatyczne-skalowanie 1.12.390
com.amazonaws aws-java-sdk-cloudformation 1.12.390
com.amazonaws aws-java-sdk-cloudfront 1.12.390
com.amazonaws aws-java-sdk-cloudhsm (zestaw narzędzi Java dla usługi CloudHSM) 1.12.390
com.amazonaws aws-java-sdk-cloudsearch 1.12.390
com.amazonaws aws-java-sdk-cloudtrail 1.12.390
com.amazonaws aws-java-sdk-cloudwatch 1.12.390
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.390
com.amazonaws aws-java-sdk-codedeploy (biblioteka do zarządzania wdrażaniem kodu w AWS) 1.12.390
com.amazonaws aws-java-sdk-cognitoidentity 1.12.390
com.amazonaws aws-java-sdk-cognitosync 1.12.390
com.amazonaws aws-java-sdk-config (konfiguracja aws-java-sdk) 1.12.390
com.amazonaws aws-java-sdk-core 1.12.390
com.amazonaws aws-java-sdk-datapipeline 1.12.390
com.amazonaws aws-java-sdk-directconnect (pakiet narzędzi programistycznych dla Java do współpracy z AWS Direct Connect) 1.12.390
com.amazonaws aws-java-sdk-directory 1.12.390
com.amazonaws aws-java-sdk-dynamodb 1.12.390
com.amazonaws aws-java-sdk-ec2 1.12.390
com.amazonaws aws-java-sdk-ecs 1.12.390
com.amazonaws aws-java-sdk-efs 1.12.390
com.amazonaws aws-java-sdk-elasticache 1.12.390
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.390
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.390
com.amazonaws aws-java-sdk-elastictranscoder 1.12.390
com.amazonaws aws-java-sdk-emr (biblioteka SDK Java dla usługi Amazon EMR) 1.12.390
com.amazonaws AWS Java SDK dla Glacier 1.12.390
com.amazonaws aws-java-sdk-klej 1.12.390
com.amazonaws aws-java-sdk-iam 1.12.390
com.amazonaws AWS-Java-SDK-ImportExport 1.12.390
com.amazonaws AWS SDK dla Javy - Kinesis 1.12.390
com.amazonaws aws-java-sdk-kms 1.12.390
com.amazonaws aws-java-sdk-lambda 1.12.390
com.amazonaws aws-java-sdk-logs 1.12.390
com.amazonaws aws-java-sdk-uczenie-maszynowe 1.12.390
com.amazonaws aws-java-sdk-opsworks 1.12.390
com.amazonaws aws-java-sdk-rds (pakiet programistyczny Java dla AWS RDS) 1.12.390
com.amazonaws aws-java-sdk-redshift 1.12.390
com.amazonaws aws-java-sdk-route53 1.12.390
com.amazonaws aws-java-sdk-s3 1.12.390
com.amazonaws aws-java-sdk-ses 1.12.390
com.amazonaws aws-java-sdk-simpledb 1.12.390
com.amazonaws aws-java-sdk-simpleworkflow 1.12.390
com.amazonaws aws-java-sdk-sns 1.12.390
com.amazonaws aws-java-sdk-sqs 1.12.390
com.amazonaws aws-java-sdk-ssm 1.12.390
com.amazonaws aws-java-sdk-storagegateway 1.12.390
com.amazonaws aws-java-sdk-sts (pakiet programistyczny Java dla AWS STS) 1.12.390
com.amazonaws wsparcie dla aws-java-sdk 1.12.390
com.amazonaws aws-java-sdk-swf-biblioteki 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.390
com.amazonaws jmespath-java 1.12.390
com.clearspring.analytics odtwarzać strumieniowo 2.9.6
com.databricks Rserve 1.8-3
com.databricks databricks-sdk-java 0.7.0
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kriogenicznie cieniowane 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml kolega z klasy 1.3.4
com.fasterxml.jackson.core Jackson - adnotacje 2.15.2
com.fasterxml.jackson.core jackson-core 2.15.2
com.fasterxml.jackson.core jackson-databind 2.15.2
com.fasterxml.jackson.dataformat Jackson-format-danych-CBOR 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.15.1
com.fasterxml.jackson.module jackson-module-paranamer 2.15.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.15.2
com.github.ben-manes.kofeina kofeina 2.9.3
com.github.fommil jniloader 1.1
com.github.fommil.netlib natywne_odniesienie-java 1.1
com.github.fommil.netlib natywne_odniesienie-java 1.1-rodzimi
com.github.fommil.netlib natywny_system java 1.1
com.github.fommil.netlib natywny_system java 1.1-rodzimi
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1-rodzimi
com.github.fommil.netlib netlib-native_system-linux-x86_64 1.1-rodzimi
com.github.luben zstd-jni 1.5.5-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.10.1
com.google.crypto.tink Tink 1.9.0
com.google.errorprone adnotacje podatne na błędy 2.10.0
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava owoc guawy 15,0
com.google.protobuf protobuf-java 2.6.1
com.helger profiler 1.1.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.WYDANIE
com.lihaoyi kodźródłowy_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk (zestaw do tworzenia oprogramowania dla Azure Data Lake) 2.3.9
com.microsoft.sqlserver mssql-jdbc 11.2.2.jre8
com.ning compress-lzf (biblioteka do kompresji danych) 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning JSON 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses soczewki_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe konfig 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.3
com.univocity parsery jednoznaczności 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1.16.0
Zbiory Commons Zbiory Commons 3.2.2
commons-dbcp commons-dbcp 1.4
wspólne przesyłanie plików wspólne przesyłanie plików 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.13.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 3.0.3
dev.ludovic.netlib Blas 3.0.3
dev.ludovic.netlib lapack 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift kompresor powietrza 0.25
io.delta delta-sharing-spark_2.12 0.7.5
io.dropwizard.metrics adnotacja metryk 4.2.19
io.dropwizard.metrics metryki —rdzeń 4.2.19
io.dropwizard.metrics metrics-graphite 4.2.19
io.dropwizard.metrics wskaźniki-kontrole zdrowia 4.2.19
io.dropwizard.metrics metrics-jetty9 4.2.19
io.dropwizard.metrics metrics-jmx 4.2.19
io.dropwizard.metrics metryki w formacie JSON 4.2.19
io.dropwizard.metrics metryki-JVM 4.2.19
io.dropwizard.metrics serwlety metryczne 4.2.19
io.netty netty-all 4.1.96.Final
io.netty Netty-buffer 4.1.96.Final
io.netty netty-codec 4.1.96.Final
io.netty netty-codec-http 4.1.96.Final
io.netty netty-codec-http2 4.1.96.Final
io.netty netty-codec-socks 4.1.96.Final
io.netty netty-common (element wspólny) 4.1.96.Final
io.netty "netty-handler" 4.1.96.Final
io.netty netty-handler-proxy 4.1.96.Final
io.netty rozwiązywacz netty 4.1.96.Final
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-windows-x86_64
io.netty Klasy netty-tcnative 2.0.61.Final
io.netty Netty-transport 4.1.96.Final
io.netty netty-transport-classes-epoll 4.1.96.Final
io.netty netty-transport-classes-kqueue 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.96.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.1.96.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx moduł zbierający 0.12.0
jakarta.adnotacja jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
\ jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktywacja 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction interfejs programistyczny transakcji 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
net.java.dev.jna jna 5.8.0
net.razorvine kiszonka 1.3
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake SDK do pobierania danych Snowflake 0.9.6
net.snowflake snowflake-jdbc 3.13.33
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc (niedostępne w lokalnym języku) 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr Szablon łańcucha 3.2.1
org.apache.ant mrówka 1.9.16
org.apache.ant ant-jsch 1.9.16
org.apache.ant program uruchamiający Ant 1.9.16
org.apache.arrow format strzałki 12.0.1
org.apache.arrow strzałka-pamięć-rdzeń 12.0.1
org.apache.arrow arrow-memory-netty 12.0.1
org.apache.arrow wektor strzałki 12.0.1
org.apache.avro avro 1.11.2
org.apache.avro avro-ipc 1.11.2
org.apache.avro avro-mapred 1.11.2
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.23.0
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons tekst wspólny 1.10.0
org.apache.curator kurator-klient 2.13.0
org.apache.curator struktura kuratora 2.13.0
org.apache.curator przepisy wyselekcjonowane przez kuratora 2.13.0
org.apache.datasketches datasketches-java 3.1.0
org.apache.datasketches datasketches-pamięć 2.0.0
org.apache.derby mecz derbowy 10.14.2.0
org.apache.hadoop środowisko uruchomieniowe klienta Hadoop 3.3.6
org.apache.hive hive-beeline (narzędzie do interakcji z bazą danych Hive) 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive Klient hive-llap 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive podkładki hive 2.3.9
org.apache.hive hive-storage-api (interfejs do przechowywania danych hive) 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims harmonogram osłon/imitacji ula 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy bluszcz 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.20.0
org.apache.logging.log4j log4j-api 2.20.0
org.apache.logging.log4j log4j-core 2.20.0
org.apache.logging.log4j log4j-slf4j2-impl 2.20.0
org.apache.mesos Mesos 1.11.0-shaded-protobuf
org.apache.orc orc-core 1.9.1-shaded-protobuf
org.apache.orc orc-mapreduce 1.9.1-shaded-protobuf
org.apache.orc podkładki ORC 1.9.1
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.ws.xmlschema xmlschema-core 2.3.0
org.apache.xbean xbean-asm9-cieniowane 4.23
org.apache.yetus adnotacje dla widowni 0.13.0
org.apache.zookeeper - system do zarządzania konfiguracją i synchronizacją dla aplikacji rozproszonych. opiekun zoo 3.6.3
org.apache.zookeeper - system do zarządzania konfiguracją i synchronizacją dla aplikacji rozproszonych. jute dozorców 3.6.3
org.checkerframework checker-qual 3.31.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapujący-ASL 1.9.13
org.codehaus.janino Komponent kompilatora commons 3.0.16
org.codehaus.janino Janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.52.v20230823
org.eclipse.jetty jetty-kontynuacja 9.4.52.v20230823
org.eclipse.jetty jetty-http 9.4.52.v20230823
org.eclipse.jetty jetty-io 9.4.52.v20230823
org.eclipse.jetty jetty-jndi 9.4.52.v20230823
org.eclipse.jetty Jetty-plus 9.4.52.v20230823
org.eclipse.jetty serwer pośredniczący Jetty 9.4.52.v20230823
org.eclipse.jetty zabezpieczenia Jetty 9.4.52.v20230823
org.eclipse.jetty serwer aplikacji Jetty 9.4.52.v20230823
org.eclipse.jetty jetty-servlet 9.4.52.v20230823
org.eclipse.jetty jetty-servlets 9.4.52.v20230823
org.eclipse.jetty jetty-util 9.4.52.v20230823
org.eclipse.jetty jetty-util-ajax 9.4.52.v20230823
org.eclipse.jetty Jetty-aplikacja internetowa 9.4.52.v20230823
org.eclipse.jetty jetty-xml 9.4.52.v20230823
org.eclipse.jetty.websocket WebSocket API 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-klient 9.4.52.v20230823
org.eclipse.jetty.websocket websocket —wspólne 9.4.52.v20230823
org.eclipse.jetty.websocket serwer WebSocket 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-servlet 9.4.52.v20230823
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 lokalizator hk2 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 Lokalizator zasobów OSGi 1.0.3
org.glassfish.hk2.external aopalliance-przepakowany 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers serwlet kontenerowy Jersey 2.40
org.glassfish.jersey.containers jersey-container-servlet-core 2.40
org.glassfish.jersey.core jersey-client 2.40
org.glassfish.jersey.core dzianina-zwykła 2.40
org.glassfish.jersey.core serwer Jersey 2.40
org.glassfish.jersey.inject jersey-hk2 2.40
org.hibernate.validator moduł sprawdzania poprawności hibernacji 6.1.7.Final
org.ini4j ini4j 0.5.4
org.javassist javassist 3.29.2-GA
org.jboss.logging jboss-logging (narzędzie do rejestrowania zdarzeń w JBoss) 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains Adnotacje 17.0.0
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mariadb.jdbc mariadb-java-client 2.7.9
org.mlflow mlflow-spark 2.2.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.6.0
org.roaringbitmap RoaringBitmap 0.9.45
org.roaringbitmap podkładki regulacyjne 0.9.45
org.rocksdb rocksdbjni 8.3.2
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.15
org.scala-lang scala-library_2.12 2.12.15
org.scala-lang scala-reflect_2.12 2.12.15
org.scala-lang.modules scala-collection-compat_2.12 2.9.0
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt interfejs testowy 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.2.15
org.scalanlp breeze-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest zgodny ze standardem scalatest 3.2.15
org.scalatest scalatest-core_2.12 3.2.15
org.scalatest scalatest-diagrams_2.12 3.2.15
org.scalatest scalatest-featurespec_2.12 3.2.15
org.scalatest scalatest-flatspec_2.12 3.2.15
org.scalatest scalatest-freespec_2.12 3.2.15
org.scalatest scalatest-funspec_2.12 3.2.15
org.scalatest scalatest-funsuite_2.12 3.2.15
org.scalatest scalatest-matchers-core_2.12 3.2.15
org.scalatest scalatest-mustmatchers_2.12 3.2.15
org.scalatest scalatest-propspec_2.12 3.2.15
org.scalatest scalatest-refspec_2.12 3.2.15
org.scalatest scalatest-shouldmatchers_2.12 3.2.15
org.scalatest scalatest-wordspec_2.12 3.2.15
org.scalatest scalatest_2.12 3.2.15
org.slf4j jcl-over-slf4j 2.0.7
org.slf4j jul-to-slf4j 2.0.7
org.slf4j slf4j-api 2.0.7
org.threeten ThreeTen Extra 1.7.1
org.tukaani xz 1,9
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.10.3
org.yaml snakeyaml 2.0
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
oprogramowanie.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1
  • Last updated on