Databricks Runtime 5.4 (nieobsługiwane)
Usługa Databricks opublikowała ten obraz w czerwcu 2019 roku.
Poniższe informacje o wersji zawierają informacje o środowisku Databricks Runtime 5.4 obsługiwanym przez platformę Apache Spark.
Nowe funkcje
Usługa Delta Lake w usłudze Azure Databricks dodaje automatyczne optymalizowanie (publiczna wersja zapoznawcza)
Obecnie podczas zapisywania danych w magazynie w chmurze należy skompaktować pliki w celu uzyskania optymalnej wydajności operacji we/wy. Musisz martwić się o odpowiedni rozmiar pliku, jak często kompaktować pliki, jak duży klaster do użycia itd. Aby rozwiązać tę klasę problemów, z przyjemnością przedstawiamy funkcję Automatycznego optymalizowania za pomocą usługi Delta Lake w usłudze Azure Databricks. Podczas każdego zapisu w tabelach delty automatycznie dowiesz się, jakie rozmiary plików i pliki kompaktowe są odpowiednie, dzięki czemu nie trzeba martwić się o optymalizację układu magazynu. Podczas zapisu, jeśli auto-optimize opcja to true, usługa Azure Databricks automatycznie określa, czy wymagana jest optymalizacja i optymalizuje małe pliki. Aby uzyskać szczegółowe informacje, zobacz Konfigurowanie usługi Delta Lake w celu kontrolowania rozmiaru pliku danych.
Narzędzia biblioteki są ogólnie dostępne
Narzędzia biblioteki są teraz ogólnie dostępne. Ta funkcja umożliwia manipulowanie bibliotekami języka Python z poziomu zakresu sesji notesu. Zobacz Narzędzie biblioteki (dbutils.library) (starsza wersja).
Usługa Databricks Połączenie ogólnie dostępna
Usługa Databricks Połączenie jest teraz ogólnie dostępna. Ta funkcja to biblioteka klienta platformy Spark, która umożliwia łączenie ulubionego środowiska IDE (IntelliJ, Eclipse, PyCharm, RStudio), serwera notesów (Zeppelin, Jupyter) i innych niestandardowych aplikacji z klastrami usługi Azure Databricks i uruchamiania kodu Spark. Zobacz Połączenie usługi Databricks.
Źródło danych pliku binarnego
Źródło danych pliku binarnego odczytuje pliki binarne i konwertuje każdy plik na jeden rekord zawierający nieprzetworzonej zawartości i metadanych pliku. Teraz można wydajnie odczytywać dowolne pliki w ramce danych platformy Spark bez odwiedzania zawartości plików. Jest to szczególnie przydatne, jeśli chcesz używać platformy Spark do ładowania dużych plików, takich jak obrazy, na potrzeby oceniania. Zobacz Plik binarny.
Ulepszenia
Buforowanie dysku
Buforowanie dysku jest teraz wstępnie skonfigurowane dla wystąpień Lsv2. Jednak pamięć podręczna nie jest domyślnie włączona. Aby uzyskać informacje o sposobie jej włączania, zobacz Włączanie lub wyłączanie pamięci podręcznej dysku.
Przekazywanie poświadczeń usługi Azure AD w usłudze Azure Data Lake Storage Gen2
Instalacja systemu plików DBFS systemu plików usługi Azure Data Lake Storage (ADLS) Gen2 z przekazywaniem poświadczeń microsoft Entra ID (dawniej Azure Active Directory) jest teraz obsługiwana. Zobacz Azure Data Lake Storage Gen2.
Uaktualniono język R do wersji 3.6.0
Baza języka R została uaktualniona z wersji 3.5.2 do wersji 3.6.0.
Apache Spark
Środowisko Databricks Runtime 5.4 obejmuje platformę Apache Spark 2.4.3. Ta wersja zawiera wszystkie poprawki i ulepszenia platformy Spark zawarte w środowisku Databricks Runtime 5.3 (nieobsługiwane), a także następujące dodatkowe poprawki błędów i ulepszenia wprowadzone na platformie Spark:
- [SPARK-27596][SQL] Opcja "zapytanie" JDBC nie działa w przypadku bazy danych Oracle
- [SPARK-27240][PYTHON] Użyj ramki danych biblioteki pandas dla argumentu typu struktury w funkcji UDF biblioteki Scalar pandas.
- [SPARK-26745][SQL] [TESTY] Przypadek testowy JsonSuite: pusty wiersz —> 0 liczba rekordów
- [SPARK-25535][CORE] Obejście złej obsługi błędów w commons-crypto.
- [SPARK-26891][YARN] Naprawianie niestabilnego testu w aplikacji YarnSchedulerBackendSuite
- [SPARK-27563][SQL] [TEST] automatycznie pobierz najnowsze wersje platformy Spark w programie HiveExternalCatalogVersionsSuite
- [SPARK-27494][SS] Wartości null nie działają w źródle platformy Kafka w wersji 2
- [SPARK-27550][TEST] Poprawka test-dependencies.sh , aby nie używać profilu kafka-0-8 dla języka Scala-2.12
- [SPARK-26992][STS] Naprawiono poprawną dostawę puli harmonogramów stS
- [SPARK-27544][PYTHON] [TEST] Naprawianie skryptu testowego języka Python do pracy z kompilacją Scala-2.12
- [SPARK-27539][SQL] Naprawianie niedokładnych danych wyjściowych agregacji Szacowanie wartości z kolumną zawierającą wartości null
- [SPARK-27469][BUILD] Unify commons-beanutils deps to latest 1.9.3 (Ujednolicanie commons-beanutils deps do najnowszej wersji 1.9.3)
- [SPARK-27419][KONTYNUACJA] [DOCS] Dodaj uwagę na temat zmiany spark.executor.heartbeatInterval w przewodniku migracji
- [SPARK-27496][CORE] Błędy krytyczne powinny być również wysyłane z powrotem do nadawcy
- [SPARK-25079][PYTHON] aktualizowanie pliku wykonywalnego python3 do wersji 3.6.x
- [SPARK-27163][PYTHON] Oczyszczanie i konsolidowanie funkcji funkcji zdefiniowanej przez użytkownika biblioteki pandas
- [SPARK-27403][SQL] Naprawianie parametrów updateTableStats w celu aktualizowania statystyk tabeli zawsze przy użyciu nowych statystyk lub braków
- [SPARK-27479][BUILD] Ukryj dokumenty interfejsu API dla witryny org.apache.spark.util.kvstore
- [SPARK-27446][R] Użyj istniejącej conf platformy Spark, jeśli jest dostępna.
- [SPARK-27453] Przekazywanie partycjiBy jako opcji w narzędziu DataFrameWriter
- [SPARK-27454][SPARK-27454][HOT-FIX] [ML] [SQL] Cherrypick (Poprawka w źródle danych obrazu spark kończy się niepowodzeniem w przypadku napotkania niektórych nielegalnych obrazów)
- [SPARK-27351][SQL] Nieprawidłowe szacowanie wartości outputRows po agregacji Przy użyciu tylko kolumny wartości null
- [SPARK-27314][SQL] Deduplikuj identyfikatory exprId dla unii.
- [SPARK-27394][WEBUI] Opróżnij element LiveEntity w razie potrzeby podczas odbierania elementu SparkListenerExecutorMetricsUpdate (backport 2.4)
- [SPARK-27406][SQL] NiebezpieczneArrayData serializacji jest przerywana, gdy dwie maszyny mają inny rozmiar operacji we/wy
- [SPARK-27419][CORE] Unikaj rzutowania interwału pulsu do sekund (2,4)
- [SPARK-27391][SS] Nie inicjuj leniwej wartości w zadaniu ContinuousExecution.
- [SPARK-27390][CORE] [SQL] [TEST] Naprawianie niezgodności nazwy pakietu
- [SPARK-27358][Interfejs użytkownika] Zaktualizuj jquery do wersji 1.12.x, aby pobrać poprawki zabezpieczeń
- [SPARK-27216][CORE] Uaktualnij narzędzie RoaringBitmap do wersji 0.7.45, aby rozwiązać problem z niebezpiecznym serwerem Kryo/dser
- [SPARK-27382][SQL] [TEST] Aktualizowanie testowania platformy Spark 2.4.x w programie HiveExternalCatalogVersionsSuite
- [SPARK-27338][CORE] Naprawianie zakleszczenia między elementami UnsafeExternalSorter i TaskMemoryManager
- [SPARK-27338][CORE] [FOLLOWUP] usuń spację końcową
- [SPARK-27338][CORE] Napraw zakleszczenie w pliku UnsafeExternalSorter.SpillableIterator podczas blokowania zarówno niebezpiecznegoexternalSorter.SpillableIterator, jak i TaskMemoryManager
- [SPARK-27346][SQL] Luzowanie warunku asertywnego nowego wiersza w polu "examples" w pole ExpressionInfo
- [SPARK-26998][CORE] Usuwanie konfiguracji SSL z funkcji wykonawczych
- [SPARK-27244][CORE] [TEST] [FOLLOWUP] toDebugString redacts poufne informacje
- [SPARK-27267][KONTYNUACJA] Aktualizacja manifestu zależności hadoop-2.6
- [SPARK-27267][CORE] Zaktualizuj przystawkę, aby uniknąć błędu podczas dekompresowania pustych danych serializowanych
- [SPARK-27301][DSTREAM] Skróć cykl życia buforowanego systemu plików do zakresu wewnętrznego metody oczyszczania
- [SPARK-27244][CORE] Redact Passwords While Using Option logConf=true (Redact Passwords While Using Option logConf=true)
- [SPARK-26208][SQL] dodaj nagłówki do pustych plików CSV, gdy header=true
- [SPARK-27275][CORE] Naprawienie potencjalnego uszkodzenia w funkcji EncryptedMessage.transferTo (2.4)
- [SPARK-23836][PYTHON] Dodano obsługę zwracania elementu StructType w funkcji UDF biblioteki Scalar pandas
- [SPARK-26961][CORE] Włączanie możliwości równoległego ładowania klas
- [SPARK-27274][DOCS] Poprawiono odwołania do wersji scala 2.11 w dokumentacji w wersji 2.4.1 lub nowszej; Uwaga Obsługa wersji 2.11 jest przestarzała w wersji 2.4.1 lub nowszej
- [SPARK-27198][CORE] Niezgodność interwału pulsu w sterowniku i funkcji wykonawczej
- [SPARK-27094][YARN] Obejście rackResolver przerwania wątek połykania.
- [SPARK-24935][SQL] naprawa interfejsu UDAF programu Hive z dwoma buforami agregacji
- [SPARK-27160][SQL] Naprawianie typu dziesiętnego podczas kompilowania filtrów orc
- [SPARK-26606][CORE] Obsługa opcji sterowników prawidłowo podczas przesyłania do trybu klastra autonomicznego za pośrednictwem starszego klienta
- [SPARK-27221][SQL] Ulepszanie komunikatu o błędzie potwierdzenia w pliku TreeNode.parseToJson (5.x)
- [SPARK-27102][R] [PYTHON] [CORE] Usuwanie odwołań do kodów Scala języka Python w kodach języka R języka Scala
- [SPARK-27159][SQL] aktualizowanie dialektu serwera mssql w celu obsługi typu binarnego
- [SPARK-27112][CORE] : Utwórz kolejność zasobów między wątkami, aby rozwiązać zakleszczenia napotkane podczas próby zabicia funkcji wykonawczych z powodu dynamicznej alokacji lub listy zablokowanych
- [SPARK-27178][K8S] dodawanie pakietu nss w celu naprawy testów
- [SPARK-27045][SQL] Karta SQL w interfejsie użytkownika pokazuje rzeczywisty kod SQL zamiast wywołania w przypadku usługi SparkSQLDriver
- [SPARK-27119][SQL] Nie wnioskowaj schematu podczas odczytywania tabeli serde programu Hive z natywnym źródłem danych
- [SPARK-27165][SPARK-27107][BUILD] [SQL] Uaktualnianie systemu Apache ORC do wersji 1.5.5
- [SPARK-26742][K8S] Aktualizacja wersji klienta k8s do wersji 4.1.2
- [SPARK-26927][CORE] Upewnij się, że funkcja wykonawcza jest aktywna podczas przetwarzania zdarzeń w dynamicznym menedżerze alokacji.
- [SPARK-27097][CHERRY-PICK 2.4] Unikaj osadzania przesunięć zależnych od platformy dosłownie w całym etapie wygenerowanego kodu
- [SPARK-27111][SS] Napraw wyścig, w przypadku którego zapytanie ciągłe może zakończyć się niepowodzeniem z błędem InterruptedException (5.x)
- [SPARK-27111][SS] Naprawianie wyścigu, którego ciągłe zapytanie może zakończyć się niepowodzeniem z błędem InterruptedException
- [SPARK-27080][SQL] Poprawka usterek: mergeWithMetastoreSchema z równomiernym porównaniem małych liter
- [SPARK-26604][CORE] Czyszczenie rejestracji kanału dla usługi StreamManager
- [SPARK-27016][SQL] [BUILD] Traktuj wszystkie ostrzeżenia antlr jako błędy podczas generowania analizatora z pliku gramatyki SQL
- [SPARK-25863][SPARK-21871][SQL] Sprawdź, czy statystyki rozmiaru kodu są puste, czy nie są aktualizowaneAndGetCompilationStats
- [SPARK-27078][SQL] Naprawianie błędu NoSuchFieldError podczas odczytywania zmaterializowanych widoków programu Hive
- [SPARK-27019][SQL] [WEBUI] onJobStart występuje po tym, jak element onExecutionEnd nie powinien zastępować magazynu kvstore
- [SPARK-27065][CORE] unikaj więcej niż jednego aktywnego zestawu zadań menedżerów dla etapu
- [SPARK-24669][SQL] Unieważnianie tabel w przypadku funkcji DROP DATABASE CASCADE
- [SPARK-26932][DOC] Dodawanie ostrzeżenia dotyczącego problemu z czytnikiem ORC programu Hive 2.1.1
- [SPARK-25139][SPARK-18406][CORE] Unikanie niekrytycznych w celu zabicia funkcji wykonawczej w programie PythonRunner
Aktualizacje konserwacyjne
Zobacz Aktualizacje konserwacji środowiska Databricks Runtime 5.4.
Środowisko systemu
- System operacyjny: Ubuntu 16.04.6 LTS
- Java: 1.8.0_191
- Scala: 2.11.12
- Python: 2.7.12 dla klastrów języka Python 2 i 3.5.2 dla klastrów języka Python 3.
- R: R w wersji 3.6.0 (2019-04-26)
- Klastry procesora GPU: zainstalowane są następujące biblioteki procesora GPU FIRMY NVIDIA:
- Kierowca Tesla 375.66
- CUDA 9.0
- cuDNN 7.0
Uwaga
Mimo że język Scala 2.12 jest obsługiwany w systemie Apache Spark 2.4, nie jest obsługiwany w środowisku Databricks Runtime 5.4.
Zainstalowane biblioteki języka Python
| Biblioteka | Wersja | Biblioteka | Wersja | Biblioteka | Wersja |
|---|---|---|---|---|---|
| ansi2html | 1.1.1 | argparse | 1.2.1 | backports-abc | 0.5 |
| boto | 2.42.0 | boto3 | 1.4.1 | botocore | 1.4.70 |
| brewer2mpl | 1.4.1 | certifi | 2016.2.28 | cffi | 1.7.0 |
| chardet | 2.3.0 | colorama | 0.3.7 | configobj | 5.0.6 |
| Kryptografii | 1.5 | Cycler | 0.10.0 | Cython | 0.24.1 |
| Dekorator | 4.0.10 | docutils | 0,14 | enum34 | 1.1.6 |
| et-xmlfile | 1.0.1 | freetype-py | 1.0.2 | funcsigs | 1.0.2 |
| fusepy | 2.0.4 | Futures | 3.2.0 | ggplot | 0.6.8 |
| html5lib | 0,999 | Idna | 2.1 | Ipaddress | 1.0.16 |
| Ipython | 2.2.0 | ipython-genutils | 0.1.0 | jdcal | 1.2 |
| Jinja2 | 2.8 | jmespath | 0.9.0 | llvmlite | 0.13.0 |
| Lxml | 3.6.4 | Znaczniki Sejf | 0.23 | matplotlib | 1.5.3 |
| mpld3 | 0,2 | msgpack-python | 0.4.7 | ndg-httpsclient | 0.3.3 |
| numba | 0.28.1 | Numpy | 1.11.1 | openpyxl | 2.3.2 |
| Pandas | 0.19.2 | pathlib2 | 2.1.0 | Patsy | 0.4.1 |
| pexpect | 4.0.1 | pickleshare | 0.7.4 | Poduszkę | 3.3.1 |
| Pip | 19.1.1 | Ply | 3.9 | prompt-toolkit | 1.0.7 |
| psycopg2 | 2.6.2 | ptyprocess | 0.5.1 | py4j | 0.10.3 |
| pyarrow | 0.8.0 | pyasn1 | 0.1.9 | pycparser | 2.14 |
| Pygments | 2.1.3 | PyGObject | 3.20.0 | pyOpenSSL | 16.0.0 |
| pyparsing | 2.2.0 | pypng | 0.0.18 | Python | 2.7.12 |
| python-dateutil | 2.5.3 | python-geohash | 0.8.5 | pytz | 2016.6.1 |
| żądania | 2.11.1 | s3transfer | 0.1.9 | scikit-learn | 0.18.1 |
| scipy | 0.18.1 | Przeszukać | 0.32 | seaborn | 0.7.1 |
| setuptools | 41.0.1 | simplejson | 3.8.2 | simples3 | 1.0 |
| singledispatch | 3.4.0.3 | Sześć | 1.10.0 | statsmodels | 0.6.1 |
| Tornado | 5.1.1 | traitlety | 4.3.0 | urllib3 | 1.19.1 |
| Virtualenv | 16.1.0 | wcwidth | 0.1.7 | Koła | 0.33.3 |
| wsgiref | 0.1.2 |
Zainstalowane biblioteki języka R
| Biblioteka | Wersja | Biblioteka | Wersja | Biblioteka | Wersja |
|---|---|---|---|---|---|
| abind | 1.4-5 | askpass | 1.1 | assertthat | 0.2.1 |
| Backports | 1.1.3 | base | 3.6.0 | base64enc | 0.1-3 |
| BH | 1.69.0-1 | bitowe | 1.1-14 | bit64 | 0.9-7 |
| bitops | 1.0-6 | blob | 1.1.1 | rozruch | 1.3-20 |
| Napar | 1.0-6 | obiekt wywołujący | 3.2.0 | samochód | 3.0-2 |
| carData | 3.0-2 | caret | 6.0-82 | cellranger | 1.1.0 |
| chron | 2.3-53 | class | 7.3-15 | cli | 1.1.0 |
| clipr | 0.5.0 | clisymbols | 1.2.0 | cluster | 2.0.8 |
| codetools | 0.2-16 | Kolorów | 1.4-1 | commonmark | 1,7 |
| — kompilator | 3.6.0 | config | 0.3 | Pastel | 1.3.4 |
| Curl | 3.3 | data.table | 1.12.0 | usługi Power BI | 3.6.0 |
| DBI | 1.0.0 | dbplyr | 1.3.0 | Desc | 1.2.0 |
| devtools | 2.0.1 | Szyfrowane | 0.6.18 | DoMC | 1.3.5 |
| dplyr | 0.8.0.1 | wielokropek | 0.1.0 | fani | 0.4.0 |
| forcats | 0.4.0 | foreach | 1.4.4 | Zagranicznych | 0.8-71 |
| Forge | 0.2.0 | Fs | 1.2.7 | Gbm | 2.1.5 |
| Generyczne | 0.0.2 | ggplot2 | 3.1.0 | Gh | 1.0.1 |
| git2r | 0.25.2 | glmnet | 2.0-16 | Kleju | 1.3.1 |
| Gower | 0.2.0 | grafika | 3.6.0 | grDevices | 3.6.0 |
| Siatki | 3.6.0 | gridExtra | 2.3 | gsubfn | 0,7 |
| gtable | 0.3.0 | H2o | 3.22.1.1 | Haven | 2.1.0 |
| Hms | 0.4.2 | htmltools | 0.3.6 | htmlwidgets | 1.3 |
| httr | 1.4.0 | hwriter | 1.3.2 | hwriterPlus | 1.0-3 |
| Ini | 0.3.1 | ipred | 0.9-8 | Iteratory | 1.0.10 |
| jsonlite | 1.6 | KernSmooth | 2.23-15 | Etykietowania | 0.3 |
| Kraty | 0.20-38 | Lawy | 1.6.5 | opóźnienie | 0.2.2 |
| littler | 0.3.7 | lme4 | 1.1-21 | lubridate | 1.7.4 |
| magrittr | 1.5 | mapproj | 1.2.6 | Mapy | 3.3.0 |
| maptools | 0.9-5 | MASSACHUSETTS | 7.3-51.1 | Macierz | 1.2-17 |
| MatrixModels | 0.4-1 | zapamiętywanie | 1.1.0 | metody | 3.6.0 |
| mgcv | 1.8-28 | Mime | 0,6 | minqa | 1.2.4 |
| Metryki modelu | 1.2.2 | munsell | 0.5.0 | mvtnorm | 1.0-10 |
| nlme | 3.1-139 | nloptr | 1.2.1 | nnet | 7.3-12 |
| numDeriv | 2016.8-1 | openssl | 1.3 | openxlsxx | 4.1.0 |
| parallel | 3.6.0 | pbkrtest | 0.4-7 | Filar | 1.3.1 |
| pkgbuild | 1.0.3 | pkgconfig | 2.0.2 | pkgKitten | 0.1.4 |
| pkgload | 1.0.2 | plogr | 0.2.0 | plyr | 1.8.4 |
| Pochwały | 1.0.0 | prettyunits | 1.0.2 | Proc | 1.14.0 |
| processx | 3.3.0 | prodlim | 2018.04.18 | Postęp | 1.2.0 |
| Proto | 1.0.0 | Ps | 1.3.0 | purrr | 0.3.2 |
| quantreg | 5.38 | R.methodsS3 | 1.7.1 | R.oo | 1.22.0 |
| R.utils | 2.8.0 | r2d3 | 0.2.3 | R6 | 2.4.0 |
| randomForest | 4.6-14 | rappdirs | 0.3.1 | rcmdcheck | 1.3.2 |
| RColorBrewer | 1.1-2 | Rcpp | 1.0.1 | RcppEigen | 0.3.3.5.0 |
| RcppRoll | 0.3.0 | RCurl | 1.95-4.12 | readr | 1.3.1 |
| readxl | 1.3.1 | przepisy | 0.1.5 | Rewanżu | 1.0.1 |
| Piloty | 2.0.2 | zmień kształt2 | 1.4.3 | Rio | 0.5.16 |
| rlang | 0.3.3 | RODBC | 1.3-15 | roxygen2 | 6.1.1 |
| rpart | 4.1-15 | rprojroot | 1.3-2 | Rserve | 1.8-6 |
| RSQLite | 2.1.1 | rstudioapi | 0.10 | Skale | 1.0.0 |
| sessioninfo | 1.1.1 | Sp | 1.3-1 | sparklyr | 1.0.0 |
| SparkR | 2.4.3 | Rozrzednia | 1.77 | Przestrzennej | 7.3-11 |
| Splajnów | 3.6.0 | sqldf | 0.4-11 | KWADRAT | 2017.10-1 |
| statmod | 1.4.30 | Statystyki | 3.6.0 | stats4 | 3.6.0 |
| stringi | 1.4.3 | stringr | 1.4.0 | Przetrwanie | 2.43-3 |
| sys | 3.1 | tcltk | 3.6.0 | NauczanieDemos | 2.10 |
| testthat | 2.0.1 | tibble | 2.1.1 | tidyr | 0.8.3 |
| tidyselect | 0.2.5 | timeDate | 3043.102 | tools | 3.6.0 |
| usethis | 1.4.0 | utf8 | 1.1.4 | narzędzia | 3.6.0 |
| viridisLite | 0.3.0 | wąs | 0.3-2 | withr | 2.1.2 |
| xml2 | 1.2.0 | xopen | 1.0.0 | Yaml | 2.2.0 |
| Zip | 2.0.1 |
Zainstalowane biblioteki Java i Scala (wersja klastra Scala 2.11)
| Identyfikator grupy | Identyfikator artefaktu | Wersja |
|---|---|---|
| Antlr | Antlr | 2.7.7 |
| com.amazonaws | amazon-kinesis-client | 1.8.10 |
| com.amazonaws | aws-java-sdk-autoscaling | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.313 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.313 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.313 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.313 |
| com.amazonaws | aws-java-sdk-config | 1.11.313 |
| com.amazonaws | aws-java-sdk-core | 1.11.313 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.313 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.313 |
| com.amazonaws | aws-java-sdk-directory | 1.11.313 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.313 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.313 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.313 |
| com.amazonaws | aws-java-sdk-efs | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.313 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.313 |
| com.amazonaws | aws-java-sdk-emr | 1.11.313 |
| com.amazonaws | aws-java-sdk-glacier | 1.11.313 |
| com.amazonaws | aws-java-sdk-klej | 1.11.313 |
| com.amazonaws | aws-java-sdk-iam | 1.11.313 |
| com.amazonaws | aws-java-sdk-importexport | 1.11.313 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.313 |
| com.amazonaws | aws-java-sdk-kms | 1.11.313 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.313 |
| com.amazonaws | aws-java-sdk-logs | 1.11.313 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.11.313 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.313 |
| com.amazonaws | aws-java-sdk-rds | 1.11.313 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.313 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.313 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.313 |
| com.amazonaws | aws-java-sdk-ses | 1.11.313 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.313 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.313 |
| com.amazonaws | aws-java-sdk-sns | 1.11.313 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.313 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.313 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.11.313 |
| com.amazonaws | aws-java-sdk-sts | 1.11.313 |
| com.amazonaws | aws-java-sdk-support | 1.11.313 |
| com.amazonaws | aws-java-sdk-biblioteka-biblioteka | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.313 |
| com.amazonaws | jmespath-java | 1.11.313 |
| com.carrotsearch | hppc | 0.7.2 |
| com.chuusai | shapeless_2.11 | 2.3.2 |
| com.clearspring.analytics | strumień | 2.7.0 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | dbml-local_2.11 | 0.5.0-db8-spark2.4 |
| com.databricks | dbml-local_2.11-tests | 0.5.0-db8-spark2.4 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.11 | 0.4.15-9 |
| com.databricks.scalapb | scalapb-runtime_2.11 | 0.4.15-9 |
| com.esotericsoftware | kryo-cieniowane | 4.0.2 |
| com.esotericsoftware | minlog | 1.3.0 |
| com.fasterxml | Kolega | 1.0.0 |
| com.fasterxml.jackson.core | adnotacje jackson | 2.6.7 |
| com.fasterxml.jackson.core | jackson-core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-scala_2.11 | 2.6.7.1 |
| com.github.fommil | jniloader | 1.1 |
| com.github.fommil.netlib | core | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1.1 |
| com.github.fommil.netlib | native_ref-java-natives | 1.1 |
| com.github.fommil.netlib | native_system java | 1.1 |
| com.github.fommil.netlib | native_system-java-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1.1 |
| com.github.luben | zstd-jni | 1.3.2-2 |
| com.github.rwl | jtransforms | 2.4.0 |
| com.google.code.findbugs | jsr305 | 2.0.1 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.guava | Guawa | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2database | h2 | 1.3.174 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.RELEASE |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.2.8 |
| com.microsoft.azure | azure-storage | 5.2.0 |
| com.microsoft.sqlserver | mssql-jdbc | 6.2.2.jre8 |
| com.ning | compress-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.11 | 0.3 |
| com.twitter | chill-java | 0.9.3 |
| com.twitter | chill_2.11 | 0.9.3 |
| com.twitter | parquet-hadoop-bundle | 1.6.0 |
| com.twitter | util-app_2.11 | 6.23.0 |
| com.twitter | util-core_2.11 | 6.23.0 |
| com.twitter | util-jvm_2.11 | 6.23.0 |
| com.typesafe | config | 1.2.1 |
| com.typesafe.scala-logging | scala-logging-api_2.11 | 2.1.2 |
| com.typesafe.scala-logging | scala-logging-slf4j_2.11 | 2.1.2 |
| com.univocity | parsery jednowołciowości | 2.7.3 |
| com.vlkan | flatbuffers | 1.2.0-3f79e055 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.7.0 |
| commons-beanutils | commons-beanutils-core | 1.8.0 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1.10 |
| commons-collections | commons-collections | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2,4 |
| commons-lang | commons-lang | 2.6 |
| commons-logging | commons-logging | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.airlift | aircompressor | 0.10 |
| io.dropwizard.metrics | metryki —rdzeń | 3.1.5 |
| io.dropwizard.metrics | metrics-ganglia | 3.1.5 |
| io.dropwizard.metrics | metrics-graphite | 3.1.5 |
| io.dropwizard.metrics | metrics-healthchecks | 3.1.5 |
| io.dropwizard.metrics | metrics-jetty9 | 3.1.5 |
| io.dropwizard.metrics | metrics-json | 3.1.5 |
| io.dropwizard.metrics | metrics-jvm | 3.1.5 |
| io.dropwizard.metrics | metrics-log4j | 3.1.5 |
| io.dropwizard.metrics | serwlety metrics-servlets | 3.1.5 |
| io.netty | netty | 3.9.9.Final |
| io.netty | netty-all | 4.1.17.Final |
| io.prometheus | simpleclient | 0.0.16 |
| io.prometheus | simpleclient_common | 0.0.16 |
| io.prometheus | simpleclient_dropwizard | 0.0.16 |
| io.prometheus | simpleclient_servlet | 0.0.16 |
| io.prometheus.jmx | Kolektor | 0,7 |
| javax.activation | aktywacja | 1.1.1 |
| javax.annotation | javax.annotation-api | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | jta | 1.1 |
| javax.validation | validation-api | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| jline | jline | 2.14.6 |
| joda-time | joda-time | 2.9.3 |
| Log4j | apache-log4j-extras | 1.2.17 |
| Log4j | Log4j | 1.2.17 |
| drzewa maven | hive-exec-with-klej | hive-12679-patch_deploy |
| drzewa maven | hive-exec-with-klej | hive-exec_shaded |
| net.hydromatic | eigenbase-properties | 1.1.5 |
| net.razorvine | pirolit | 4.13 |
| net.sf.jpam | jpam | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | snowflake-ingest-sdk | 0.9.5 |
| net.snowflake | snowflake-jdbc | 3.6.15 |
| net.snowflake | spark-snowflake_2.11 | 2.4.10-spark_2.4 |
| net.sourceforge.f2j | arpack_combined_all | 0.1 |
| org.acplt | oncrpc | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.4 |
| org.antlr | antlr4-runtime | 4.7 |
| org.antlr | stringtemplate | 3.2.1 |
| org.apache.ant | tat | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.arrow | format strzałki | 0.10.0 |
| org.apache.arrow | strzałka w pamięci | 0.10.0 |
| org.apache.arrow | wektor strzałki | 0.10.0 |
| org.apache.avro | Avro | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.calcite | calcite-avatica | 1.2.0 inkubacja |
| org.apache.calcite | calcite-core | 1.2.0 inkubacja |
| org.apache.calcite | calcite-linq4j | 1.2.0 inkubacja |
| org.apache.commons | commons-compress | 1.8.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.curator | kurator-klient | 2.7.1 |
| org.apache.curator | struktura kuratora | 2.7.1 |
| org.apache.curator | przepisy kuratora | 2.7.1 |
| org.apache.derby | Derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | adnotacje hadoop | 2.7.3 |
| org.apache.hadoop | hadoop-auth | 2.7.3 |
| org.apache.hadoop | hadoop-client | 2.7.3 |
| org.apache.hadoop | hadoop-common | 2.7.3 |
| org.apache.hadoop | hadoop-hdfs | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-common | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-core | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.3 |
| org.apache.htrace | htrace-core | 3.1.0 inkubacja |
| org.apache.httpcomponents | httpclient | 4.5.4 |
| org.apache.httpcomponents | httpcore | 4.4.8 |
| org.apache.ivy | Bluszcz | 2.4.0 |
| org.apache.orc | orc-core-nohive | 1.5.2 |
| org.apache.orc | orc-mapreduce-nohive | 1.5.2 |
| org.apache.orc | podkładki orc-shim | 1.5.2 |
| org.apache.parquet | parquet-column | 1.10.1.1-databricks3 |
| org.apache.parquet | parquet-common | 1.10.1.1-databricks3 |
| org.apache.parquet | kodowanie parquet | 1.10.1.1-databricks3 |
| org.apache.parquet | format parquet | 2.4.0 |
| org.apache.parquet | parquet-hadoop | 1.10.1.1-databricks3 |
| org.apache.parquet | parquet-jackson | 1.10.1.1-databricks3 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm6-cieniowany | 4.8 |
| org.apache.zookeeper | zookeeper | 3.4.6 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-compiler | 3.0.10 |
| org.codehaus.janino | janino | 3.0.10 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | datanucleus-core | 3.2.10 |
| org.datanucleus | datanucleus-rdbms | 3.2.9 |
| org.eclipse.jetty | jetty-client | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-kontynuacja | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-http | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-io | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-jndi | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-plus | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-proxy | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-security | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-server | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-servlet | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-servlets | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-util | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-webapp | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-xml | 9.3.20.v20170531 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.4.0-b34 |
| org.glassfish.hk2 | lokalizator hk2 | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-utils | 2.4.0-b34 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.1 |
| org.glassfish.hk2.external | aopalliance-repackaged | 2.4.0-b34 |
| org.glassfish.hk2.external | javax.inject | 2.4.0-b34 |
| org.glassfish.jersey.bundles.repackaged | jersey-guava | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.22.2 |
| org.glassfish.jersey.core | jersey-client | 2.22.2 |
| org.glassfish.jersey.core | jersey-common | 2.22.2 |
| org.glassfish.jersey.core | jersey-server | 2.22.2 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.22.2 |
| org.hibernate | moduł sprawdzania poprawności hibernacji | 5.1.1.Final |
| org.iq80.snappy | Żwawy | 0,2 |
| org.javassist | javassist | 3.18.1-GA |
| org.jboss.logging | jboss-logging | 3.1.3.GA |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1,7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.11 | 3.5.3 |
| org.json4s | json4s-core_2.11 | 3.5.3 |
| org.json4s | json4s-jackson_2.11 | 3.5.3 |
| org.json4s | json4s-scalap_2.11 | 3.5.3 |
| org.lz4 | lz4-java | 1.4.0 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.mockito | mockito-all | 1.9.5 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.7.45 |
| org.roaringbitmap | Podkładki | 0.7.45 |
| org.rocksdb | rocksdbjni | 5.2.1 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.11 | 2.11.12 |
| org.scala-lang | scala-library_2.11 | 2.11.12 |
| org.scala-lang | scala-reflect_2.11 | 2.11.12 |
| org.scala-lang.modules | scala-parser-combinators_2.11 | 1.1.0 |
| org.scala-lang.modules | scala-xml_2.11 | 1.0.5 |
| org.scala-sbt | interfejs testowy | 1.0 |
| org.scalacheck | scalacheck_2.11 | 1.12.5 |
| org.scalactic | scalactic_2.11 | 3.0.3 |
| org.scalanlp | breeze-macros_2.11 | 0.13.2 |
| org.scalanlp | breeze_2.11 | 0.13.2 |
| org.scalatest | scalatest_2.11 | 3.0.3 |
| org.slf4j | jcl-over-slf4j | 1.7.16 |
| org.slf4j | jul-to-slf4j | 1.7.16 |
| org.slf4j | slf4j-api | 1.7.16 |
| org.slf4j | slf4j-log4j12 | 1.7.16 |
| org.spark-project.hive | hive-beeline | 1.2.1.spark2 |
| org.spark-project.hive | hive-cli | 1.2.1.spark2 |
| org.spark-project.hive | hive-jdbc | 1.2.1.spark2 |
| org.spark-project.hive | hive-metastore | 1.2.1.spark2 |
| org.spark-project.spark.spark | Nieużywane | 1.0.0 |
| org.spire-math | spire-macros_2.11 | 0.13.0 |
| org.spire-math | spire_2.11 | 0.13.0 |
| org.springframework | spring-core | 4.1.4.RELEASE |
| org.springframework | spring-test | 4.1.4.RELEASE |
| org.tukaani | Xz | 1.5 |
| org.typelevel | machinist_2.11 | 0.6.1 |
| org.typelevel | macro-compat_2.11 | 1.1.1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.7.3 |
| org.yaml | snakeyaml | 1.16 |
| Oro | Oro | 2.0.8 |
| software.amazon.ion | ion-java | 1.0.2 |
| Stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0.52 |