Databricks Runtime 9.1 LTS

  • Makale

Aşağıdaki sürüm notları, Apache Spark 3.1.2 tarafından desteklenen Databricks Runtime 9.1 LTS ve Databricks Runtime 9.1 LTS Photon hakkında bilgi sağlar. Databricks bu görüntüleri Eylül 2021'de yayınladı. Photon, Genel Önizleme aşamasındadır.

Not

LTS, bu sürümün uzun vadeli destek altında olduğu anlamına gelir. Bkz. Databricks Runtime LTS sürüm yaşam döngüsü.

Yeni özellikler ve geliştirmeler

Otomatik Yükleyici şema ipuçları artık dizi ve eşleme türleriyle çalışıyor

Dizi ve eşleme türleri, Otomatik Yükleyici için şema ipuçlarıyla şema çıkarımını geçersiz kılma bölümünde desteklenir.

Diziler için şema ipuçlarına örnek olarak şunlar verilebilir:

  1. arr Array<TYPE> dizi türünü değiştirir.
  2. arr.element TYPE dizi türünü değiştirir (anahtar sözcüğünü element kullanarak).
  3. arr.element.x TYPE bir yapı dizisindeki iç içe alan türünü değiştirir.

İlk iki örnek, dizi arrTYPEtürünü olarak değiştirmeye yönelik ipuçlarıdır, ancak farklı söz dizimi kullanırlar. Üçüncü örnekte, arr alanı xolan bir yapı dizisidir. Bu örnekte, türünü olarak değiştirme gösterilmektedir xTYPE.

Haritalar için şema ipuçlarına örnek olarak şunlar verilebilir:

  1. m Map<KEY-TYPE, VALUE-TYPE> eşleme anahtarını ve değer türlerini değiştirir.
  2. m.key TYPE , harita anahtarlarının türünü değiştirir.
  3. m.value TYPE eşleme değerlerinin türünü değiştirir.
  4. m.key.x TYPE bir harita anahtarındaki alan türünü değiştirir.
  5. m.value.x TYPE bir eşleme değerinin alan türünü değiştirir.

İlk örnek, eşlemenin m hem anahtar hem de değer türlerini sırasıyla ve VALUE_TYPE olarak KEY_TYPE değiştirir. İkinci ve üçüncü örnekler yalnızca anahtar türünün veya yalnızca değer türünün değiştirilmesi gerekiyorsa kullanılabilir. Dördüncü ve beşinci örneklerde, m alanı xolan yapı türlerinin anahtar ve değerini içeren bir haritadır. Bu örnekte, türünü olarak değiştirme gösterilmektedir xTYPE.

Birleştirme şeması için Avro dosya desteği

Avro dosya biçimi artık dosyaları okurken seçeneğini destekliyor mergeSchema . Avro dosyaları okunurken true olarak ayarlandığında mergeSchema , tek bir dosya yerine bir Avro dosyaları kümesinden şema çıkarılır. Bu, tek tek şemaları farklı olsa bile tüm dosyaları okuyabilecek bir şema çıkararak kullanılabilirliği artırır. Bkz. Yapılandırma.

Otomatik Yükleyici artımlı listeleme desteği (Genel Önizleme)

Sözcük temelli olarak oluşturulan dosyalar söz konusu olduğunda, Otomatik Yükleyici nedir? artık tüm dizini listelemek yerine daha önce alınan dosyalardan listeleyerek dizin listesini daha verimli hale getirmek için sözcük temelli dosya sıralama ve mevcut iyileştirilmiş API'lerden yararlanıyor. Otomatik Yükleyici, belirli bir dizinin varsayılan olarak artımlı listeleme için uygun olup olmadığını otomatik olarak algılar. Bu davranışı açıkça denetlemek için yeni cloudFiles.useIncrementalListing seçeneği açık (true), kapalı () veya otomatik (falseauto olarak ayarlayın. Bu davranışı olarak trueayarlarsanız, tüm verilerinizin cloudFiles.backfillInterval tamamen alındığından emin olmak için verileriniz üzerinde düzenli yedeklemeler zamanlama seçeneğini de ayarlayabilirsiniz.

Delta artık rastgele değiştirmeWhere'i destekliyor

Üzerine yazma moduyla birlikte seçeneği, replaceWhere seçenekte tanımlanan bir koşulla eşleşen verilerin üzerine aynı anda yazmak için kullanılabilir. Daha önce, replaceWhere yalnızca bölüm sütunları üzerinde bir koşul destekleniyor, ancak artık rastgele bir ifade olabilir. Bkz. Tabloya yazma.

Google Cloud için Otomatik Yükleyici artık dosya bildirimlerini destekliyor (Genel Önizleme)

Otomatik Yükleyici artık Google Cloud'da dosya bildirim modunu destekliyor. Otomatik Yükleyici'nin Google Cloud Pub/Sub kaynaklarını sizin için otomatik olarak ayarlamasına izin verecek şekilde ayarlayın .option("cloudFiles.useNotifications", "true") . Dosya bildirim moduyla, giriş dizini listelenmeden yeni dosyalar algılanır ve gönderilir. Bkz. Otomatik Yükleyici dosya bildirim modu nedir?.

CREATE FUNCTION artık tablo işlevleri oluşturmayı destekliyor

Skaler değer döndüren bir skaler işlev oluşturmaya ek olarak, artık bir satır kümesi döndüren bir tablo işlevi oluşturabilirsiniz. Bkz. CREATE FUNCTION (SQL ve Python).

Kafka Akış Kaynağı şimdi ölçümü rapor ediyor estimatedTotalBytesBehindLatest

Kafka akış kaynağı artık her toplu işlemden sonra tüketicinin kullanılabilir en son bayt değerinin arkasında kaç bayt olduğuna ilişkin bir tahmin bildiriyor. Akış ilerleme durumunu izlemek için bu ölçümü kullanabilirsiniz. Bkz. Kafka ölçümlerini alma.

Örnek ölçüm çıkışı:

StreamingQueryProgress {
  "batchId": 0,
  .....
  "sources": [ {
    "description" : "KafkaV2[Subscribe[topic-0]]",
    "metrics":{
      "avgOffsetsBehindLatest" : "1.0",
      "estimatedTotalBytesBehindLatest" : "80.0", // new
      "maxOffsetsBehindLatest" : "1",
      "minOffsetsBehindLatest" : "1"
    } ],
  ....
 }

Dizilerin içindeki yapılar için Delta MERGE INTO artık yapı alanlarını ada göre çözümleyip yapı şemalarını geliştiriyor

Delta MERGE INTO artık yapı alanlarının ada göre çözülmesini ve yapı dizileri için otomatik şema evrimini destekliyor. Otomatik şema evrimi true UPDATE olarak ayarlanarak spark.databricks.delta.schema.autoMerge.enabled etkinleştirildiğinde ve INSERT yan tümceler bir dizinin içindeki yapı alanlarını ada göre çözümler, hedef dizide tanımlanan ilgili veri türüne yayınlar ve kaynak veya hedefteki ek veya eksik alanları null değerlerle doldurur. Otomatik şema evrimi devre dışı bırakıldığında UPDATE ve INSERT yan tümceler bir dizinin içindeki yapı alanlarını ada göre çözümler, ancak ek alanları geliştiremez. Yapı dizileri için bkz . Otomatik şema evrimi.

Hata düzeltmeleri

  • Amazon S3 bağlayıcısında JVM DeleteOnExit işlevselliğinden kaynaklanan ve uzun süre çalışan işlerde veya hizmetlerde gerçekleşebilecek bir bellek sızıntısı düzeltildi.

Kitaplık yükseltmeleri

  • Yükseltilen Python kitaplıkları:
    • çizim 4.14.3 ile 5.1.0
  • Yükseltilen R kitaplıkları:
    • 4.1.0 ile 4.1.1 tabanları
    • bslib 0.2.5.1 ile 0.3.0
    • önbellek 1.0.5 ile 1.0.6
    • derleyici 4.1.0 ile 4.1.1
    • 4.1.0 ile 4.1.1 arasında veri kümeleri
    • gelecek 1.21.0 ile 1.22.1
    • 1.3.1'den 1.3.2'ye kadar gert
    • 4.1.0 ile 4.1.1 için grafikler
    • grDevices from 4.1.0 to 4.1.1
    • kılavuz 4.1.0 ile 4.1.1
  • Yükseltilen Java kitaplıkları:
    • org.eclipse.jetty from 9.4.36.v20210114 to 9.4.42.v20210604

Apache Spark

Databricks Runtime 9.1 LTS, Apache Spark 3.1.2 içerir. Bu sürüm, Databricks Runtime 9.0'a (desteklenmeyen) dahil olan tüm Spark düzeltmeleri ve iyileştirmelerinin yanı sıra Spark'ta yapılan aşağıdaki ek hata düzeltmelerini ve iyileştirmeleri içerir:

  • [SPARK-36674][SQL] [CHERRY-PICK] ILIKE desteği - büyük/küçük harfe duyarsız LIKE
  • [SPARK-36353][SQL] [3.1] RemoveNoopOperators çıkış şemasını tutmalıdır
  • [SPARK-35876][SQL] [3.1] Çözümleyici/iyileştirici tarafından yeniden yazılmasını önlemek için ArraysZip alan adlarını tutmalıdır
  • [SPARK-36398][SQL] Spark Thrift Server günlüğünde hassas bilgileri yeniden işleme
  • [SPARK-36498][SQL] ByName V2 yazmada giriş sorgusunun iç alanlarını yeniden sıralama
  • [SPARK-36614][CORE] [UI] Kullanıcı arabiriminde kullanımdan kaldırmanın neden olduğu doğru yürütücü kaybı nedeni
  • [SPARK-36012][SQL] SHOW CREATE TABLE'da null bayrağı ekleme
  • [SPARK-36509][CORE] Çalışan tek başına kümeyle durursa yürütücülerin hiçbir zaman yeniden zamanlanması sorununu düzeltin
  • [SPARK-36603][CORE] LevelDB'de SoftReference değil WeakReference kullanma
  • [SPARK-36564][CORE] LiveRDDDistribution.toApi dosyasında NullPointerException düzeltmesi
  • [SPARK-36086][SQL] [3.1] CollapseProject proje değiştirme diğer adı kaynak sütun adını kullanmalıdır
  • [SPARK-33527][SQL] Kod çözme işlevini temel veritabanlarıyla tutarlı olacak şekilde genişletme
  • [SPARK-36400][SPARK-36398][SQL] [WEBUI] ThriftServer'ın spark.sql.redaction.string.regex değerini tanımasını sağlama
  • [SPARK-34054][CORE] BlockManagerDecommissioner kod temizleme
  • [SPARK-36500][CORE] Görev kesintiye uğradığında temp_shuffle dosya sızıntısını düzeltme
  • [SPARK-36489][SQL] Tek demetli tablolarda gruplandırma tuşları olmadan işlevleri toplama, birden çok satır döndürme
  • [SPARK-36464][CORE] 2 GB'den Fazla Veri Yazmak için ChunkedByteBufferOutputStream'de Temel Alınan Boyut Değişkeni Başlatma düzeltildi
  • [SPARK-36339][SQL] [3.0] Toplamanın parçası olmayan gruplandırma başvuruları değiştirilmelidir
  • [SPARK-36354][CORE] EventLogFileReader günlük olmadan sıralı olay günlüğü dizinlerini atlamalıdır
  • [SPARK-36242][CORE] [3.1] ExternalSorter.spillMemoryIteratorToDisk yönteminde başarılı = true değerini ayarlamadan önce taşma dosyasının kapalı olduğundan emin olun
  • [SPARK-36211][PYTHON] Dönüş değerini doğru udf yazma
  • [SPARK-34222][SQL] Boole basitleştirme kuralını geliştirme
  • [SPARK-35027][CORE] Yazıldığında FileAppender içindeki inputStream'i kapatın...
  • [SPARK-36269][SQL] Yalnızca veri sütunlarını Hive sütun adları yapılandırmasına ayarlama düzeltmesi
  • [SPARK-36213][SQL] PartitionSpec ile Tablo Komutunu Açıklama için PartitionSpec'i normalleştirme
  • [SPARK-36210][SQL] Dataset.withColumns içinde sütun ekleme sırasını koruma
  • [SPARK-36079][SQL] Null tabanlı filtre tahmini her zaman [0, 1] aralığında olmalıdır
  • [SPARK-28266][SQL] convertToLogicalRelation, Hive tablolarını okurken özelliği yorumlamamalıdır path

Bakım güncelleştirmeleri

Bkz . Databricks Runtime 9.1 LTS bakım güncelleştirmeleri.

Sistem ortamı

  • İşletim Sistemi: Ubuntu 20.04.4 LTS
  • Java: Zulu 8.56.0.21-CA-linux64
  • Scala: 2.12.10
  • Python: 3.8.10
  • R: 4.1.1
  • Delta Gölü: 1.0.0

Yüklü Python kitaplıkları

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
Antergos Linux 2015.10 (ISO-Rolling) appdirs 1.4.4 geri arama 0.2.0
boto3 1.16.7 botocore 1.19.7 sertifikalı 2020.12.5
chardet 4.0.0 Cycler 0.10.0 Cython 0.29.23
dbus-python 1.2.16 Dekoratör 5.0.6 daistlib 0.3.2
distro-info 0.23ubuntu1 modellere genel bakış 1.0.0 dosya kilidi 3.0.12
ıdna 2.10 ipykernel 5.3.4 ipython 7.22.0
ipython-genutils 0.2.0 Jedi 0.17.2 jmespath 0.10.0
joblib 1.0.1 jupyter-client 6.1.12 jupyter-core 4.7.1
kiwisolver 1.3.1 Koala 1.8.1 matplotlib 3.4.2
numpy 1.19.2 pandas 1.2.4 parso 0.7.0
Patsy 0.5.1 pexpect 4.8.0 pickleshare 0.7.5
Yastık 8.2.0 Pip 21.0.1 çizim 5.1.0
prompt-toolkit 3.0.17 protobuf 3.17.2 psycopg2 2.8.5
ptyprocess 0.7.0 serçe 4.0.0 Pygments 2.8.1
PyGObject 3.36.0 pyparsing 2.4.7 python-apt 2.0.0+ubuntu0.20.4.5
python-dateutil 2.8.1 pytz 2020.5 pyzmq 20.0.0
istekler 2.25.1 requests-unixsocket 0.2.0 s3transfer 0.3.7
scikit-learn 0.24.1 scipy 1.6.2 Sinan 0.11.1
kurulum araçları 52.0.0 Altı 1.15.0 ssh-import-id 5.10
statsmodeller 0.12.2 Azim 8.0.1 threadpoolctl 2.1.0
Kasırga 6.1 traitlets 5.0.5 katılımsız yükseltmeler 0,1
urllib3 1.25.11 virtualenv 20.4.1 wcwidth 0.2.5
Tekerlek 0.36.2

Yüklü R kitaplıkları

R kitaplıkları 2021-09-08 tarihinde Microsoft CRAN anlık görüntüsünden yüklenir.

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
askpass 1.1 assertthat 0.2.1 Backports 1.2.1
temel 4.1.1 base64enc 0.1-3 bit 4.0.4
bit64 4.0.5 blob 1.2.2 başlatma 1.3-28
Brew 1.0-6 Brio 1.1.2 Süpürge 0.7.9
bslib 0.3.0 önbellek 1.0.6 çağıran 3.7.0
şapka işareti 6.0-88 cellranger 1.1.0 chron 2.3-56
class 7.3-19 cli 3.0.1 küçük resim 0.7.1
cluster 2.1.2 codetools 0.2-18 renk alanı 2.0-2
commonmark 1.7 derleyicisi 4.1.1 config 0.3.1
cpp11 0.3.1 Crayon 1.4.1 kimlik bilgileri 1.3.1
Curl 4.3.2 data.table 1.14.0 veri kümeleri 4.1.1
DBİ 1.1.1 dbplyr 2.1.1 Desc 1.3.0
geliştirici araçları 2.4.2 diffobj 0.3.4 Özet 0.6.27
dplyr 1.0.7 dtplyr 1.1.0 üç nokta 0.3.2
değerlendir 0,14 fansi 0.5.0 farver 2.1.0
fastmap 1.1.0 forcats 0.5.1 foreach 1.5.1
Yabancı 0.8-81 Forge 0.2.0 Fs 1.5.0
Gelecek 1.22.1 future.apply 1.8.1 Gargara 1.2.0
Generics 0.1.0 gert 1.3.2 ggplot2 3.3.5
gh 1.3.0 gitcreds 0.1.1 glmnet 4.1-2
Globals 0.14.0 Tutkal 1.4.2 googledrive 2.0.0
googlesheets4 1.0.0 Gower 0.2.2 grafikler 4.1.1
grDevices 4.1.1 Kılavuz 4.1.1 gridExtra 2.3
gsubfn 0.7 gtable 0.3.0 Haven 2.4.3
daha yüksek 0,9 Hms 1.1.0 htmltools 0.5.2
htmlwidgets 1.5.3 httpuv 1.6.2 httr 1.4.2
hwriter 1.3.2 hwriterPlus 1.0-3 Kimlik 1.0.1
ını 0.3.1 ipred 0.9-11 isoband 0.2.5
Yineleyicilerde 1.0.13 jquerylib 0.1.4 jsonlite 1.7.2
KernSmooth 2.23-20 örgü örme 1,33 Etiketleme 0.4.2
Sonra 1.3.0 Kafes 0.20-44 Lav 1.6.10
yaşam döngüsü 1.0.0 dinleyici 0.8.0 lubridate 1.7.10
magrittr 2.0.1 markdown 1.1 MASS 7.3-54
Matris 1.3-4 not defteri 2.0.0 yöntemler 4.1.1
mgcv 1.8-36 Mıme 0,11 ModelMetrics 1.2.2.2
modelleyici 0.1.8 munsell 0.5.0 nlme 3.1-152
nnet 7.3-16 numDeriv 2016.8-1.1 openssl 1.4.5
parallel 4.1.1 paralel olarak 1.27.0 Ayağı 1.6.2
pkgbuild 1.2.0 pkgconfig 2.0.3 pkgload 1.2.1
plogr 0.2.0 plyr 1.8.6 Övgü 1.0.0
prettyunits 1.1.1 Yordam 1.18.0 processx 3.5.2
prodlim 2019.11.13 ilerleme 1.2.2 ilerleme durumu 0.8.0
Söz 1.2.0.1 Proto 1.0.0 Ps 1.6.0
purrr 0.3.4 r2d3 0.2.5 R6 2.5.1
randomForest 4.6-14 rappdirs 0.3.3 rcmdcheck 1.3.3
RColorBrewer 1.1-2 Rcpp 1.0.7 readr 2.0.1
readxl 1.3.1 yemek tarifleri 0.1.16 Rövanş 1.0.1
rematch2 2.1.2 Kumanda 2.4.0 reprex 2.0.1
yeniden şekillendirme2 1.4.4 rlang 0.4.11 rmarkdown 2.10
RODBC 1.3-18 roxygen2 7.1.1 rpart 4.1-15
rprojroot 2.0.2 Rserve 1.8-8 RSQLite 2.2.8
rstudioapi 0,13 ters çevirmeler 2.1.1 rvest 1.0.1
Sass 0.4.0 Terazi 1.1.1 seçici 0.4-2
sessioninfo 1.1.1 Şekil 1.4.6 Parlak 1.6.0
sourcetools 0.1.7 sparklyr 1.7.1 SparkR 3.1.1
Kayma 7.3-11 Splines 4.1.1 sqldf 0.4-11
KAREM 2021.1 Istatistik 4.1.1 istatistikler4 4.1.1
stringi 1.7.4 dizeleyici 1.4.0 Hayatta kalma 3.2-13
sys 3.4 tcltk 4.1.1 TeachingDemos 2.10
test edin 3.0.4 Türk 3.1.4 derleyici 1.1.3
tidyselect 1.1.1 tidyverse 1.3.1 timeDate 3043.102
tinytex 0.33 araçlar 4.1.1 tzdb 0.1.2
usethis 2.0.1 utf8 1.2.2 Yardımcılar 4.1.1
uuid 0.1-4 vctr'lar 0.3.8 viridisLite 0.4.0
Vroom 1.5.4 Waldo 0.3.0 Bıyık 0.4
withr 2.4.2 xfun 0.25 xml2 1.3.2
xopen 1.0.0 xtable 1.8-4 yaml 2.2.1
Zip 2.2.0

Yüklü Java ve Scala kitaplıkları (Scala 2.12 küme sürümü)

Grup Kimliği Yapıt Kimliği Sürüm
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.11.655
com.amazonaws aws-java-sdk-cloudformation 1.11.655
com.amazonaws aws-java-sdk-cloudfront 1.11.655
com.amazonaws aws-java-sdk-cloudhsm 1.11.655
com.amazonaws aws-java-sdk-cloudsearch 1.11.655
com.amazonaws aws-java-sdk-cloudtrail 1.11.655
com.amazonaws aws-java-sdk-cloudwatch 1.11.655
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.655
com.amazonaws aws-java-sdk-codedeploy 1.11.655
com.amazonaws aws-java-sdk-cognitoidentity 1.11.655
com.amazonaws aws-java-sdk-cognitosync 1.11.655
com.amazonaws aws-java-sdk-config 1.11.655
com.amazonaws aws-java-sdk-core 1.11.655
com.amazonaws aws-java-sdk-datapipeline 1.11.655
com.amazonaws aws-java-sdk-directconnect 1.11.655
com.amazonaws aws-java-sdk-directory 1.11.655
com.amazonaws aws-java-sdk-dynamodb 1.11.655
com.amazonaws aws-java-sdk-ec2 1.11.655
com.amazonaws aws-java-sdk-ecs 1.11.655
com.amazonaws aws-java-sdk-efs 1.11.655
com.amazonaws aws-java-sdk-elasticache 1.11.655
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.655
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.655
com.amazonaws aws-java-sdk-elastictranscoder 1.11.655
com.amazonaws aws-java-sdk-emr 1.11.655
com.amazonaws aws-java-sdk-glacier 1.11.655
com.amazonaws aws-java-sdk-glue 1.11.655
com.amazonaws aws-java-sdk-iam 1.11.655
com.amazonaws aws-java-sdk-importexport 1.11.655
com.amazonaws aws-java-sdk-kinesis 1.11.655
com.amazonaws aws-java-sdk-kms 1.11.655
com.amazonaws aws-java-sdk-lambda 1.11.655
com.amazonaws aws-java-sdk-logs 1.11.655
com.amazonaws aws-java-sdk-machinelearning 1.11.655
com.amazonaws aws-java-sdk-marketplacecommerceanalytics 1.11.655
com.amazonaws aws-java-sdk-marketplacemeteringservice 1.11.655
com.amazonaws aws-java-sdk-opsworks 1.11.655
com.amazonaws aws-java-sdk-rds 1.11.655
com.amazonaws aws-java-sdk-redshift 1.11.655
com.amazonaws aws-java-sdk-route53 1.11.655
com.amazonaws aws-java-sdk-s3 1.11.655
com.amazonaws aws-java-sdk-ses 1.11.655
com.amazonaws aws-java-sdk-simpledb 1.11.655
com.amazonaws aws-java-sdk-simpleworkflow 1.11.655
com.amazonaws aws-java-sdk-sns 1.11.655
com.amazonaws aws-java-sdk-sqs 1.11.655
com.amazonaws aws-java-sdk-ssm 1.11.655
com.amazonaws aws-java-sdk-storagegateway 1.11.655
com.amazonaws aws-java-sdk-sts 1.11.655
com.amazonaws aws-java-sdk-support 1.11.655
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.655
com.amazonaws jmespath-java 1.11.655
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics akış 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo gölgeli 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml Classmate 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.10.0
com.fasterxml.jackson.core jackson-core 2.10.0
com.fasterxml.jackson.core jackson-databind 2.10.0
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.10.0
com.fasterxml.jackson.datatype jackson-datatype-joda 2.10.0
com.fasterxml.jackson.module jackson-module-paranamer 2.10.0
com.fasterxml.jackson.module jackson-module-scala_2.12 2.10.0
com.github.ben-manes.caffeine Kafein 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib çekirdek 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.joshelser dropwizard-metrics-hadoop-metrics2-reporter 0.1.2
com.github.luben zstd-jni 1.4.8-1
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.2.4
com.google.crypto.tink Tink 1.6.0
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava Guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 1.4.195
com.helger Profiler 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 9.2.1.jre8
com.ning compress-lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.9.5
com.twitter chill_2.12 0.9.5
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity univocity-ayrıştırıcıları 2.9.1
com.zaxxer HikariCP 3.1.0
commons-beanutils commons-beanutils 1.9.4
commons-cli commons-cli 1.2
commons-codec commons-codec 1.10
commons-collections commons-collections 3.2.2
commons-configuration commons-configuration 1.6
commons-dbcp commons-dbcp 1.4
commons-digester commons-digester 1.8
commons-fileupload commons-fileupload 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.4
commons-lang commons-lang 2,6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
hive-2.3__hadoop-2.7 jets3t-0.7 liball_deps_2.12
hive-2.3__hadoop-2.7 zookeeper-3.4 liball_deps_2.12
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.10
io.delta delta-sharing-spark_2.12 0.1.0
io.dropwizard.metrics metrics-core 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics metrics-healthchecks 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics metrics-servlets 4.1.1
io.netty netty-all 4.1.51.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx Toplayıcı 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation etkinleştirme 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.5
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
maven-trees hive-2.3__hadoop-2.7 liball_deps_2.12
net.java.dev.jna Jna 5.8.0
net.razorvine pirolit 4.30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv süper csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.3
net.snowflake spark-snowflake_2.12 2.9.0-spark_3.1
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8-1
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow ok biçimi 2.0.0
org.apache.arrow ok-bellek çekirdeği 2.0.0
org.apache.arrow ok-bellek-netty 2.0.0
org.apache.arrow ok-vektör 2.0.0
org.apache.avro avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.commons commons-compress 1,20
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3,10
org.apache.commons commons-math3 3.4.1
org.apache.commons commons-text 1.6
org.apache.curator curator-client 2.7.1
org.apache.curator küratör çerçevesi 2.7.1
org.apache.curator curator-recipes 2.7.1
org.apache.derby Derby 10.12.1.1
org.apache.directory.api api-asn1-api 1.0.0-M20
org.apache.directory.api api-util 1.0.0-M20
org.apache.directory.server apacheds-i18n 2.0.0-M15
org.apache.directory.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop hadoop ek açıklamaları 2.7.4
org.apache.hadoop hadoop-auth 2.7.4
org.apache.hadoop hadoop-client 2.7.4
org.apache.hadoop hadoop-common 2.7.4
org.apache.hadoop hadoop-hdfs 2.7.4
org.apache.hadoop hadoop-mapreduce-client-app 2.7.4
org.apache.hadoop hadoop-mapreduce-client-common 2.7.4
org.apache.hadoop hadoop-mapreduce-client-core 2.7.4
org.apache.hadoop hadoop-mapreduce-client-jobclient 2.7.4
org.apache.hadoop hadoop-mapreduce-client-shuffle 2.7.4
org.apache.hadoop hadoop-yarn-api 2.7.4
org.apache.hadoop hadoop-yarn-client 2.7.4
org.apache.hadoop hadoop-yarn-common 2.7.4
org.apache.hadoop hadoop-yarn-server-common 2.7.4
org.apache.hive hive-beeline 2.3.7
org.apache.hive hive-cli 2.3.7
org.apache.hive hive-jdbc 2.3.7
org.apache.hive hive-llap-client 2.3.7
org.apache.hive hive-llap-common 2.3.7
org.apache.hive hive-serde 2.3.7
org.apache.hive hive-shims 2.3.7
org.apache.hive hive-storage-api 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.7
org.apache.hive.shims hive-shims-common 2.3.7
org.apache.hive.shims hive-shims-scheduler 2.3.7
org.apache.htrace htrace-core 3.1.0-incubating
org.apache.httpcomponents httpclient 4.5.6
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy sarmaşık 2.4.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.5.12
org.apache.orc orc-mapreduce 1.5.12
org.apache.orc orc-shims 1.5.12
org.apache.parquet parquet-column 1.10.1-databricks9
org.apache.parquet parquet-common 1.10.1-databricks9
org.apache.parquet parquet kodlaması 1.10.1-databricks9
org.apache.parquet parquet biçimi 2.4.0
org.apache.parquet parquet-hadoop 1.10.1-databricks9
org.apache.parquet parquet-jackson 1.10.1-databricks9
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm7-shaded 4.15
org.apache.yetus hedef kitle ek açıklamaları 0.5.0
org.apache.zookeeper zookeeper 3.4.14
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-jaxrs 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.jackson jackson-xc 1.9.13
org.codehaus.janino commons-derleyici 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.42.v20210604
org.eclipse.jetty jetty-continuation 9.4.42.v20210604
org.eclipse.jetty jetty-http 9.4.42.v20210604
org.eclipse.jetty jetty-io 9.4.42.v20210604
org.eclipse.jetty jetty-jndi 9.4.42.v20210604
org.eclipse.jetty jetty-plus 9.4.42.v20210604
org.eclipse.jetty jetty-proxy 9.4.42.v20210604
org.eclipse.jetty jetty-security 9.4.42.v20210604
org.eclipse.jetty jetty-server 9.4.42.v20210604
org.eclipse.jetty jetty-servlet 9.4.42.v20210604
org.eclipse.jetty jetty-servlets 9.4.42.v20210604
org.eclipse.jetty jetty-util 9.4.42.v20210604
org.eclipse.jetty jetty-util-ajax 9.4.42.v20210604
org.eclipse.jetty jetty-webapp 9.4.42.v20210604
org.eclipse.jetty jetty-xml 9.4.42.v20210604
org.eclipse.jetty.websocket websocket-api 9.4.42.v20210604
org.eclipse.jetty.websocket websocket-client 9.4.42.v20210604
org.eclipse.jetty.websocket websocket-common 9.4.42.v20210604
org.eclipse.jetty.websocket websocket-server 9.4.42.v20210604
org.eclipse.jetty.websocket websocket-servlet 9.4.42.v20210604
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-bulucu 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.30
org.glassfish.jersey.containers jersey-container-servlet-core 2.30
org.glassfish.jersey.core jersey-client 2.30
org.glassfish.jersey.core jersey-common 2.30
org.glassfish.jersey.core jersey-server 2.30
org.glassfish.jersey.inject jersey-hk2 2.30
org.glassfish.jersey.media jersey-media-jaxb 2.30
org.hibernate.validator hibernate-validator 6.1.0.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss günlüğü 3.3.2.Final
org.jdbi jdbi 2.63.1
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M5
org.json4s json4s-core_2.12 3.7.0-M5
org.json4s json4s-jackson_2.12 3.7.0-M5
org.json4s json4s-scalap_2.12 3.7.0-M5
org.lz4 lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-client 2.2.5
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap RoaringBitmap 0.9.14
org.roaringbitmap dolgular 0.9.14
org.rocksdb rocksdbjni 6.20.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.10
org.scala-lang scala-library_2.12 2.12.10
org.scala-lang scala-reflect_2.12 2.12.10
org.scala-lang.modules scala-collection-compat_2.12 2.1.1
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test arabirimi 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1.0
org.scalanlp breeze_2.12 1.0
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark Kullanılma -yan 1.0.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.threeten threeten-extra 1.5.0
org.tukaani Xz 1.5
org.typelevel algebra_2.12 2.0.0-M2
org.typelevel cats-kernel_2.12 2.0.0-M4
org.typelevel machinist_2.12 0.6.8
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0-M1
org.typelevel spire-platform_2.12 0.17.0-M1
org.typelevel spire-util_2.12 0.17.0-M1
org.typelevel spire_2.12 0.17.0-M1
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.2
org.yaml snakeyaml 1,24
Oro Oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1
xmlenc xmlenc 0,52