Aracılığıyla paylaş

Databricks Runtime 10.0 (desteklenmiyor)

  • Makale

Aşağıdaki sürüm notları, Apache Spark 3.2.0 tarafından desteklenen Databricks Runtime 10.0 ve Databricks Runtime 10.0 Photon hakkında bilgi sağlar. Databricks bu görüntüleri Ekim 2021'de yayımladı. Photon, Genel Önizleme aşamasındadır.

Yeni özellikler ve geliştirmeler

Apache Spark'ın yeni sürümü

Databricks Runtime 10.0 ve Databricks Runtime 10.0 Photon, Apache Spark 3.2.0'ı içerir. Ayrıntılar için bkz . Apache Spark.

SELECT deyimi artık pencere işlevi sonuçlarını filtrelemek için QUALIFY yan tümcesini destekliyor

deyimi SELECT artık yan tümcesini QUALIFY destekler. QUALIFY pencere işlevlerinin sonuçlarını filtrelemek için kullanılabilir. Listede veya koşulda SELECT bir veya QUALIFY daha fazla pencere işlevi bulunmalıdır. Örneğin:

SELECT * FROM t QUALIFY SUM(c2) OVER (PARTITION BY c1) > 0;

JDK 11 için küme desteği (Genel Önizleme)

Databricks artık Java Development Kit (JDK) 11 için küme desteği sağlıyor.

Küme oluşturduğunuzda, kümenin JDK 11 kullanmasını (hem sürücü hem de yürütücü için) belirtebilirsiniz. Bunu yapmak için Gelişmiş Seçenekler > Spark > Ortam Değişkenleri'ne aşağıdaki ortam değişkenini ekleyin:

JNAME=zulu11-ca-amd64

Otomatik Yükleyici artık şemaları null atanabilir olarak kabul ediyor

Otomatik Yükleyici artık tüm çıkarılan ve kullanıcı tarafından sağlanan şemaları varsayılan olarak null atanabilir olarak kabul eder. Bu, verilerin boş değer atanamayan sütunlar için null alanlar içerdiği durumlarda olası veri bozulmalarını önlemektir. Bu davranışı izlemek için yeni bir yapılandırma kullanıma sunulmuştur. spark.databricks.cloudFiles.schema.forceNullable Varsayılan olarak, bu yapılandırma Apache Spark'taki FileStreamSource'un spark.sql.streaming.fileSource.schema.forceNullablekullandığı ve varsayılan olarak olarak ayarlandığı ayarını true içerir.

Hataya neden olan değişiklikler

Tüm Spark SQL kullanıcıları için hataya neden olan değişiklikler

  • Yeni spark.databricks.behaviorChange.SC78546CorrelatedPredicate.enabled yapılandırma: olarak trueayarlandığında, bir alt sorgu toplandığında bağıntılı eşitlik koşullarının bir alt kümesine izin verir. Varsayılan ayar true değeridir.
  • Yeni spark.databricks.behaviorChange.SC82201BlockAutoAlias.enabled yapılandırma: olarak ayarlandığında true, görünümler oluşturulduğunda diğer adların otomatik olarak oluşturulmasını engeller. Varsayılan ayar true değeridir.
  • Yeni spark.databricks.behaviorChange.SC81078CTASWithLocation.enabled yapılandırma: olarak trueayarlandığında, boş olmayan bir konuma izin CREATE TABLE AS SELECT vermemektedir. Varsayılan ayar true değeridir. spark.sql.legacy.allowNonEmptyLocationInCTAS ayrıca olarak ayarlandığında truebu yapılandırmanın hiçbir etkisi olmadığını ve CREATE TABLE AS SELECT boş olmayan bir konuma her zaman izin verildiğini unutmayın.

ANSI modunu etkinleştiren Spark SQL kullanıcıları için hataya neden olan değişiklikler

ANSI modu hakkında bilgi için bkz . Databricks Runtime'da ANSI uyumluluğu.

  • Yeni spark.databricks.behaviorChange.SC83587NextDayDOW.enabled yapılandırma: olarak trueayarlandığında işlevde next_day geçersiz dayOfWeek bir bağımsız değişken ANSI modunda oluştururIllegalArgumentException; aksi takdirde döndürürnull. Varsayılan ayar true değeridir.
  • Yeni spark.databricks.behaviorChange.SC83796CanCast.enabled yapılandırma: olarak ayarlandığında true, ANSI modunda yeni açık atama söz dizimi kurallarını etkinleştirir. Varsayılan ayar true değeridir.
  • Yeni spark.databricks.behaviorChange.SC79099CastStringToBoolean.enabled yapılandırma: olarak ayarlandığında true, bir dize Boole değerine geçirilirken ayrıştırma hatası özel durumu oluşur; aksi takdirde döndürür null. Varsayılan ayar true değeridir.
  • Yeni spark.databricks.behaviorChange.SC79064AbsOutsideRange.enabled yapılandırma: olarak ayarlandığındatrueabs, giriş aralık dışındaysa işlev bir özel durum oluşturur. Varsayılan ayar true değeridir.

Tüm Python kullanıcıları için hataya neden olan değişiklikler

  • Python API'si delta.tables.DeltaTable.convertToDelta artık Delta Lake komutlarını çalıştırmak için kullanılabilecek doğru DeltaTable Python nesnesini döndürür. Daha önce doğrudan çağrılamayan bir iç nesne döndürdü.

Kitaplık yükseltmeleri

Apache Hadoop 3 yükseltmesi

  • Databricks Runtime 10.0, Hadoop bağımlılığını Hadoop 2.7.4'ten Hadoop 3.3.1'e yükseltmektedir.

Davranış değişiklikleri

  • Hadoop 3, hadoop-common kitaplığı yerine hadoop-client-api ve hadoop-client-runtime kitaplıklarını kullanır. Bu kitaplık, Hadoop genel API'lerinde veya uzantılarında kullanılabilecek bazı üçüncü taraf bağımlılıklarını gölgelendirir.
  • Hadoop 2'den bu yana Hadoop 3 yapılandırma seçenekleri değişti. Hadoop 3.3.1 seçenekleri için bkz . core-default.xml.
  • Databricks, depolama bağlayıcılarının aynı varsayılan kimlik doğrulama ayarlarına ve performans düzeylerine sahip olduğundan emin olmak için Hadoop 3 için bazı varsayılan yapılandırmaları Hadoop 2 ile tutarlı olacak şekilde güncelleştirdi:
    • fs.azure.authorization.caching.enable = false
    • fs.s3a.attempts.maximum = 10
    • fs.s3a.block.size = 67108864
    • fs.s3a.connection.timeout = 50000
    • fs.s3a.max.total.tasks = 1000
    • fs.s3a.retry.limit = 20
    • fs.s3a.retry.throttle.interval = 500ms
    • fs.s3a.assumed.role.credentials.provider = com.amazonaws.auth.InstanceProfileCredentialsProvider
    • fs.s3a.aws.credentials.provider = BasicAWSCredentialsProvider, DatabricksInstanceProfileCredentialsProvider, EnvironmentVariableCredentialsProvider, AnonymousAWSCredentialsProvider
  • Google Cloud Depolama (GCS) bağlayıcısı 2.1.6'dan 2.2.2'ye yükseltildi.
  • Amazon Redshift bağlayıcısı artık şemayı s3a:// kullanıyor. Düzen s3n:// kullanım dışı bırakıldı.
  • Gölgeli sınıflara ek olarak Amazon S3 MetadataStore API'sinin OSS sınıf adlarını işler. Bu, gölgeli sınıf adlarına gerek kalmadan işletim sistemi yapılandırmalarının işlenmesini sağlar.
    • Örneğin Hadoop yapılandırmasında sınıfını belirtebilirsiniz org.apache.hadoop.fs.s3a.s3guard.NullMetadataStore .
  • ve'yi new Configuration()sparkContext.hadoopConfiguration tutarlı hale getirir.
    • Artık her yeni Hadoop yapılandırması oluşturulduğunda, dosya sistemi düzenleri ve bunların varsayılan yapılandırması dahil olmak üzere Databricks Runtime'daki sparkContext.hadoopConfiguration önceden tanımlanmış Hadoop yapılandırmasıyla tutarlı olacaktır.
  • Databricks Runtime'da yer alan Hadoop depolama bağlayıcıları Hadoop 3.3.1 ile tamamen uyumlu olsa da, OSS Hadoop 3.3.1 bağlayıcılarıyla eşitlenmiş olmaları garanti edilmemektedir ve farklı davranışlara sahip olabilirler.
  • globStatus artık her zaman sıralanmış sonuçlar döndürüyor (HADOOP-10798)
  • Unset ve fs.s3a.endpoint bölgesi null ise fs.s3a.endpoint eklendi (SPARK-35878)
    • Databricks tarafından sağlanan Amazon S3 bölgesi otomatik çözümlemesi, genel uç noktanın ayarlanması nedeniyle bazı durumlarda tetiklenmeyebilir. AWS SDK'sı bölgeyi doğru çözümleyeceði için bu bir sorun değildir.
  • Ayarlanmadıysa fs.s3a.downgrade.syncable.exceptions ekleyin (SPARK-35868)
  • LZ4 ve Snappy codec'leri yerel Hadoop kitaplığına (HADOOP-17125) bağımlı değildir

Bilinen sorunlar

Apache Spark

Databricks Runtime 10.0, Apache Spark 3.2.0'ı içerir.

Bu bölümde:

Önemli Noktalar

Core ve Spark SQL

ANSI SQL uyumluluk geliştirmeleri

  • ANSI SQL INTERVAL türlerini destekleme (SPARK-27790)
  • ANSI modunda yeni tür zorlama söz dizimi kuralları (SPARK-34246)

Performans geliştirmeleri

  • Sorgu iyileştirme
    • İyileştirici'de yedekli toplamaları kaldırma (SPARK-33122)
    • Project with Join (SPARK-34622) aracılığıyla aşağı itme sınırı
    • Birleşim, sıralama ve aralık işlecinin kardinalite tahmini (SPARK-33411)
    • UnwrapCastInBinaryComparison desteği In/InSet koşulu (SPARK-35316)
    • Bölüm ayıklamadan sonra gerekli istatistikleri koru (SPARK-34119)
  • Sorgu yürütme
    • Zstandard arabellek havuzunu varsayılan olarak etkinleştirme (SPARK-34340, SPARK-34390)
    • Sıralama birleştirme birleştirmesinin tüm birleşim türleri için kod gen ekleme (SPARK-34705)
    • İç içe döngü birleştirmeyi yayımlama (SPARK-34706)
    • Son karma toplama için iki karma eşleme düzeyini destekleme (SPARK-35141)
    • Dinamik bölümler ve demet tablosu yazmak için eşzamanlı yazıcılara izin ver (SPARK-26164)
    • Thriftserver(SPARK-33655) içinde işleme FETCH_PRIOR performansını geliştirme

Bağlan veya geliştirmeleri

  • Parke
    • Parquet'i 1.12.1(SPARK-36726) sürümüne yükseltme
    • Parquet içinde int32 fiziksel türü olarak depolanan işaretsiz parquet türlerini okuma (SPARK-34817)
    • İmzalı int64 fiziksel türü olarak depolanan parquet imzasız int64 mantıksal türünü ondalık (20, 0)(SPARK-34786) olarak okuyun
    • Filtrede Parquet'i geliştirme(SPARK-32792)
  • ORC
  • Avro
    • Avro'ya sürüm 1.10.2(SPARK-34778) yükseltme
    • "avro.schema.literal" (SPARK-26836) ile bölümlenmiş Hive tabloları için Avro şeması evrimini destekleme
    • Okumada tarih saat yeniden boyutlandırmasını denetlemek için yeni Avro veri kaynağı seçenekleri ekleme (SPARK-34404)
    • Avro'da kullanıcı tarafından sağlanan şema URL'si için destek ekleme (SPARK-34416)
    • Konumsal Katalizörden Avroya şema eşleştirme (SPARK-34365) için destek ekleme
  • JSON
  • JDBC
    • JDBCRelation(SPARK-34843) içinde daha hassas bölüm adımlarını hesaplama
  • Hive Meta Veri Deposu destek filtresi(SPARK-34538)

Özellik geliştirmeleri

Diğer önemli değişiklikler

  • Monitör
    • ExternalShuffleService'e yeni ölçümler (SPARK-35258)
    • Yeni aşama düzeyi REST API'leri ve parametreleri ekleme (SPARK-26399)
    • REST API'de (SPARK-34488) görev ve yürütücü Ölçüm Dağıtımları Ölçüm Dağıtımlarını destekleme
    • Karma toplama için geri dönüş ölçümleri ekleme (SPARK-35529)
  • Veri Kümesi#summary(SPARK-34165) seçeneği olarak count_distinct ekleme
  • sql/core'da ScriptTransform uygulama (SPARK-31936)
  • BlockManagerMaster sürücüsünün sinyal zaman aşımını yapılandırılabilir hale getirme (SPARK-34278)
  • Karıştırma hizmeti adını istemci tarafında yapılandırılabilir hale getirin ve sunucu tarafında sınıf yolu tabanlı yapılandırma geçersiz kılmaya izin verin (SPARK-34828)
  • ExecutorMetricsPoller, bir sinyal oluşana kadar stageTCMP'de aşama girdisini tutmalıdır (SPARK-34779)
  • RewriteDistinctAggregates(SPARK-34882) içindeki if değerini filter yan tümcesiyle değiştirin
  • Kendi kendine birleşimde CostBasedJoinReorder uygulandığında hata düzeltildi (SPARK-34354)
  • CREATE TABLE LIKE ayrılmış tablo özelliklerine saygı göstermelidir (SPARK-34935)
  • SARMAŞıK Ayarlar dosyasını YARN küme modunda sürücüye gönderme (SPARK-34472)
  • USING/NATURAL JOIN(SPARK-34527) ile yinelenen ortak sütunları çözümleme
  • Tablo cmd'sini açıklama için iç görünüm özelliklerini gizleme (SPARK-35318)
  • Distribute/cluster by/repartition ipucu için eksik attr'leri çözme desteği (SPARK-35331)
  • FileStreamSink.hasMetadata(SPARK-34526) içinde yolu denetlerken hatayı yoksayın
  • Eksik yapılandırmaları çıkararak s3a magic committer desteğini geliştirin (SPARK-35383)
  • STRUCT türü dizesinde (SPARK-35706) öğesinin atmasına izin ver:
  • AQE'nin güvenli bir şekilde iyileştirilip iyileştirilmediğini ayırt etmek için yeni bir işleç ekleyin (SPARK-35786)
  • unionByName için null dolguyla sıralamak yerine yeni iç içe yerleştirilmiş yapı alanlarını ekleme (SPARK-35290)
  • ArraysZip, çözümleyici/iyileştirici (SPARK-35876) tarafından yeniden yazılmasını önlemek için alan adlarını korumalıdır
  • NullType(SPARK-36224) tür adı olarak Void kullanın
  • FileCommitProtocol'a yeni API ekleme esnek dosya adlandırmaya izin ver (SPARK-33298)

Davranış değişiklikleri

Her bileşen için geçiş kılavuzlarını görün: Spark Core.

Yapılandırılmış Akış

Başlıca özellikler

  • EventTime tabanlı oturum açma (oturum penceresi)(SPARK-10816)
  • Kafka istemcisini 2.8.0(SPARK-33913) sürümüne yükseltme
  • Trigger.AvailableNow, Trigger gibi akış sorguları çalıştırmak için kullanılabilir.Scala'da birden çok toplu işlemde bir kez (SPARK-36533)

Diğer önemli değişiklikler

  • Kafka kaynağında tetikleyici başına okunacak en az kayıt sayısını belirtmek için yeni bir Seçenek ekleyin (SPARK-35312)
  • Kaynak ilerlemeye en son uzaklıkları ekleme (SPARK-33955)

PySpark

Project Zen

  • Spark üzerinde Pandas API'si (SPARK-34849)
  • Python çalışanı için faulthanlder desteği kilitlendi (SPARK-36062)
  • İşlev API'leri genelinde Yılan adlandırma kuralını kullanma (SPARK-34306)
  • varsayılan olarak etkin spark.sql.execution.pyspark.udf.basitleştirilmişTraceback.enable (SPARK-35419)
  • DataFrame oluştururken iç içe yerleştirilmiş diktiği yapı olarak çıkarma desteği (SPARK-35929)

Diğer önemli değişiklikler

  • Sabitlenmiş iş parçacığı modunu varsayılan olarak etkinleştirme (SPARK-35303)
  • Ok yürütmeleri için NullType desteği ekleme (SPARK-33489)
  • ToPandas'a Ok self_destruct desteği ekleme (SPARK-32953)
  • Pyspark pin iş parçacığı modu için iş parçacığı hedef sarmalayıcı API'sini ekleme (SPARK-35498)

Davranış değişiklikleri

Bkz. geçiş kılavuzları.

MLlib

Performans iyileştirmeleri

  • BucketedRandomProjectionLSH dönüştürme iyileştirmesi (SPARK-34220)
  • w2v findSynonyms optimization(SPARK-34189)
  • sınır denetimini atlayarak seyrek GEMM'yi iyileştirme (SPARK-35707)
  • ML ALS recommendForAll by GEMV(SPARK-33518) performansını geliştirme

Model eğitimi geliştirmeleri

  • Lojistik Toplayıcıyı Yeniden Düzenleme - sanal merkezi destekleme (SPARK-34797)
  • Kesme noktası desteği merkezi ile İkili Lojistik Regresyon (SPARK-34858, SPARK-34448)
  • Kesme desteği merkezi ile çok terimli Lojistik Regresyon (SPARK-34860)

BLAS geliştirmeleri

  • tam com.github.fommil.netlib değerini dev.ludovic.netlib:2.0 (SPARK-35295) ile değiştirin
  • Vektörleştirilmiş BLAS uygulaması ekleme (SPARK-33882)
  • dev.ludovic.netlib(SPARK-35150) ile blas'a geri dönüşü hızlandırın

Diğer önemli değişiklikler

  • OVR dönüştürme olası sütun çakışmalarını düzeltme (SPARK-34356)

Kullanımdan kaldırmalar ve kaldırmalar

Bakım güncelleştirmeleri

Bkz . Databricks Runtime 10.0 bakım güncelleştirmeleri.

Sistem ortamı

  • İşletim Sistemi: Ubuntu 20.04.3 LTS
  • Java: Zulu 8.56.0.21-CA-linux64
  • Scala: 2.12.14
  • Python: 3.8.10
  • R: 4.1.1
  • Delta Gölü: 1.0.0

Yüklü Python kitaplıkları

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
Antergos Linux 2015.10 (ISO-Rolling) appdirs 1.4.4 geri arama 0.2.0
boto3 1.16.7 botocore 1.19.7 sertifikalı 2020.12.5
chardet 4.0.0 Cycler 0.10.0 Cython 0.29.23
dbus-python 1.2.16 Dekoratör 5.0.6 daistlib 0.3.3
distro-info 0.23ubuntu1 modellere genel bakış 1.0.0 dosya kilidi 3.0.12
ıdna 2.10 ipykernel 5.3.4 ipython 7.22.0
ipython-genutils 0.2.0 Jedi 0.17.2 jmespath 0.10.0
joblib 1.0.1 jupyter-client 6.1.12 jupyter-core 4.7.1
kiwisolver 1.3.1 Koala 1.8.1 matplotlib 3.4.2
numpy 1.19.2 pandas 1.2.4 parso 0.7.0
Patsy 0.5.1 pexpect 4.8.0 pickleshare 0.7.5
Yastık 8.2.0 Pip 21.0.1 çizim 5.1.0
prompt-toolkit 3.0.17 protobuf 3.17.2 psycopg2 2.8.5
ptyprocess 0.7.0 serçe 4.0.0 Pygments 2.8.1
PyGObject 3.36.0 pyparsing 2.4.7 python-apt 2.0.0+ubuntu0.20.4.6
python-dateutil 2.8.1 pytz 2020.5 pyzmq 20.0.0
istekler 2.25.1 requests-unixsocket 0.2.0 s3transfer 0.3.7
scikit-learn 0.24.1 scipy 1.6.2 Sinan 0.11.1
kurulum araçları 52.0.0 Altı 1.15.0 ssh-import-id 5.10
statsmodeller 0.12.2 Azim 8.0.1 threadpoolctl 2.1.0
Kasırga 6.1 traitlets 5.0.5 katılımsız yükseltmeler 0,1
urllib3 1.25.11 virtualenv 20.4.1 wcwidth 0.2.5
Tekerlek 0.36.2

Yüklü R kitaplıkları

R kitaplıkları 2021-09-21 tarihinde Microsoft CRAN anlık görüntüsünden yüklenir.

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
askpass 1.1 assertthat 0.2.1 Backports 1.2.1
temel 4.1.1 base64enc 0.1-3 bit 4.0.4
bit64 4.0.5 blob 1.2.2 başlatma 1.3-28
Brew 1.0-6 Brio 1.1.2 Süpürge 0.7.9
bslib 0.3.0 önbellek 1.0.6 çağıran 3.7.0
şapka işareti 6.0-88 cellranger 1.1.0 chron 2.3-56
class 7.3-19 cli 3.0.1 küçük resim 0.7.1
cluster 2.1.2 codetools 0.2-18 renk alanı 2.0-2
commonmark 1.7 derleyicisi 4.1.1 config 0.3.1
cpp11 0.3.1 Crayon 1.4.1 kimlik bilgileri 1.3.1
Curl 4.3.2 data.table 1.14.0 veri kümeleri 4.1.1
DBİ 1.1.1 dbplyr 2.1.1 Desc 1.3.0
geliştirici araçları 2.4.2 diffobj 0.3.4 Özet 0.6.27
dplyr 1.0.7 dtplyr 1.1.0 üç nokta 0.3.2
değerlendir 0,14 fansi 0.5.0 farver 2.1.0
fastmap 1.1.0 forcats 0.5.1 foreach 1.5.1
Yabancı 0.8-81 Forge 0.2.0 Fs 1.5.0
Gelecek 1.22.1 future.apply 1.8.1 Gargara 1.2.0
Generics 0.1.0 gert 1.4.1 ggplot2 3.3.5
gh 1.3.0 gitcreds 0.1.1 glmnet 4.1-2
Globals 0.14.0 Tutkal 1.4.2 googledrive 2.0.0
googlesheets4 1.0.0 Gower 0.2.2 grafikler 4.1.1
grDevices 4.1.1 Kılavuz 4.1.1 gridExtra 2.3
gsubfn 0.7 gtable 0.3.0 Haven 2.4.3
daha yüksek 0,9 Hms 1.1.0 htmltools 0.5.2
htmlwidgets 1.5.4 httpuv 1.6.3 httr 1.4.2
hwriter 1.3.2 hwriterPlus 1.0-3 Kimlik 1.0.1
ını 0.3.1 ipred 0.9-12 isoband 0.2.5
Yineleyicilerde 1.0.13 jquerylib 0.1.4 jsonlite 1.7.2
KernSmooth 2.23-20 örgü örme 1.34 Etiketleme 0.4.2
Sonra 1.3.0 Kafes 0.20-44 Lav 1.6.10
yaşam döngüsü 1.0.0 dinleyici 0.8.0 lubridate 1.7.10
magrittr 2.0.1 markdown 1.1 MASS 7.3-54
Matris 1.3-4 not defteri 2.0.0 yöntemler 4.1.1
mgcv 1.8-37 Mıme 0,11 ModelMetrics 1.2.2.2
modelleyici 0.1.8 munsell 0.5.0 nlme 3.1-152
nnet 7.3-16 numDeriv 2016.8-1.1 openssl 1.4.5
parallel 4.1.1 paralel olarak 1.28.1 Ayağı 1.6.2
pkgbuild 1.2.0 pkgconfig 2.0.3 pkgload 1.2.2
plogr 0.2.0 plyr 1.8.6 Övgü 1.0.0
prettyunits 1.1.1 Yordam 1.18.0 processx 3.5.2
prodlim 2019.11.13 ilerleme 1.2.2 ilerleme durumu 0.8.0
Söz 1.2.0.1 Proto 1.0.0 Ps 1.6.0
purrr 0.3.4 r2d3 0.2.5 R6 2.5.1
randomForest 4.6-14 rappdirs 0.3.3 rcmdcheck 1.3.3
RColorBrewer 1.1-2 Rcpp 1.0.7 readr 2.0.1
readxl 1.3.1 yemek tarifleri 0.1.16 Rövanş 1.0.1
rematch2 2.1.2 Kumanda 2.4.0 reprex 2.0.1
yeniden şekillendirme2 1.4.4 rlang 0.4.11 rmarkdown 2.11
RODBC 1.3-19 roxygen2 7.1.2 rpart 4.1-15
rprojroot 2.0.2 Rserve 1.8-8 RSQLite 2.2.8
rstudioapi 0,13 ters çevirmeler 2.1.1 rvest 1.0.1
Sass 0.4.0 Terazi 1.1.1 seçici 0.4-2
sessioninfo 1.1.1 Şekil 1.4.6 Parlak 1.6.0
sourcetools 0.1.7 sparklyr 1.7.2 SparkR 3.2.0
Kayma 7.3-11 Splines 4.1.1 sqldf 0.4-11
KAREM 2021.1 Istatistik 4.1.1 istatistikler4 4.1.1
stringi 1.7.4 dizeleyici 1.4.0 Hayatta kalma 3.2-13
sys 3.4 tcltk 4.1.1 TeachingDemos 2.10
test edin 3.0.4 Türk 3.1.4 derleyici 1.1.3
tidyselect 1.1.1 tidyverse 1.3.1 timeDate 3043.102
tinytex 0.33 araçlar 4.1.1 tzdb 0.1.2
usethis 2.0.1 utf8 1.2.2 Yardımcılar 4.1.1
uuid 0.1-4 vctr'lar 0.3.8 viridisLite 0.4.0
Vroom 1.5.5 Waldo 0.3.1 Bıyık 0.4
withr 2.4.2 xfun 0,26 xml2 1.3.2
xopen 1.0.0 xtable 1.8-4 yaml 2.2.1
Zip 2.2.0

Yüklü Java ve Scala kitaplıkları (Scala 2.12 küme sürümü)

Grup Kimliği Yapıt Kimliği Sürüm
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.11.655
com.amazonaws aws-java-sdk-cloudformation 1.11.655
com.amazonaws aws-java-sdk-cloudfront 1.11.655
com.amazonaws aws-java-sdk-cloudhsm 1.11.655
com.amazonaws aws-java-sdk-cloudsearch 1.11.655
com.amazonaws aws-java-sdk-cloudtrail 1.11.655
com.amazonaws aws-java-sdk-cloudwatch 1.11.655
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.655
com.amazonaws aws-java-sdk-codedeploy 1.11.655
com.amazonaws aws-java-sdk-cognitoidentity 1.11.655
com.amazonaws aws-java-sdk-cognitosync 1.11.655
com.amazonaws aws-java-sdk-config 1.11.655
com.amazonaws aws-java-sdk-core 1.11.655
com.amazonaws aws-java-sdk-datapipeline 1.11.655
com.amazonaws aws-java-sdk-directconnect 1.11.655
com.amazonaws aws-java-sdk-directory 1.11.655
com.amazonaws aws-java-sdk-dynamodb 1.11.655
com.amazonaws aws-java-sdk-ec2 1.11.655
com.amazonaws aws-java-sdk-ecs 1.11.655
com.amazonaws aws-java-sdk-efs 1.11.655
com.amazonaws aws-java-sdk-elasticache 1.11.655
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.655
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.655
com.amazonaws aws-java-sdk-elastictranscoder 1.11.655
com.amazonaws aws-java-sdk-emr 1.11.655
com.amazonaws aws-java-sdk-glacier 1.11.655
com.amazonaws aws-java-sdk-glue 1.11.655
com.amazonaws aws-java-sdk-iam 1.11.655
com.amazonaws aws-java-sdk-importexport 1.11.655
com.amazonaws aws-java-sdk-kinesis 1.11.655
com.amazonaws aws-java-sdk-kms 1.11.655
com.amazonaws aws-java-sdk-lambda 1.11.655
com.amazonaws aws-java-sdk-logs 1.11.655
com.amazonaws aws-java-sdk-machinelearning 1.11.655
com.amazonaws aws-java-sdk-opsworks 1.11.655
com.amazonaws aws-java-sdk-rds 1.11.655
com.amazonaws aws-java-sdk-redshift 1.11.655
com.amazonaws aws-java-sdk-route53 1.11.655
com.amazonaws aws-java-sdk-s3 1.11.655
com.amazonaws aws-java-sdk-ses 1.11.655
com.amazonaws aws-java-sdk-simpledb 1.11.655
com.amazonaws aws-java-sdk-simpleworkflow 1.11.655
com.amazonaws aws-java-sdk-sns 1.11.655
com.amazonaws aws-java-sdk-sqs 1.11.655
com.amazonaws aws-java-sdk-ssm 1.11.655
com.amazonaws aws-java-sdk-storagegateway 1.11.655
com.amazonaws aws-java-sdk-sts 1.11.655
com.amazonaws aws-java-sdk-support 1.11.655
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.655
com.amazonaws jmespath-java 1.11.655
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics akış 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo gölgeli 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml Classmate 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.12.2
com.fasterxml.jackson.core jackson-core 2.12.2
com.fasterxml.jackson.core jackson-databind 2.12.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.12.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.12.2
com.fasterxml.jackson.module jackson-module-paranamer 2.12.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.12.2
com.github.ben-manes.caffeine Kafein 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib çekirdek 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.luben zstd-jni 1.5.0-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.6
com.google.crypto.tink Tink 1.6.0
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava Guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 1.4.195
com.helger Profiler 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.sqlserver mssql-jdbc 9.2.1.jre8
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.ning compress-lzf 1.0.3
com.sun.istack istack-commons-runtime 3.0.8
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity univocity-ayrıştırıcıları 2.9.1
com.zaxxer HikariCP 3.1.0
commons-cli commons-cli 1.2
commons-codec commons-codec 1,15
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.8.0
commons-lang commons-lang 2,6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 1.3.2
dev.ludovic.netlib Blas 1.3.2
dev.ludovic.netlib lapack 1.3.2
hive-2.3__hadoop-3.2 jets3t-0.7 liball_deps_2.12
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.19
io.delta delta-sharing-spark_2.12 0.1.0
io.dropwizard.metrics metrics-core 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics metrics-healthchecks 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics metrics-servlets 4.1.1
io.netty netty-all 4.1.63.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx Toplayıcı 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation etkinleştirme 1.1.1
javax.annotation javax.annotation-api 1.3.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.5
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
maven-trees hive-2.3__hadoop-3.2 liball_deps_2.12
net.java.dev.jna Jna 5.8.0
net.razorvine pirolit 4.30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv süper csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.3
net.snowflake spark-snowflake_2.12 2.9.0-spark_3.1
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow ok biçimi 2.0.0
org.apache.arrow ok-bellek çekirdeği 2.0.0
org.apache.arrow ok-bellek-netty 2.0.0
org.apache.arrow ok-vektör 2.0.0
org.apache.avro avro 1.10.2
org.apache.avro avro-ipc 1.10.2
org.apache.avro avro eşlemeli 1.10.2
org.apache.commons commons-compress 1,20
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.4.1
org.apache.commons commons-text 1.6
org.apache.curator curator-client 2.13.0
org.apache.curator küratör çerçevesi 2.13.0
org.apache.curator curator-recipes 2.13.0
org.apache.derby Derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.1
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.htrace htrace-core4 4.1.0-incubating
org.apache.httpcomponents httpclient 4.5.13
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy sarmaşık 2.5.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.6.10
org.apache.orc orc-mapreduce 1.6.10
org.apache.orc orc-shims 1.6.10
org.apache.parquet parquet-column 1.12.0-databricks-0003
org.apache.parquet parquet-common 1.12.0-databricks-0003
org.apache.parquet parquet kodlaması 1.12.0-databricks-0003
org.apache.parquet parquet-format-structures 1.12.0-databricks-0003
org.apache.parquet parquet-hadoop 1.12.0-databricks-0003
org.apache.parquet parquet-jackson 1.12.0-databricks-0003
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9 gölgeli 4.20
org.apache.yetus hedef kitle ek açıklamaları 0.5.0
org.apache.zookeeper zookeeper 3.6.2
org.apache.zookeeper zookeeper-jute 3.6.2
org.checkerframework dama-qual 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-derleyici 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.40.v20210413
org.eclipse.jetty jetty-continuation 9.4.40.v20210413
org.eclipse.jetty jetty-http 9.4.40.v20210413
org.eclipse.jetty jetty-io 9.4.40.v20210413
org.eclipse.jetty jetty-jndi 9.4.40.v20210413
org.eclipse.jetty jetty-plus 9.4.40.v20210413
org.eclipse.jetty jetty-proxy 9.4.40.v20210413
org.eclipse.jetty jetty-security 9.4.40.v20210413
org.eclipse.jetty jetty-server 9.4.40.v20210413
org.eclipse.jetty jetty-servlet 9.4.40.v20210413
org.eclipse.jetty jetty-servlets 9.4.40.v20210413
org.eclipse.jetty jetty-util 9.4.40.v20210413
org.eclipse.jetty jetty-util-ajax 9.4.40.v20210413
org.eclipse.jetty jetty-webapp 9.4.40.v20210413
org.eclipse.jetty jetty-xml 9.4.40.v20210413
org.eclipse.jetty.websocket websocket-api 9.4.40.v20210413
org.eclipse.jetty.websocket websocket-client 9.4.40.v20210413
org.eclipse.jetty.websocket websocket-common 9.4.40.v20210413
org.eclipse.jetty.websocket websocket-server 9.4.40.v20210413
org.eclipse.jetty.websocket websocket-servlet 9.4.40.v20210413
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-bulucu 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jaxb jaxb-runtime 2.3.2
org.glassfish.jersey.containers jersey-container-servlet 2.34
org.glassfish.jersey.containers jersey-container-servlet-core 2.34
org.glassfish.jersey.core jersey-client 2.34
org.glassfish.jersey.core jersey-common 2.34
org.glassfish.jersey.core jersey-server 2.34
org.glassfish.jersey.inject jersey-hk2 2.34
org.hibernate.validator hibernate-validator 6.1.0.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss günlüğü 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains Ek açıklama -ları 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-client 2.2.5
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.2.19
org.roaringbitmap RoaringBitmap 0.9.14
org.roaringbitmap dolgular 0.9.14
org.rocksdb rocksdbjni 6.20.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.14
org.scala-lang scala-library_2.12 2.12.14
org.scala-lang scala-reflect_2.12 2.12.14
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test arabirimi 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1.0
org.scalanlp breeze_2.12 1.0
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark Kullanılma -yan 1.0.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.threeten threeten-extra 1.5.0
org.tukaani Xz 1.8
org.typelevel algebra_2.12 2.0.0-M2
org.typelevel cats-kernel_2.12 2.0.0-M4
org.typelevel machinist_2.12 0.6.8
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0-M1
org.typelevel spire-platform_2.12 0.17.0-M1
org.typelevel spire-util_2.12 0.17.0-M1
org.typelevel spire_2.12 0.17.0-M1
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1,24
Oro Oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1