Aracılığıyla paylaş

Databricks Runtime 8.0 (desteklenmiyor)

  • Makale

Databricks bu görüntüyü Mart 2021'de yayımladı.

Aşağıdaki sürüm notları, Apache Spark 3.1.1 tarafından desteklenen Databricks Runtime 8.0 hakkında bilgi sağlar.

Yeni özellikler

Databricks Runtime 8.0, Apache Spark 3.1.1'i içerir. Ayrıntılar için bkz . Apache Spark.

İyileştirmeler

Delta artık bir biçim belirtilmediğinde varsayılan biçimdir

Databricks Runtime 8.0, Delta tablosu oluşturmayı kolaylaştırmak için delta varsayılan biçimi olarak değiştirir. SQL komutlarını veya {Dataset|DataFrame}.{read|readStream|write|writeTo|writeStream} API'leri kullanarak bir tablo oluşturduğunuzda ve bir biçim belirtmediğinizde, varsayılan biçim şeklindedir delta.

Delta Lake ile Parquet'e göre daha iyi performans, zengin şema doğrulaması, kalite kısıtlamaları ve işlem garantileri ile daha iyi veri güvenilirliği elde edersiniz. Delta Lake ile tek bir veri kaynağında birleşik yapılandırılmış akış ve toplu işleme ile veri işlem hatlarınızı basitleştirebilirsiniz.

Databricks verilerinizi depolamak için Delta Lake kullanmanızı önerir ancak Delta Lake'e geçiş gerektiren eski iş akışlarınız olabilir. Mevcut iş akışlarını geçirme hakkında bilgi için bkz . Delta Lake nedir?.

Yeni Yapılandırılmış Akış varsayılan tetikleyici aralığı maliyetleri azaltır

Akış sorgunuzda kullanarak Trigger.ProcessingTime bir tetikleyici aralığı ayarlamazsanız, aralık 500 ms olarak ayarlanır. Daha önce varsayılan aralık 0 ms'ydi. Bu değişiklik boş tetikleyici sayısını azaltmalı ve listeleme gibi bulut depolama maliyetlerini azaltmalıdır.

Kimlik bilgisi geçişi (Genel Önizleme) ile LDA dönüştürme işlevini kullanma

Artık kimlik doğrulaması için kimlik bilgisi geçişini kullanmak üzere yapılandırılmış bir kümede LDA dönüştürme işlevini kullanabilirsiniz.

Kimlik bilgisi geçişi ile yapılandırılan tek kullanıcı kümeleri artık güvenilen dosya sistemleri (Genel Önizleme) gerektirmez

Tek bir kullanıcıyla kimlik bilgisi geçişi için yapılandırılmış bir standart veya iş kümesi kullanırken artık yerel dosya sistemlerini güvenilir dosya sistemleri olarak yapılandırmanız gerekmez. Bu değişiklik, işleri tek bir kullanıcı kümesinde çalıştırırken gereksiz dosya sistemi kısıtlamalarını kaldırır.

Kitaplık yükseltmeleri

Apache Spark

Databricks Runtime 8.0, Apache Spark 3.1.1'i içerir.

Bu bölümde:

Core ve Spark SQL

Vurgu

ANSI SQL Uyumluluk Geliştirmeleri

  • Destek char/varchar veri türü (SPARK-33480)
  • ANSI modu: null döndürmek yerine çalışma zamanı hataları (SPARK-33275)
  • ANSI modu: yeni açık atama söz dizimi kuralları (SPARK-33354)
  • SQL standart komutu SET TIME ZONE ekleme (SPARK-32272)
  • Tablo oluşturma SQL söz dizimini birleştirme (SPARK-31257)
  • Geçici görünümü ve kalıcı görünüm davranışlarını birleştirme (SPARK-33138)
  • Deyimdeki INSERT destek sütunu listesi (SPARK-32976)
  • ANSI iç içe yerleştirilmiş köşeli ayraçlı açıklamaları destekleme (SPARK-28880)

Performans geliştirmeleri

  • Karıştırma hizmeti olmadan konak yerel karıştırma verileri okuma (SPARK-32077)
  • Yeniden bölümlemeden önce yedekli sıralamaları kaldırma (SPARK-32276)
  • Kısmen aşağı gönderme önkoşulları (SPARK-32302, SPARK-32352)
  • Genişleterek filtreleri aşağı gönderme (SPARK-33302)
  • CNF dönüştürmesi (SPARK-31705) aracılığıyla Join aracılığıyla daha fazla olası koşul gönderme
  • Yayın karma birleştirmesinin çıkış bölümlemini koruyarak karıştırmayı kaldırma (SPARK-31869)
  • Birleştirme anahtarlarını yeniden sıralamayı iyileştirerek karıştırmayı kaldırma (SPARK-32282)
  • Çıktı bölümlendiricisini ve sıralama sırasını normalleştirerek karıştırmayı kaldırma (SPARK-33399)
  • Karışık karma birleştirme geliştirmesi (SPARK-32461)
    • Karıştırılmış karma birleştirme derleme tarafı bölümlemini koruma (SPARK-32330)
    • Karma birleştirmeyi (BHJ ve SHJ) akış tarafı sıralamasını koruma (SPARK-32383)
    • Sıralama birleştirme birleştirmesi için demetli tabloları birleştirme (SPARK-32286)
    • Karıştırılmış karma birleştirme için kod gen ekleme (SPARK-32421)
    • Karıştırılmış karma birleştirmede tam dış birleştirme desteği (SPARK-32399)
  • Whole-stage-codegen (SPARK-33092) ile projede alt ifadeyi ortadan kaldırmayı destekleme
  • Koşullu ifadelerde alt ifade ortadan kaldırmayı destekleme (SPARK-33337)
  • Yorumlanan ifade değerlendirmesi için alt ifadenin ortadan kaldırılmasını destekleme (SPARK-33427)
  • Yorumlanan koşul için alt ifade ortadan kaldırmayı destekleme (SPARK-33540)
  • Diğer iyileştirici kuralları
    • Kural ExtractSingleColumnNullAwareAntiJoin (SPARK-32290)
    • Kural EliminateNullAwareAntiJoin (SPARK-32573)
    • Kural EliminateAggregateFilter (SPARK-32540)
    • Kural UnwrapCastInBinaryComparison (SPARK-32858)
    • Kural DisableUnnecessaryBucketedScan (SPARK-32859)
    • Kural CoalesceBucketsInJoin (SPARK-31350)
    • Proje olmadan oluşturma işleminden gereksiz iç içe alanları ayıklama (SPARK-29721)
    • Gereksiz iç içe yerleştirilmiş alanları toplama ve genişletme işleminden ayıklama (SPARK-27217)
    • gereksiz iç içe yerleştirilmiş alanları ifadeye göre yeniden bölümle ve birleştirmeden ayıklama (SPARK-31736)
    • Kozmetik varyasyonlar üzerinde gereksiz iç içe geçmiş alanları ayıklama (SPARK-32163)
    • Gereksiz iç içe yerleştirilmiş alanları pencere ve sıralamadan ayıklayın (SPARK-32059)
    • CreateArray/CreateMap boyutunu alt öğelerinin boyutu olacak şekilde iyileştirme (SPARK-33544)

Genişletilebilirlik geliştirmeleri

  • DataSourceV2'de API ekleme SupportsPartitions (SPARK-31694)
  • DataSourceV2'de API ekleme SupportsMetadataColumns (SPARK-31255)
  • SQL önbelleği serileştirmesini eklenebilir hale getirme (SPARK-32274)
  • purge v2 kataloğu için seçeneğini TableCatalog.dropTable tanıtın (SPARK-33364)

Bağlan veya geliştirmeleri

  • Hive Meta Veri Deposu bölüm filtresi gönderme iyileştirmesi (SPARK-33537)
    • Destek filtreleri içerir, ile başlar ve biter (SPARK-33458)
    • Tarih türüne göre destek filtresi (SPARK-33477)
    • Eşit olmayanlara göre destek filtresi (SPARK-33582)
  • Parke
    • Parquet'de haritanın anahtar türünde karmaşık türe izin ver (SPARK-32639)
    • Yeniden bağlamadan Parquet'te INT96'nın kaydedilmesine ve yüklenmesine izin verme (SPARK-33160)
  • ORC
  • CSV
    • CSV şeması çıkarımı sırasında SQL metin veri kaynağı kullanma (SPARK-32270)
  • JSON
    • JSON veri kaynağında destek filtreleri gönderme (SPARK-30648)
  • JDBC
  • Avro
    • Avro veri kaynağında destek filtreleri gönderme (SPARK-32346)

Özellik geliştirmeleri

  • Düğüm Yetkisini Alma (SPARK-20624)
    • Temel çerçeve (SPARK-20628)
    • Yetki alma sırasında RDD bloklarını geçirme (SPARK-20732)
    • Dinamik ölçeklendirmenin bir parçası olarak yetkisiz kullanımdan çıkarma (SPARK-31198)
    • Kullanımdan çıkarma sırasında karıştırma bloklarını geçirme (SPARK-20629)
    • Yalnızca görevler ve blok geçişi tamamlandığında çıkış yürütücüsü (SPARK-31197)
    • Kullanımdan çıkarma sırasında geri dönüş depolamayı destekleme (SPARK-33545)
  • Yeni yerleşik işlevler
  • EXPLAIN komut geliştirmesi (SPARK-32337, SPARK-31325)
  • Kullanıcı tarafından sağlanan ipuçlarını devre dışı bırakma seçeneği sağlayın (SPARK-31875)
  • Hive stili DEĞİşTİr SÜTUNLAR söz dizimini destekleme (SPARK-30613)
  • Destek LIKE ANY ve LIKE ALL işleçler (SPARK-30724)
  • Sınırsız MATCHED ve NOT MATCHED içinde MERGE INTO destek (SPARK-32030)
  • Destek F-sonekli float değişmez değerleri (SPARK-32207)
  • Tek yapılandırmayı sıfırlamak için söz dizimini destekleme RESET (SPARK-32406)
  • Destek filtresi ifadesi eşzamanlı kullanımına DISTINCT izin verir (SPARK-30276)
  • DSv2 için alter table add/drop partition komutunu destekleme (SPARK-32512)
  • İç içe OR koşulların içinde alt sorguları destekleme NOT IN (SPARK-25154)
  • Destek REFRESH FUNCTION komutu (SPARK-31999)
  • Veri Kümesinde ekleme sameSemantics ve yöntemleri (SPARK-30791sementicHash)
  • UDF'de durum sınıfının oluşturulmuş türünü destekleme (SPARK-31826)
  • Kodlayıcılarda destek numaralandırması (SPARK-32585)
  • İç içe alan API'lerini withField ve dropFields (SPARK-31317, SPARK-32511) destekleme
  • içinde unionByName eksik sütunlar için null değerleri doldurma desteği (SPARK-29358)
  • Belirtilen seçenekleri alma desteği DataFrameReader.table (SPARK-32592, SPARK-32844)
  • uygulamasında HDFS konumunu spark.sql.hive.metastore.jars destekleme (SPARK-32852)
  • Yerel olarak destek --archives seçeneği (SPARK-33530, SPARK-33615)
  • API'yi görev başlangıç ve bitiş olaylarının yöntemlerini içerecek şekilde geliştirin ExecutorPlugin (SPARK-33088)

Diğer önemli değişiklikler

  • Spark belgeleri sitesinde Arama İşlevi Sağlama (SPARK-33166)
  • Apache Arrow'ı 2.0.0'a (SPARK-33213) yükseltme
  • Thrift sunucusunda Java 8 zaman API'sini etkinleştirme (SPARK-31910)
  • UDF'lerde Java 8 zaman API'sini etkinleştirme (SPARK-32154)
  • Ondalıklı toplam için taşma denetimi (SPARK-28067)
  • Dinamik bölüm üzerine yazma modunda işleme çakışması düzeltilir (SPARK-27194, SPARK-29302)
  • Bağımlı, kara liste ve beyaz listeye başvurular kaldırıldı (SPARK-32004, SPARK-32036, SPARK-32037)
  • Karışık eşleme aşaması için görev sonucu boyutu denetimini kaldırma (SPARK-32470)
  • Kullanıcı tarafından verilen dosya sistemi düzenlerini kullanıma sunma amacıyla genelleştirme ExecutorSource (SPARK-33476)
  • Ekle StorageLevel.DISK_ONLY_3 (SPARK-32517)
  • Yürütücüler için web kullanıcı arabiriminde yürütücü bellek ölçümlerini kullanıma sunma (SPARK-23432)
  • Yürütücü bellek ölçümlerini aşama düzeyinde, Aşamalar sekmesinde (SPARK-26341) kullanıma sunma
  • YARN küme modunda açıkça kümesini spark.ui.port düzeltme (SPARK-29465)
  • Tek başına küme modunda spark-submit çıkışlarını denetlemek için yapılandırma ekleme spark.submit.waitForCompletion (SPARK-31486)
  • Stdout/stderr sürücüsüne doğrudan bağlantıları yazdırmak için ayarlama yarn.Client (SPARK-33185)
  • Yayın parçalarını depolayamadığında bellek sızıntısını düzeltme (SPARK-32715)
  • Sürücü sinyali zaman aşımını yapılandırılabilir hale getirme BlockManagerMaster (SPARK-34278)
  • Önbellek davranışlarını birleştirme ve tamamlama (SPARK-33507)

Davranış değişiklikleri

Her bileşen için geçiş kılavuzlarını görün: Spark Core ve Spark SQL.

PySpark

Project Zen

  • Project Zen: Python kullanılabilirliğini geliştirme (SPARK-32082)
  • PySpark tür ipuçları desteği (SPARK-32681)
  • PySpark belgelerini yeniden tasarlama (SPARK-31851)
  • NumPy belge stiline geçiş (SPARK-32085)
  • PyPI Kullanıcıları için yükleme seçeneği (SPARK-32017)
  • DataFrame şemasını dikte listesinden çıkarma (SPARK-32686)
  • Python UDF'lerinden özel durum iletisini basitleştirme (SPARK-33407)

Diğer önemli değişiklikler

  • Yinelenenleri kaldırma deterministik PythonUDF çağrıları (SPARK-33303)
  • PySpark işlevlerinde daha yüksek sıralı işlevleri destekleme (SPARK-30681)
  • Destek veri kaynağı v2x yazma API'leri (SPARK-29157)
  • PySpark işlevlerinde destek percentile_approx (SPARK-30569)
  • inputFiles PySpark DataFrame desteği (SPARK-31763)
  • PySpark Sütununda Destek withField (SPARK-32835)
  • PySpark Sütununda Destek dropFields (SPARK-32511)
  • PySpark işlevlerinde destek nth_value (SPARK-33020)
  • ve asinhatanh (SPARK-33563) desteği acosh
  • PySpark SparkContext'te destek getCheckpointDir yöntemi (SPARK-33017)
  • içinde unionByName eksik sütunlar için null değerleri doldurma desteği (SPARK-32798)
  • v1.5.0'a güncelleştirme cloudpickle (SPARK-32094)
  • Ok ile PySpark desteği ekleme MapType (SPARK-24554)
  • DataStreamReader.table ve DataStreamWriter.toTable (SPARK-33836)

Davranış değişiklikleri

[PySpark]https://spark.apache.org/docs/3.1.1/pyspark-migration-guide.html için geçiş kılavuzlarına bakın.

Yapılandırılmış Akış

Performans geliştirmeleri

  • MaxFilesPerTrigger dışındaki dosyaların okunmamış dosya olarak önbelleğe alınan listesi (SPARK-30866)
  • Dosya akışı kaynağı ve havuz meta veri günlüğündeki mantığı kolaylaştırın (SPARK-30462)
  • Sorgu sıkıştırılmış toplu işlemden (SPARK-30900) yeniden başlatılırsa sıkıştırılmış meta veri günlüğünü iki kez okumaktan kaçının

Özellik geliştirmeleri

  • API Ekleme DataStreamReader.table (SPARK-32885)
  • API Ekleme DataStreamWriter.toTable (SPARK-32896)
  • Sol yarı akış akışı birleştirme (SPARK-32862)
  • Tam dış akış akışı birleşimi (SPARK-32863)
  • Çıkış dosyalarında saklamaya yönelik yeni bir seçenek sağlayın (SPARK-27188)
  • Spark Yapılandırılmış Akış Geçmişi Sunucusu Desteği Ekleme (SPARK-31953)
  • Sorgu yeniden başlatması arasında Durum şeması doğrulamayı tanıtma (SPARK-27237)

Diğer önemli değişiklikler

  • Akış durum deposu için şema doğrulamasını tanıtma (SPARK-31894)
  • Durum deposunda farklı bir sıkıştırma codec'i kullanma desteği (SPARK-33263)
  • Meta veriler hiçbir zaman güncelleştirilemediği için Kafka bağlayıcısı sonsuz bekleme (SPARK-28367)
  • Kafka'yi 2.6.0'a (SPARK-32568) yükseltme
  • Yapılandırılmış Akış Kullanıcı Arabirimi sayfaları için sayfalama desteği (SPARK-31642, SPARK-30119)
  • Yapılandırılmış Akış Kullanıcı Arabirimindeki durum bilgileri (SPARK-33223)
  • Yapılandırılmış Akış Kullanıcı Arabiriminde filigran boşluğu bilgileri (SPARK-33224)
  • SS kullanıcı arabiriminde durum özel ölçüm bilgilerini kullanıma sunma (SPARK-33287)
  • Filigrandan sonraki satır sayısıyla ilgili yeni bir ölçüm ekleme (SPARK-24634)

Davranış değişiklikleri

Yapılandırılmış Akış için geçiş kılavuzları'na bakın.

MLlib

Önemli Noktalar

  • LinearSVC blokify giriş vektörleri (SPARK-30642)
  • LogisticRegression blokify giriş vektörleri (SPARK-30659)
  • LinearRegression blokify giriş vektörleri (SPARK-30660)
  • AFT bloklama giriş vektörleri (SPARK-31656)
  • ML'de ilişkilendirme kuralları için destek ekleme (SPARK-19939)
  • LinearSVCModel için eğitim özeti ekleme (SPARK-20249)
  • RandomForestClassificationModel'e özet ekleme (SPARK-23631)
  • FMClassificationModel'e eğitim özeti ekleme (SPARK-32140)
  • MultilayerPerceptronClassificationModel'e özet ekleme (SPARK-32449)
  • SparkR'ye FMClassifier ekleme (SPARK-30820)
  • SparkR LinearRegression sarmalayıcı ekleme (SPARK-30818)
  • SparkR'ye FMRegressor sarmalayıcı ekleme (SPARK-30819)
  • için vector_to_array SparkR sarmalayıcısı ekleme (SPARK-33040)
  • örnekleri uyarlamalı olarak engelleme - LinearSVC (SPARK-32907)
  • make CrossValidator/TrainValidateSplit/OneVsRest Reader/Writer desteği Python arka uç tahmin aracı/değerlendiricisi (SPARK-33520)
  • ML ALS recommendForAll by GEMV performansını geliştirme (SPARK-33518)
  • UnivariateFeatureSelector Ekleme (SPARK-34080)

Diğer Önemli Değişiklikler

  • Tek bir işte GMM işlem özeti ve güncelleştirme dağıtımları (SPARK-31032)
  • Mllib'de ChiSqSelector bağımlılığını kaldırın. ChiSqSelectorModel (SPARK-31077)
  • testChiSquare'de testlerin sonuç veri çerçevesini düzleştirme (SPARK-31301)
  • MinHash keyDistance optimization (SPARK-31436)
  • Üçgen eşitsizliğine dayalı KMeans iyileştirmesi (SPARK-31007)
  • ClusteringEvaluator'da ağırlık desteği ekleme (SPARK-31734)
  • Değerlendiricilere getMetrics ekleme (SPARK-31768)
  • LinearRegressionSummary'de örnek ağırlığı desteği ekleme (SPARK-31944)
  • CrossValidator'a kullanıcı tarafından belirtilen katlanmış sütun ekleme (SPARK-31777)
  • ML parametreleri özellik ve ayarlamada varsayılan değer eşliğini (SPARK-32310)
  • KMeans/BiKMeans'ta çift önbelleğe almayı düzeltme (SPARK-32676)
  • aft dönüşüm iyileştirmesi (SPARK-33111)
  • FeatureHasher dönüşüm iyileştirmesi (SPARK-32974)
  • Veri çerçevesi sütunu için array_to_vector işlevi ekleme (SPARK-33556)
  • ML parametreleri sınıflandırma, regresyon, kümeleme ve fpm'de varsayılan değer eşliğini (SPARK-32310)
  • summary.totalIterations than maxIters (SPARK-31925)
  • ağaç modelleri tahmin iyileştirmesi (SPARK-32298)

Davranış değişiklikleri

Bkz. MLlib için geçiş kılavuzları.

SparkR

  • Daha yüksek sıralı işlevler için SparkR arabirimi ekleme (SPARK-30682)
  • unionByName'de eksik sütunlar için null değerleri doldurma desteği (SPARK-32798)
  • SparkR işlevlerinde WithColumn desteği (SPARK-32946)
  • SparkR işlevlerinde destek timestamp_seconds (SPARK-32949)
  • SparkR işlevlerinde destek nth_value (SPARK-33030)
  • En Düşük Ok sürümü 1.0.0'a (SPARK-32452) kadar artırıldı
  • SparkR işlevlerinde destek array_to_vector (SPARK-33622)
  • acosh, asinh ve atanh desteği (SPARK-33563)
  • Destek from_avro ve to_avro (SPARK-33304)

Davranış değişiklikleri

Bkz. SparkR (Spark üzerinde R) için geçiş kılavuzları.

GraphX

Programlama kılavuzu: GraphX Programlama Kılavuzu.

Bakım güncelleştirmeleri

Bkz . Databricks Runtime 8.0 bakım güncelleştirmeleri.

Sistem ortamı

  • İşletim Sistemi: Ubuntu 18.04.5 LTS
  • Java: Zulu 8.50.0.51-CA-linux64 (derleme 1.8.0_275-b01)
  • Scala: 2.12.10
  • Python: 3.8.8 (26 Mayıs 2021 bakım güncelleştirmesinde 3.8.6'dan güncelleştirildi)
  • R: R sürüm 4.0.3 (2020-10-10)
  • Delta Lake 0.8.0

Yüklü Python kitaplıkları

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
appdirs 1.4.4 asn1crypto 1.4.0 geri arama 0.2.0
boto3 1.16.7 botocore 1.19.7 brotlipy 0.7.0
sertifikalı 2020.12.5 cffi 1.14.3 chardet 3.0.4
Şifreleme 3.1.1 Cycler 0.10.0 Cython 0.29.21
Dekoratör 4.4.2 daistlib 0.3.1 docutils 0.15.2
Entrypoints 0.3 dosya kilidi 3.0.12 ıdna 2.10
ipykernel 5.3.4 ipython 7.19.0 ipython-genutils 0.2.0
Jedi 0.17.2 jmespath 0.10.0 joblib 0.17.0
jupyter-client 6.1.7 jupyter-core 4.6.3 kiwisolver 1.3.0
Koala 1.5.0 matplotlib 3.2.2 numpy 1.19.2
pandas 1.1.3 parso 0.7.0 Patsy 0.5.1
pexpect 4.8.0 pickleshare 0.7.5 Pip 20.2.4
prompt-toolkit 3.0.8 psycopg2 2.8.5 ptyprocess 0.6.0
serçe 1.0.1 pycparser 2.20 Pygments 2.7.2
pyOpenSSL 19.1.0 pyparsing 2.4.7 PySocks 1.7.1
python-dateutil 2.8.1 pytz 2020.1 pyzmq 19.0.2
istekler 2.24.0 s3transfer 0.3.3 scikit-learn 0.23.2
scipy 1.5.2 Sinan 0.10.0 kurulum araçları 50.3.1
Altı 1.15.0 statsmodeller 0.12.0 threadpoolctl 2.1.0
Kasırga 6.0.4 traitlets 5.0.5 urllib3 1.25.11
virtualenv 20.2.1 wcwidth 0.2.5 Tekerlek 0.35.1

Yüklü R kitaplıkları

R kitaplıkları 2020-11-02'de Microsoft CRAN anlık görüntüsünden yüklenir.

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
askpass 1.1 assertthat 0.2.1 Backports 1.2.1
temel 4.0.3 base64enc 0.1-3 BH 1.72.0-3
bit 4.0.4 bit64 4.0.5 blob 1.2.1
başlatma 1.3-25 Brew 1.0-6 Brio 1.1.0
Süpürge 0.7.2 çağıran 3.5.1 şapka işareti 6.0-86
cellranger 1.1.0 chron 2.3-56 class 7.3-17
cli 2.2.0 küçük resim 0.7.1 cluster 2.1.0
codetools 0.2-18 renk alanı 2.0-0 commonmark 1.7
derleyicisi 4.0.3 config 0.3 covr 3.5.1
cpp11 0.2.4 Crayon 1.3.4 kimlik bilgileri 1.3.0
Karışma 1.1.0.1 Curl 4.3 data.table 1.13.4
veri kümeleri 4.0.3 DBİ 1.1.0 dbplyr 2.0.0
Desc 1.2.0 geliştirici araçları 2.3.2 diffobj 0.3.2
Özet 0.6.27 dplyr 1.0.2 DT 0,16
üç nokta 0.3.1 değerlendir 0,14 fansi 0.4.1
farver 2.0.3 fastmap 1.0.1 forcats 0.5.0
foreach 1.5.1 Yabancı 0.8-79 Forge 0.2.0
Fs 1.5.0 Gelecek 1.21.0 Generics 0.1.0
gert 1.0.2 ggplot2 3.3.2 gh 1.2.0
gitcreds 0.1.1 glmnet 4.0-2 Globals 0.14.0
Tutkal 1.4.2 Gower 0.2.2 grafikler 4.0.3
grDevices 4.0.3 Kılavuz 4.0.3 gridExtra 2.3
gsubfn 0.7 gtable 0.3.0 Haven 2.3.1
daha yüksek 0.8 Hms 0.5.3 htmltools 0.5.0
htmlwidgets 1.5.3 httpuv 1.5.4 httr 1.4.2
hwriter 1.3.2 hwriterPlus 1.0-3 ını 0.3.1
ipred 0.9-9 isoband 0.2.3 Yineleyicilerde 1.0.13
jsonlite 1.7.2 KernSmooth 2.23-18 örgü örme 1.30
Etiketleme 0.4.2 Sonra 1.1.0.1 Kafes 0.20-41
Lav 1.6.8.1 lazyeval 0.2.2 yaşam döngüsü 0.2.0
dinleyici 0.8.0 lubridate 1.7.9.2 magrittr 2.0.1
markdown 1.1 MASS 7.3-53 Matris 1.2-18
not defteri 1.1.0 yöntemler 4.0.3 mgcv 1.8-33
Mıme 0,9 ModelMetrics 1.2.2.2 modelleyici 0.1.8
munsell 0.5.0 nlme 3.1-151 nnet 7.3-14
numDeriv 2016.8-1.1 openssl 1.4.3 parallel 4.0.3
paralel olarak 1.22.0 Ayağı 1.4.7 pkgbuild 1.1.0
pkgconfig 2.0.3 pkgload 1.1.0 plogr 0.2.0
plyr 1.8.6 Övgü 1.0.0 prettyunits 1.1.1
Yordam 1.16.2 processx 3.4.5 prodlim 2019.11.13
ilerleme 1.2.2 Söz 1.1.1 Proto 1.0.0
Ps 1.5.0 purrr 0.3.4 r2d3 0.2.3
R6 2.5.0 randomForest 4.6-14 rappdirs 0.3.1
rcmdcheck 1.3.3 RColorBrewer 1.1-2 Rcpp 1.0.5
readr 1.4.0 readxl 1.3.1 yemek tarifleri 0.1.15
Rövanş 1.0.1 rematch2 2.1.2 Kumanda 2.2.0
reprex 0.3.0 yeniden şekillendirme2 1.4.4 rex 1.2.0
rlang 0.4.9 rmarkdown 2,6 RODBC 1.3-17
roxygen2 7.1.1 rpart 4.1-15 rprojroot 2.0.2
Rserve 1.8-7 RSQLite 2.2.1 rstudioapi 0,13
ters çevirmeler 2.0.2 rvest 0.3.6 Terazi 1.1.1
seçici 0.4-2 sessioninfo 1.1.1 Şekil 1.4.5
Parlak 1.5.0 sourcetools 0.1.7 sparklyr 1.5.2
SparkR 3.1.0 Kayma 7.3-11 Splines 4.0.3
sqldf 0.4-11 KAREM 2020.5 Istatistik 4.0.3
istatistikler4 4.0.3 stringi 1.5.3 dizeleyici 1.4.0
Hayatta kalma 3.2-7 sys 3.4 tcltk 4.0.3
TeachingDemos 2.10 test edin 3.0.0 Türk 3.0.4
derleyici 1.1.2 tidyselect 1.1.0 tidyverse 1.3.0
timeDate 3043.102 tinytex 0.28 araçlar 4.0.3
usethis 2.0.0 utf8 1.1.4 Yardımcılar 4.0.3
uuid 0.1-4 vctr'lar 0.3.5 viridisLite 0.3.0
Waldo 0.2.3 Bıyık 0.4 withr 2.3.0
xfun 0.19 xml2 1.3.2 xopen 1.0.0
xtable 1.8-4 yaml 2.2.1 Zip 2.1.1

Yüklü Java ve Scala kitaplıkları (Scala 2.12 küme sürümü)

Grup Kimliği Yapıt Kimliği Sürüm
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.11.655
com.amazonaws aws-java-sdk-cloudformation 1.11.655
com.amazonaws aws-java-sdk-cloudfront 1.11.655
com.amazonaws aws-java-sdk-cloudhsm 1.11.655
com.amazonaws aws-java-sdk-cloudsearch 1.11.655
com.amazonaws aws-java-sdk-cloudtrail 1.11.655
com.amazonaws aws-java-sdk-cloudwatch 1.11.655
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.655
com.amazonaws aws-java-sdk-codedeploy 1.11.655
com.amazonaws aws-java-sdk-cognitoidentity 1.11.655
com.amazonaws aws-java-sdk-cognitosync 1.11.655
com.amazonaws aws-java-sdk-config 1.11.655
com.amazonaws aws-java-sdk-core 1.11.655
com.amazonaws aws-java-sdk-datapipeline 1.11.655
com.amazonaws aws-java-sdk-directconnect 1.11.655
com.amazonaws aws-java-sdk-directory 1.11.655
com.amazonaws aws-java-sdk-dynamodb 1.11.655
com.amazonaws aws-java-sdk-ec2 1.11.655
com.amazonaws aws-java-sdk-ecs 1.11.655
com.amazonaws aws-java-sdk-efs 1.11.655
com.amazonaws aws-java-sdk-elasticache 1.11.655
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.655
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.655
com.amazonaws aws-java-sdk-elastictranscoder 1.11.655
com.amazonaws aws-java-sdk-emr 1.11.655
com.amazonaws aws-java-sdk-glacier 1.11.655
com.amazonaws aws-java-sdk-iam 1.11.655
com.amazonaws aws-java-sdk-importexport 1.11.655
com.amazonaws aws-java-sdk-kinesis 1.11.655
com.amazonaws aws-java-sdk-kms 1.11.655
com.amazonaws aws-java-sdk-lambda 1.11.655
com.amazonaws aws-java-sdk-logs 1.11.655
com.amazonaws aws-java-sdk-machinelearning 1.11.655
com.amazonaws aws-java-sdk-opsworks 1.11.655
com.amazonaws aws-java-sdk-rds 1.11.655
com.amazonaws aws-java-sdk-redshift 1.11.655
com.amazonaws aws-java-sdk-route53 1.11.655
com.amazonaws aws-java-sdk-s3 1.11.655
com.amazonaws aws-java-sdk-ses 1.11.655
com.amazonaws aws-java-sdk-simpledb 1.11.655
com.amazonaws aws-java-sdk-simpleworkflow 1.11.655
com.amazonaws aws-java-sdk-sns 1.11.655
com.amazonaws aws-java-sdk-sqs 1.11.655
com.amazonaws aws-java-sdk-ssm 1.11.655
com.amazonaws aws-java-sdk-storagegateway 1.11.655
com.amazonaws aws-java-sdk-sts 1.11.655
com.amazonaws aws-java-sdk-support 1.11.655
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.655
com.amazonaws jmespath-java 1.11.655
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics akış 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo gölgeli 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml Classmate 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.10.0
com.fasterxml.jackson.core jackson-core 2.10.0
com.fasterxml.jackson.core jackson-databind 2.10.0
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.10.0
com.fasterxml.jackson.datatype jackson-datatype-joda 2.10.0
com.fasterxml.jackson.module jackson-module-paranamer 2.10.0
com.fasterxml.jackson.module jackson-module-scala_2.12 2.10.0
com.github.ben-manes.caffeine Kafein 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib çekirdek 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.joshelser dropwizard-metrics-hadoop-metrics2-reporter 0.1.2
com.github.luben zstd-jni 1.4.8-1
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.2.4
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava Guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 1.4.195
com.helger Profiler 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.sqlserver mssql-jdbc 8.2.1.jre8
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.ning compress-lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.9.5
com.twitter chill_2.12 0.9.5
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity univocity-ayrıştırıcıları 2.9.0
com.zaxxer HikariCP 3.1.0
commons-beanutils commons-beanutils 1.9.4
commons-cli commons-cli 1.2
commons-codec commons-codec 1.10
commons-collections commons-collections 3.2.2
commons-configuration commons-configuration 1.6
commons-dbcp commons-dbcp 1.4
commons-digester commons-digester 1.8
commons-fileupload commons-fileupload 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.4
commons-lang commons-lang 2,6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.10
io.dropwizard.metrics metrics-core 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics metrics-healthchecks 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics metrics-servlets 4.1.1
io.netty netty-all 4.1.51.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx Toplayıcı 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation etkinleştirme 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.5
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
net.razorvine pirolit 4.30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv süper csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.12.8
net.snowflake spark-snowflake_2.12 2.8.1-spark_3.0
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8-1
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow ok biçimi 2.0.0
org.apache.arrow ok-bellek çekirdeği 2.0.0
org.apache.arrow ok-bellek-netty 2.0.0
org.apache.arrow ok-vektör 2.0.0
org.apache.avro avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.commons commons-compress 1,20
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3,10
org.apache.commons commons-math3 3.4.1
org.apache.commons commons-text 1.6
org.apache.curator curator-client 2.7.1
org.apache.curator küratör çerçevesi 2.7.1
org.apache.curator curator-recipes 2.7.1
org.apache.derby Derby 10.12.1.1
org.apache.directory.api api-asn1-api 1.0.0-M20
org.apache.directory.api api-util 1.0.0-M20
org.apache.directory.server apacheds-i18n 2.0.0-M15
org.apache.directory.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop hadoop ek açıklamaları 2.7.4
org.apache.hadoop hadoop-auth 2.7.4
org.apache.hadoop hadoop-client 2.7.4
org.apache.hadoop hadoop-common 2.7.4
org.apache.hadoop hadoop-hdfs 2.7.4
org.apache.hadoop hadoop-mapreduce-client-app 2.7.4
org.apache.hadoop hadoop-mapreduce-client-common 2.7.4
org.apache.hadoop hadoop-mapreduce-client-core 2.7.4
org.apache.hadoop hadoop-mapreduce-client-jobclient 2.7.4
org.apache.hadoop hadoop-mapreduce-client-shuffle 2.7.4
org.apache.hadoop hadoop-yarn-api 2.7.4
org.apache.hadoop hadoop-yarn-client 2.7.4
org.apache.hadoop hadoop-yarn-common 2.7.4
org.apache.hadoop hadoop-yarn-server-common 2.7.4
org.apache.hive hive-beeline 2.3.7
org.apache.hive hive-cli 2.3.7
org.apache.hive hive-common 2.3.7
org.apache.hive hive-exec-core 2.3.7
org.apache.hive hive-jdbc 2.3.7
org.apache.hive hive-llap-client 2.3.7
org.apache.hive hive-llap-common 2.3.7
org.apache.hive hive-meta veri deposu 2.3.7
org.apache.hive hive-serde 2.3.7
org.apache.hive hive-shims 2.3.7
org.apache.hive hive-storage-api 2.7.2
org.apache.hive hive-vector-code-gen 2.3.7
org.apache.hive.shims hive-shims-0.23 2.3.7
org.apache.hive.shims hive-shims-common 2.3.7
org.apache.hive.shims hive-shims-scheduler 2.3.7
org.apache.htrace htrace-core 3.1.0-incubating
org.apache.httpcomponents httpclient 4.5.6
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy sarmaşık 2.4.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.5.12
org.apache.orc orc-mapreduce 1.5.12
org.apache.orc orc-shims 1.5.12
org.apache.parquet parquet-column 1.10.1-databricks6
org.apache.parquet parquet-common 1.10.1-databricks6
org.apache.parquet parquet kodlaması 1.10.1-databricks6
org.apache.parquet parquet biçimi 2.4.0
org.apache.parquet parquet-hadoop 1.10.1-databricks6
org.apache.parquet parquet-jackson 1.10.1-databricks6
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.velocity hız 1.5
org.apache.xbean xbean-asm7-shaded 4.15
org.apache.yetus hedef kitle ek açıklamaları 0.5.0
org.apache.zookeeper zookeeper 3.4.14
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-jaxrs 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.jackson jackson-xc 1.9.13
org.codehaus.janino commons-derleyici 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.34.v20201102
org.eclipse.jetty jetty-continuation 9.4.34.v20201102
org.eclipse.jetty jetty-http 9.4.34.v20201102
org.eclipse.jetty jetty-io 9.4.34.v20201102
org.eclipse.jetty jetty-jndi 9.4.34.v20201102
org.eclipse.jetty jetty-plus 9.4.34.v20201102
org.eclipse.jetty jetty-proxy 9.4.34.v20201102
org.eclipse.jetty jetty-security 9.4.34.v20201102
org.eclipse.jetty jetty-server 9.4.34.v20201102
org.eclipse.jetty jetty-servlet 9.4.34.v20201102
org.eclipse.jetty jetty-servlets 9.4.34.v20201102
org.eclipse.jetty jetty-util 9.4.34.v20201102
org.eclipse.jetty jetty-webapp 9.4.34.v20201102
org.eclipse.jetty jetty-xml 9.4.34.v20201102
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-bulucu 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.30
org.glassfish.jersey.containers jersey-container-servlet-core 2.30
org.glassfish.jersey.core jersey-client 2.30
org.glassfish.jersey.core jersey-common 2.30
org.glassfish.jersey.core jersey-server 2.30
org.glassfish.jersey.inject jersey-hk2 2.30
org.glassfish.jersey.media jersey-media-jaxb 2.30
org.hibernate.validator hibernate-validator 6.1.0.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss günlüğü 3.3.2.Final
org.jdbi jdbi 2.63.1
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M5
org.json4s json4s-core_2.12 3.7.0-M5
org.json4s json4s-jackson_2.12 3.7.0-M5
org.json4s json4s-scalap_2.12 3.7.0-M5
org.lz4 lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-client 2.1.2
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap RoaringBitmap 0.9.0
org.roaringbitmap dolgular 0.9.0
org.rocksdb rocksdbjni 6.2.2
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.10
org.scala-lang scala-library_2.12 2.12.10
org.scala-lang scala-reflect_2.12 2.12.10
org.scala-lang.modules scala-collection-compat_2.12 2.1.1
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test arabirimi 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1.0
org.scalanlp breeze_2.12 1.0
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark Kullanılma -yan 1.0.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.threeten threeten-extra 1.5.0
org.tukaani Xz 1.5
org.typelevel algebra_2.12 2.0.0-M2
org.typelevel cats-kernel_2.12 2.0.0-M4
org.typelevel machinist_2.12 0.6.8
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0-M1
org.typelevel spire-platform_2.12 0.17.0-M1
org.typelevel spire-util_2.12 0.17.0-M1
org.typelevel spire_2.12 0.17.0-M1
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.2
org.yaml snakeyaml 1,24
Oro Oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1
xmlenc xmlenc 0,52