Ağustos 2023

Makale
04/24/2024

Bu özellikler ve Azure Databricks platformu geliştirmeleri Ağustos 2023'te yayımlandı.

Not

Sürümler hazırlanır. Azure Databricks çalışma alanınız ilk yayın tarihinden bir hafta veya daha sonra güncelleştirilmeyebilir.

Tablolar artık gezinti aramasında görünüyor

31 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Unity Kataloğu'nda kayıtlı tablolar artık üst çubuktaki gezinti aramasında görünür. Bkz . Çalışma alanı nesnelerini arama.

Databricks CLI 0.203.3 (Genel Önizleme) sürümüne güncelleştirildi

30 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks komut satırı arabirimi (Databricks CLI) 0.203.3 sürümüne güncelleştirildi. Ayrıntılar için bkz. sürüm 0.203.3 için değişiklik günlüğü.

Databricks JDBC sürücüsü 2.6.34

30 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks JDBC sürücüsünün (indirme) 2.6.34 sürümünü yayımladık. Bu sürüm, üçüncü taraf kitaplıklarını yükselterek bir dizi güvenlik açığı sorununu giderir. Ayrıca, bu sürüm aşağıdaki sorunları giderir:

Bir sorgu sunucuya bağlanamadığında iş parçacığı sızıntısı.
Tablo meta verilerinin REMARKS sütununda açıklamalar eksik.
Sonuç kümesi kapatma işlemi bir hata döndürdüğünde bağlayıcı sinyal iş parçacığından işlem işleyicisi girdilerini temizlemez.

Sürüm ayrıca sunucudan gelen hata kodlarını kabul ederek SQLState hata iletisi işlemeyi geliştirir ve sunucu protokolü sürümünü doğru şekilde denetler.

Go için Databricks SDK'sı 0.18.0 (Beta) sürümüne güncelleştirildi

29 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Go sürüm 0.18.0 için Databricks SDK'sı 17 hataya neden olan API değişikliğini tanıtır, 30 API ekler ve yaklaşık bir düzine alan ekler. Ayrıntılar için bkz. sürüm 0.18.0 için değişiklik günlüğü.

Python için Databricks SDK'sı 0.7.0 (Beta) sürümüne güncelleştirildi

29 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Python sürüm 0.7.0 için Databricks SDK'sı, dosyalar API'sinde hataya neden olan bir değişikliğin yanı sıra 17 hataya neden olan 17 değişiklik daha içeriyor. Bu sürüm ayrıca 14 alan ve 27 veri sınıfı ekler. Ayrıntılar için bkz. sürüm 0.7.0 için değişiklik günlüğü.

Databricks Terraform sağlayıcısı sürüm 1.24.1'e güncelleştirildi

29 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks Terraform sağlayıcısı sürüm 1.24.1, çalışma alanına ulaşılabilirliğin doğrulanmasına yönelik bir düzeltme içerir. Ayrıntılar için bkz. sürüm 1.24.1 için değişiklik günlüğü.

DBFS kullanım ömrü sonu üzerindeki init betikleri 1 Aralık 2023'e uzatıldı

29 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks daha önce DBFS'deki başlatma betiklerinin 1 Eylül 2023'te kullanım ömrünün sonuna ulaşacağını duyurmuştu. Kullanım süresi sonu tarihi 1 Aralık 2023'e uzatıldı.

Databricks Runtime 14.0 (Beta)

29 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks Runtime 14.0 ve Databricks Runtime 14.0 ML artık Beta sürümü olarak kullanılabilir.

Bkz . Databricks Runtime 14.0 (desteklenmiyor) ve Machine Learning için Databricks Runtime 14.0 (desteklenmeyen).

28 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Birleşik Azure Databricks gezinti deneyimi genel kullanıma sunuldu. Kullanıcılar artık klasik gezinti deneyimine geri dönemez. Daha fazla bilgi için bkz . Çalışma alanında gezinme.

Databricks Terraform sağlayıcısı 1.24.0 sürümüne güncelleştirildi

25 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks Terraform sağlayıcısı sürüm 1.24.0, Unity Kataloğu nesneleri için hesap düzeyinde API desteği ekler, çeşitli veri kaynaklarına ekler acl_principal_id ve daha fazlası. Ayrıntılar için bkz. sürüm 1.24.0 için değişiklik günlüğü.

Genomiks için Databricks Runtime ayarı çalışma alanı yönetici ayarları sayfasından kaldırıldı

25 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Çalışma alanı yöneticileri artık çalışma alanı yönetici ayarları sayfasından veya Çalışma Alanı yapılandırma API'sinden Genomiks için Databricks Runtime'ı etkinleştiremez veya devre dışı bırakamıyor. Databricks Genomiks çalışma zamanı kullanım dışı bırakıldı ve Genomiks için Databricks Runtime desteği 24 Eylül 2022'de kaldırıldı.

Databricks Genomiks çalışma zamanı kullanım dışı bırakıldı. açık kaynak eşdeğerleri için bkz. genomiks-pipelines ve Glow depoları.

Databricks Runtime kullanımdan kaldırma ilkesi ve zamanlaması hakkında daha fazla bilgi için bkz . Desteklenen Databricks Runtime LTS sürümleri.

Kapsayıcı Hizmetleri ayarı çalışma alanı yönetici ayarları sayfasından kaldırıldı

25 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Çalışma alanı yöneticileri artık çalışma alanı yöneticisi ayarları sayfasından Kapsayıcı Hizmetleri'ni etkinleştiremez veya devre dışı bırakamıyor. Kapsayıcı Hizmetleri, kümelerinizde müşteri kapsayıcılarını kullanmanıza olanak tanır. Tüm yeni çalışma alanlarında varsayılan olarak etkindir. Çalışma Alanı yapılandırma API'sini kullanarak Kapsayıcı Hizmetleri hala etkinleştirilebilir veya devre dışı bırakılabilir. Daha fazla bilgi için bkz . Kapsayıcı Hizmetlerini Etkinleştirme.

Databricks CLI 0.203.2 (Genel Önizleme) sürümüne güncelleştirildi

24 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks komut satırı arabirimi (Databricks CLI) 0.203.2 sürümüne güncelleştirildi. Ayrıntılar için bkz. sürüm 0.203.2 için değişiklik günlüğü.

Python not defterlerinde işlevler ve değişkenler için tanıma gitme

24 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks Runtime 12.2 LTS ve üzerinde, bir Python not defteri bir kümeye eklendiğinde, otomatik olarak bu not defterinde tanımlanan bir değişkenin veya işlevin tanımına gidebilirsiniz. Ayrıntılar için bkz . Tanıma gitme.

Birleşik şema tarayıcısı GA'dır

24 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Birleşik şema tarayıcısı artık Katalog Gezgini, SQL düzenleyicisi ve not defterlerinde genel kullanıma sunuldu. Bkz . Katalog Gezgini nedir?.

Databricks Runtime 13.3 LTS GA'dır

22 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks Runtime 13.3 LTS ve Databricks Runtime 13.3 LTS ML genel kullanıma sunuldu.

Bkz. Machine Learning için Databricks Runtime 13.3 LTS ve Databricks Runtime 13.3 LTS.

Unity Kataloğu ile etiketlere giriş

22 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Artık Unity Kataloğu'nda güvenli hale getirilebilen nesnelerinize etiket uygulayabilirsiniz. Etiketler, güvenli hale getirilebilen nesneleri düzenlemenize ve veri varlıklarınızı aramayı ve bulmayı basitleştirmenize yardımcı olur. Bkz. Etiket uygulama.

Unity Kataloğu paylaşılan kümelerinde başlatma betikleri, JAR'ler ve Maven koordinatları için izin verilenler listesi Genel Önizleme'de

23 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Artık Unity Kataloğu'nu allowlist kullanarak Databricks Runtime 13.3 ve üzerini çalıştıran paylaşılan erişim moduyla işlem üzerinde init betiklerinin, JAR'lerin ve Maven koordinatlarının yüklenmesini denetleyebilirsiniz. Bkz. Paylaşılan işlemdeki izin verilenler listesi kitaplıkları ve başlatma betikleri.

Başlatma betikleri ve JAR'ler için birim desteği Genel Önizleme aşamasındadır

23 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Artık Databricks Runtime 13.3 ve üzerini çalıştıran atanmış veya paylaşılan erişim modlarıyla işlem üzerinde init betiklerini ve JAR'leri depolamak için Unity Kataloğu birimlerini kullanabilirsiniz. Bkz . Küme kapsamlı kitaplıklar ve Birimden kitaplık yükleme.

Daha Kolay Databricks Repos .ipynb dosya çıkış işlemeleri

21 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks Repos, .ipynb dosya çıkış işlemelerinin denetlenip görülmesini kolaylaştıran özellikler ekledi:

Depolar sizin için bir commit_output yapılandırma dosyası oluşturabilir.
Kullanıcı arabirimindeki bildirimler, çıkış işlemelerinin durumunu size bildirir.
Dosya menüsünden, not defteri çıkışlarının işlenip işlenmeyeceğini denetleyebilirsiniz.

Bkz . .ipynb not defteri çıkış işlemelerini denetleme.

Databricks Depolarında IPYNB not defteri desteği GA'dır

21 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks Repos'ta IPYNB not defteri dosya desteği GA'dır. Depolar hakkında daha fazla bilgi için bkz:

Go için Databricks SDK'sı 0.17.0 (Beta) sürümüne güncelleştirildi

18 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Go sürüm 0.17.0 için Databricks SDK'sı 30'un üzerinde API ekler ve yaklaşık 10 API'nin adını alır. Ayrıntılar için bkz. sürüm 0.17.0 için değişiklik günlüğü.

Python için Databricks SDK'sı 0.6.0 (Beta) sürümüne güncelleştirildi

18 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Python sürüm 0.6.0 için Databricks SDK'sı yaklaşık 20 veri sınıfı ekler, yaklaşık 10 API ekler ve yaklaşık 20 yeniden adlandırma içerir. Ayrıntılar için bkz. sürüm 0.6.0 için değişiklik günlüğü.

Databricks CLI 0.203.1 (Genel Önizleme) sürümüne güncelleştirildi

16 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks komut satırı arabirimi (Databricks CLI) 0.203.1 sürümüne güncelleştirildi. Ayrıntılar için bkz. sürüm 0.203.1 için değişiklik günlüğü.

Birleşik Şema Tarayıcısı artık GA'dır

16 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Aşağıdaki yeni özellikler de dahil olmak üzere not defterleri, SQL Düzenleyicisi ve Katalog Gezgini'nde verilerinizde gezinmenin birleşik bir yolu artık kullanılabilir:

Ağacın sıkıştırılmış sürümü.
Filtre uygulama sırasında şema düzeyinde Unity Kataloğu nesne sayısının görüntülenmesi.
Eylemleri görüntülemek için menüye sağ tıklayın.

Kimlikleri bir betikte veya şablonda kodlarsanız sunucusuz alt ağ değişiklikleri sizi etkileyebilir

15 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Azure Depolama güvenlik duvarı kullanıyorsanız, Ağustos sonuna kadar bazı alt ağ kimlikleri değişir. Azure mevcut depolama güvenlik duvarı kurallarındaki alt ağ kimliklerini otomatik olarak geçirdiğinden bu durum çoğu müşteriyi etkilemez. Bu geçiş mevcut iş yüklerini etkilemez .

Sunucusuz alt ağların listesini Azure depolama güvenlik duvarı kurallarınızı güncelleştiren bir şablon veya betikte kodlarsanız, kuralları güncelleştirmeye çalışmadan önce alt ağ kimliklerinin en son listesini almanız gerekir. Her bölge için en son kimlikler için bkz . Azure Databricks bölgeleri.

Go için Databricks SDK'sı 0.16.0 (Beta) sürümüne güncelleştirildi

14 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Go sürüm 0.16.0 için Databricks SDK'sı yaklaşık bir düzine alan ekler, yaklaşık yarım düzine alanı kaldırır ve yaklaşık yarım düzine API'nin imzalarını değiştirir. Ayrıntılar için bkz. sürüm 0.16.0 için değişiklik günlüğü.

İş ortağı Bağlan Census'ı destekliyor

14 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Artık Azure Databricks çalışma alanınızı Census'a bağlamak için İş Ortağı Bağlan kullanabilirsiniz. Daha fazla bilgi için bkz. Census'a Bağlan.

Azure Key Vault Yönetilen HSM anahtarları artık müşteri tarafından yönetilen anahtarlar için destekleniyor

14 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Bazı Azure Databricks hizmetleri ve verileri, şifrelenmiş verilere erişimi korumaya ve denetlemeye yardımcı olmak için müşteri tarafından yönetilen anahtar eklemeyi destekler. Azure Databricks'in farklı veri ve konum türlerini içeren müşteri tarafından yönetilen üç temel özelliği vardır. Bu özelliklerin üçü de artık Azure Key Vault Yönetilen HSM'den (Donanım Güvenlik Modülleri) ve Azure Key Vault kasalarından müşteri tarafından yönetilen anahtarları destekliyor. Şifreleme için bkz. Müşteri tarafından yönetilen anahtarlar.

Python için Databricks SDK'sı 0.5.0 (Beta) sürümüne güncelleştirildi

11 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Python sürüm 0.5.0 için Databricks SDK'sı yarım düzine API'nin imzalarını değiştirir, bir düzine alan ekler, yarım düzine alanı kaldırır ve birkaç veri sınıfı ekler. Ayrıntılar için bkz. sürüm 0.5.0 için değişiklik günlüğü.

Çalışma alanı dosyaları için programlı yazma desteği

11 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks Runtime 11.2 ve üzerini kullanan kümeler çalışma alanı dosyalarına yazmayı destekler. Çalışma alanınızda program aracılığıyla dosya ve dizin oluşturabilir, güncelleştirebilir ve silebilirsiniz.

Databricks CLI 0.203.0 sürümüne güncelleştirildi (Genel Önizleme)

10 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos

Databricks komut satırı arabirimi (Databricks CLI) sürüm 0.203.0 komutu ve daha fazlasını geliştirirauth login. Ayrıntılar için bkz. sürüm 0.203.0 için değişiklik günlüğü.

Databricks Terraform sağlayıcısı sürüm 1.23.0'a güncelleştirildi

9 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023

Databricks Terraform sağlayıcı sürüm 1.23.0, içinde databricks_jobdesteklenen ek alanlarla genişletir RunJobTask ve için databricks_model_servingdışarı aktarma desteği ekler. Ayrıntılar için bkz. sürüm 1.23.0 için değişiklik günlüğü.

Gruplar artık yeniden adlandırılabilir

8 Ağustos 2023, Ağustos 2023

Artık mevcut hesap gruplarını ve çalışma alanı yerel gruplarını yeniden adlandırabilirsiniz. Bkz. Grubun adını değiştirme.

Go için Databricks SDK'sı 0.15.0 (Beta) sürümüne güncelleştirildi

7 Ağustos 2023, Ağustos 2023

Go için Databricks SDK'sı sürüm 0.15.0, izinlerle ilgili API'leri yeniden düzenleyerek daha anlaşılır ve kullanımını kolaylaştırır. Ayrıntılar için bkz. sürüm 0.15.0 için değişiklik günlüğü.

Python için Databricks SDK'sı 0.4.0 (Beta) sürümüne güncelleştirildi

7 Ağustos 2023, Ağustos 2023

Python sürüm 0.4.0 için Databricks SDK, izinlerle ilgili API'leri yeniden düzenleyerek daha anlaşılır ve kullanımını kolaylaştırır. Ayrıntılar için bkz. sürüm 0.4.0 için değişiklik günlüğü.

Üçüncü taraf iFraming önleme yapılandırma ayarı kaldırıldı

7 Ağustos 2023, Ağustos 2023

Azure Databricks, uygun HTTP üst bilgileri ekleyerek iFraming Azure Databricks'ten üçüncü taraf etki alanı riskini azaltır. Üçüncü taraf iFraming engellemesi varsayılan olarak hala etkindir, ancak Azure Databricks çalışma alanı yönetici ayarını kaldırarak devre dışı bırakır. Daha önce bir çalışma alanı için üçüncü taraf iFraming'i devre dışı bırakmışsanız, bu özellik bu çalışma alanı için devre dışı bırakılmaya devam eder. Üçüncü taraf iFraming'i yeniden etkinleştirmek için Azure Databricks hesap ekibinize başvurun.

Visual Studio Code için Databricks uzantısı 1.1.1 sürümüne güncelleştirildi

4 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023

Visual Studio Code sürüm 1.1.1 için Databricks uzantısı, örneğin Windows'ta ortam değişkenini HOME doğru bir şekilde işlemek gibi birçok küçük düzeltme sağlar. Ayrıntılar için bkz. sürüm 1.1.1 için değişiklik günlüğü.

LangChain 13.1 ve üzeri sürümleriyle kullanılabilir

4 Ağustos 2023, Ağustos 2023, Ağustos 2023, Ağustos 2023

LangChain, LangChain müşterilerinin MLflow'un güçlü araçlarından ve deneme izleme özelliklerinden doğrudan Azure Databricks ortamından yararlanmasını sağlayan deneysel bir MLflow aroması olarak kullanılabilir.

LangChain, büyük dil modellerini (LLM' ler) kullanan uygulamalar oluşturmaya yardımcı olmak ve LLM'ler için daha fazla eğitim bağlamı getirmek üzere bunları dış verilerle birleştirmeye yardımcı olmak üzere tasarlanmış bir yazılım çerçevesidir.

Machine Learning için Databricks Runtime, Databricks Runtime 13.1 ML ve üzeri sürümleri içerir langchain .

Unity Kataloğu'nda Özellik Mühendisliği Genel Önizlemedir

3 Ağustos 2023, Ağustos 2023

Unity Kataloğu'ndaki Özellik Mühendisliği ile Unity Kataloğu, özellik deponuz olur. Model eğitimi veya çıkarımı için özellik tablosu olarak birincil anahtarla herhangi bir Delta tablosunu kullanabilirsiniz. Unity Kataloğu özellik bulma ve idare sağlar.

Yinelenen sürekli iş hataları için geliştirilmiş hata işleme

3 Ağustos 2023, Ağustos 2023

Ardışık hatalar için eşiği aşan sürekli işler artık iş çalıştırmalarını verimli bir şekilde yeniden denemek ve işlerin geçici sorunlardan kurtulmasını sağlamak için üstel geri alma şemasını kullanıyor. Daha önce hata eşiğini aşan sürekli işler duraklatılmış ve yeniden denenmemişti.

Sunucusuz SQL ambarları artık ek bölgelerde kullanılabilir

3 Ağustos 2023, Ağustos 2023

Sunucusuz SQL ambarları ek bölgelerde kullanılabilir: Doğu Avustralya, Orta Kanada, Batı ABD 2, Orta Güney ABD ve Güneydoğu Asya. Bkz. Azure Databricks bölgeleri.

Azure Depolama güvenlik duvarı kullanmayı planlıyorsanız, güvenlik duvarını sunucusuz SQL ambarı alt ağlarından erişime izin verecek şekilde yapılandırın. Bkz. Azure Databricks bölgeleri.

2 Ağustos 2023, Ağustos 2023

Delta Sharing'i kullanarak bir şemanın tamamını paylaşabilir ve alıcıya şemayı paylaştığınız anda şemadaki tüm tablolara ve görünümlere ve gelecekte şemaya eklenen tüm tablolara ve görünümlere erişim sağlayabilirsiniz. SQL komutlarını kullanarak bir paylaşıma şema eklemek için SQL ambarı veya Databricks Runtime 13.2 veya üzerini çalıştıran bir küme gerekir. Katalog Gezgini'ni kullanarak aynı işlemi yapmak için işlem gereksinimi yoktur. Bkz. Paylaşıma şema ekleme.

Azure Databricks işlerinizde görevleri koşullu olarak çalıştırma

2 Ağustos 2023, Ağustos 2023

Azure Databricks işiyle iş akışı uygularken daha fazla esneklik sağlayarak, görevin bağımlılıklarının durumuna göre bir iş görevi çalıştırmak için yeni Run if koşulu kullanabilirsiniz. Örneğin, görevin bağımlılıklarından Run if bazıları veya tümü başarısız olduğunda görevi çalıştırmak için koşulunu kullanabilirsiniz. Bkz. Azure Databricks işinde görevleri koşullu olarak çalıştırma.