Mayıs 2024

Bu özellikler ve Azure Databricks platformu iyileştirmeleri Mayıs 2024'te yayımlandı.

Not

Sürümler hazırlanır. Azure Databricks hesabınız ilk yayın tarihinden bir hafta veya daha sonra güncelleştirilmeyebilir.

Sunucusuz güvenlik duvarı yapılandırması artık daha fazla işlem türünü destekliyor

31 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

Azure Databricks artık Ağ Bağlantısı Yapılandırmalarını (NCC) kullanarak CPU uç noktalarına erişim sunan sunucusuz iş akışları, not defterleri, Delta Live Tables işlem hatları ve model için güvenlik duvarlarını yapılandırmayı destekliyor. Hesap yöneticileri, kararlı alt ağlar üzerinden güvenli ve denetimli erişim sağlamak için NCC oluşturabilir ve bunları çalışma alanlarına ekleyebilir.

Databricks Runtime 15.0 serisi desteği sona eriyor

31 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

Machine Learning için Databricks Runtime 15.0 ve Databricks Runtime 15.0 desteği 31 Mayıs'ta sona erdi. Bkz . Databricks destek yaşam döngüleri.

Databricks Runtime 15.3 (Beta)

30 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

Databricks Runtime 15.3 ve Databricks Runtime 15.3 ML artık Beta sürümü olarak kullanılabilir.

Bkz. Machine Learning için Databricks Runtime 15.3 (Beta) ve Databricks Runtime 15.2.

İşlem ölçümleri kullanıcı arabirimi artık tüm Databricks Runtime sürümlerinde kullanılabilir

30 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

İşlem ölçümleri kullanıcı arabirimi tüm Databricks Runtime sürümlerine dağıtıldı. Daha önce bu ölçümler yalnızca Databricks Runtime 13.3 ve üzeri üzerinde çalışan işlem kaynaklarında kullanılabilirdi. Bkz . İşlem ölçümlerini görüntüleme.

Not defteri ve SQL düzenleyicisi sonuç tablolarında geliştirilmiş arama ve filtreleme

28 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

Artık not defterleri ve SQL düzenleyicisindeki sonuç tablolarındaki mevcut değerlerin açılan listesinden sütunları kolayca arayabilir ve filtre değerlerini seçebilirsiniz.

Yeni pano, Databricks Market sağlayıcılarının listeleme kullanımını izlemelerine yardımcı olur

28 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

Yeni Sağlayıcı Analizi Panosu, Databricks Market sağlayıcılarının listeleme görünümlerini, isteklerini ve yüklemelerini izlemesine olanak tanır. Pano, Market sistem tablolarından veri çeker. Bkz. Panoları kullanarak kullanım ölçümlerini listelemeyi izleme.

Sistem tarafından oluşturulan federasyon sorgularını Query Profile

24 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

Lakehouse Federation artık sistem tarafından oluşturulan federasyon sorgularını ve bunların ölçümlerini Sorgu Profili'nde görüntülemeyi destekliyor. Veri kaynağına gönderilen sorguyu görüntülemek için grafik görünümünde federasyon tarama düğümüne tıklayın. Bkz. Sistem tarafından oluşturulan federasyon sorgularını görüntüleme.

İşlem düzlemi giden IP adresleri çalışma alanı IP izin listesine eklenmelidir

24 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

Çalışma alanınızda güvenli küme bağlantısı ve IP erişim listeleri kullanıyorsanız, işlem düzleminin denetim düzlemine erişmek için kullandığı tüm genel IP'leri izin verenler listesine eklemeniz veya arka uç Özel Bağlantı yapılandırmanız gerekir. Bu değişiklik, 29 Temmuz 2024'te tüm yeni çalışma alanlarını ve 26 Ağustos 2024'te mevcut çalışma alanlarını etkileyecektir. Daha fazla bilgi için Databricks Community gönderisine bakın.

Örneğin, sanal ağ ekleme kullanan bir çalışma alanında güvenli küme bağlantısını etkinleştirirseniz, Databricks çalışma alanınızın kararlı bir çıkış genel IP'sini kullanmasını önerir. Bu genel IP'nin ve diğer tüm kişilerin bir izin listesinde mevcut olması gerekir. Bkz . Güvenli küme bağlantısı kullanılırken çıkış IP adresleri. Alternatif olarak, Azure Databricks tarafından yönetilen bir sanal ağ kullanıyorsanız ve yönetilen NAT ağ geçidini genel IP'lere erişecek şekilde yapılandırıyorsanız, bu IP'lerin bir izin listesinde mevcut olması gerekir.

Bkz . Çalışma alanları için IP erişim listelerini yapılandırma.

OAuth, Snowflake için Lakehouse Federasyonu'nda desteklenir

24 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

Unity Kataloğu artık OAuth kullanarak Snowflake bağlantıları oluşturmanıza olanak tanır. Bkz . Snowflake üzerinde federasyon sorguları çalıştırma.

Çalışma alanı nesnelerini çalışma alanı tarayıcısından toplu taşıma ve silme

24 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

Artık çalışma alanında taşımak veya silmek için birden çok öğe seçebilirsiniz. Birden çok nesne seçildiğinde, bir eylem çubuğu görüntülenir ve öğeleri taşıma veya silme seçenekleri vardır. Ayrıca, farenizi kullanarak birden çok öğe seçebilir ve bunları yeni bir konuma sürükleyebilirsiniz. Nesnelerdeki mevcut izinler toplu taşıma ve silme işlemleri sırasında da geçerlidir.

Unity Kataloğu nesneleri son kullanılanlarda ve sık kullanılanlarda kullanılabilir

23 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

Artık kataloglar ve şemalar gibi Unity Kataloğu nesnelerini son kullanılanlar listenizde bulabilirsiniz. Ayrıca, Unity Kataloğu nesnelerini Katalog Gezgini'nde ve şema tarayıcısında sık kullanılanlara ekleyebilir ve çalışma alanı giriş sayfasında sık kullanılan nesneleri bulabilirsiniz.

Yeni dbt-databricks bağlayıcısı 1.8.0, ayrılmış dbt mimarisini benimser

23 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

DBT-Databricks bağlayıcısı 1.8.0, yeni ayrılmış dbt mimarisini benimseyen ilk sürümdür. Bağlayıcı artık dbt-core ile dbt-core arasında paylaşılan bir soyutlama katmanına bağımlıdır. Sonuç olarak bağlayıcının artık Databricks özellik sürümünü dbt-core ile eşleştirmesi gerekmez ve anlamsal sürüm oluşturmayı benimsemek ücretsizdir. Bu, bağlayıcı geliştiricilerinin artık model başına işlem gibi önemli özellikleri yama olarak yayınlamasına gerek olmadığı anlamına gelir.

Bu sürüm aşağıdakileri de getirir:

• Otomatik yenilemeleri zamanlama da dahil olmak üzere gerçekleştirilmiş görünümlerin ve akış tablolarının bildirimi ve çalışmasına yönelik iyileştirmeler.
• Unity Kataloğu güvenli hale getirilebilir nesne etiketleri desteği. Bunları, genellikle dbt işleminde modelleri seçmek için kullanılan meta veriler olan dbt etiketlerinden ayırmak için, bu etiketler model yapılandırmasında adlandırılırdatabricks_tags.
• Meta veri işleme performansında çeşitli geliştirmeler.

Yeni uyumluluk ve güvenlik ayarları API'leri (Genel Önizleme)

23 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

Databricks, çalışma alanlarında uyumluluk güvenlik profili, gelişmiş güvenlik izlemesi ve otomatik küme güncelleştirme ayarları için yeni API'ler kullanıma sunulmuştur. Bkz.

• Uyumluluk Güvenlik Profili API'si
• Gelişmiş Güvenlik İzleme API'si
• Otomatik Küme Güncelleştirme API'si

Databricks Runtime 15.2 GA'dır

22 Mayıs 2024, Saat 20:00

Databricks Runtime 15.2 ve Databricks Runtime 15.2 ML genel kullanıma sunuldu.

Bkz. Machine Learning için Databricks Runtime 15.2 ve Databricks Runtime 15.2.

Delta Sharing için yeni Tableau bağlayıcısı

22 Mayıs 2024, Saat 20:00

Yeni Tableau Delta Sharing Connector, Delta Sharing açık paylaşım protokolü kullanılarak sizinle paylaşılan verilere Tableau Desktop erişimini basitleştirir. Bkz . Tableau: Paylaşılan verileri okuma.

Yeni derin öğrenme öneri modeli örnekleri

22 Mayıs 2024, Saat 20:00

Databricks, iki kuleli model ve Meta'nın DLRM'si dahil olmak üzere modern derin öğrenme öneri modellerini gösteren iki yeni örnek yayımladı. Derin öğrenme öneri modelleri hakkında daha fazla bilgi edinmek için bkz . Önerilen modelleri eğitin.

Depolama kimlik bilgilerini ve dış konumları belirli çalışma alanlarına bağlama (Genel Önizleme)

22 Mayıs 2024, Saat 20:00

Artık depolama kimlik bilgilerini ve dış konumları belirli çalışma alanlarına bağlayarak bu nesnelere diğer çalışma alanlarından erişimi engelleyebilirsiniz. Bu özellik özellikle kullanıcı veri erişimini yalıtmak için çalışma alanları kullanıyorsanız (örneğin, ayrı üretim ve geliştirme çalışma alanlarınız veya hassas verileri işlemek için ayrılmış bir çalışma alanınız varsa) yararlıdır.

Daha fazla bilgi için bkz . (İsteğe bağlı) Belirli çalışma alanlarına dış konum atama ve (İsteğe bağlı) Belirli çalışma alanlarına depolama kimlik bilgisi atama.

Git klasörleri GA'dır

22 Mayıs 2024, Saat 20:00

Git klasörleri artık genel kullanıma sunuldu. Bkz . Databricks Git klasörleriyle Git tümleştirmesi. Eski "Repos" özelliğinin kullanıcısıysanız bkz . Databricks Repos'a ne oldu?.

Unity Kataloğu'nda önceden eğitilmiş modeller (Genel Önizleme)

21 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

Databricks artık Unity Kataloğu'nda yüksek kaliteli, önceden eğitilmiş GenAI modellerinden bir seçim içeriyor. Bu önceden eğitilmiş modeller, çıkarım iş akışlarınız için en son düzey yapay zeka özelliklerine erişmenize olanak tanıyarak kendi özel modellerinizi oluşturma zamanınızı ve harcamanızı sağlar. Bkz . Unity Kataloğu ve Market'te önceden eğitilmiş modeller.

Mozaik AI Vektör Araması GA'dır

21 Mayıs 2024, Saat 2024, Mayıs 2024, Saat 20:00

Mozaik AI Vektör Araması genel kullanıma sunuldu. Bkz. Mozaik AI Vektör Araması.

Databricks Yardımcısı otomatik tamamlama (Genel Önizleme)

20 Mayıs 2024, Saat 20:00

Databricks Yardımcısı otomatik tamamlama, siz not defterlerine, sorgulara ve dosyalara yazarken gerçek zamanlı olarak yapay zeka destekli öneriler sağlar. Etkinleştirmek için Ayarlar>Geliştirici>Deneysel Özellikleri'negidin ve Databricks Yardımcısı otomatik tamamlama özelliğini açın. Ayrıntılar için bkz . Yapay zeka tabanlı otomatik tamamlama.

Temel Model Eğitimi'nde Meta Llama 3 desteği

20 Mayıs 2024, Saat 20:00

Foundation Model Eğitimi artık Meta Llama 3'i destekliyor. Bkz . Temel Model Eğitimine Giriş.

Git klasörü kullanıcı arabiriminde yeni değişiklikler

17 Mayıs 2024, Mayıs 2024, Saat 20:00

Git klasör etkileşimleri için kullanıcı arabiriminde bazı değişiklikler olduğunu fark edebilirsiniz. Aşağıdakileri ekledik:

• Git klasörünü paylaştığınızda, git klasörü oluşturmak için bağlantıyı kopyalamanızı isteyen bir başlıkta yeni bir uyarı görürsünüz. Düğmeye tıkladığınızda, yerel panonuza başka bir kullanıcıya gönderebileceğiniz bir URL kopyalanır. Alıcı kullanıcı bu URL'yi bir tarayıcıya yüklediğinde, kullanıcı aynı uzak Git deposundan kopyalanan kendi Git klasörünü oluşturabileceği çalışma alanına yönlendirilir. Alıcı URL'ye eriştiğinde, kullanıcı arabiriminde Git klasörünüzden alınan değerlerle önceden doldurulmuş bir Git klasörü oluştur iletişim kutusu görür.

  

• Benzer şekilde, başka bir kullanıcı tarafından oluşturulan bir Git klasörünü görüntülediğinizde yeni bir uyarı başlığında Git klasörü oluştur düğmesi görüntülenir. Git klasörü oluştur iletişim kutusundaki önceden doldurulmuş değerlere göre aynı Git deposu için kendi Git klasörünüzü oluşturmak için bu düğmeye tıklayın.

  

Temel Model Eğitimi (Genel Önizleme)

13 Mayıs 2024, Saat 2024, Mayıs 2024, Mayıs 2024, Saat

Databricks artık Temel Model Eğitimini destekliyor. Temel Model Eğitimi ile kendi verilerinizi kullanarak bir temel modeli özelleştirerek uygulamanızın performansını iyileştirebilirsiniz. Temel modelin ince ayarlarını yaparak veya eğitimine devam ederek, modeli sıfırdan eğitmeye kıyasla çok daha az veri, zaman ve işlem kaynağı kullanarak kendi modelinizi eğitebilirsiniz. Eğitim verilerinin, denetim noktalarının ve ince ayarlı modelin tümü Databricks platformunda bulunur ve idare ve üretkenlik araçlarıyla tümleşiktir.

Ayrıntılar için bkz . Temel Model Eğitimine Giriş.

Unity Kataloğu nesneleri için öznitelik etiketi değerleri artık 1000 karakter uzunluğunda olabilir (Genel Önizleme)

8 Mayıs 2024, Mayıs 2024, Saat 20:00

Unity Kataloğu'ndaki öznitelik etiketi değerleri artık en fazla 1000 karakter uzunluğunda olabilir. Etiket anahtarları için karakter sınırı 255 olarak kalır. Bkz . Unity Kataloğu güvenli hale getirilebilir nesnelere etiket uygulama.

Yeni Önizlemeler sayfası

8 Mayıs 2024, Mayıs 2024, Saat 20:00

Yeni Önizlemeler sayfasında Databricks önizlemelerine erişimi etkinleştirin ve yönetin. Bkz. Azure Databricks Önizlemelerini Yönetme.

Mozaik AI Vektör Araması için yeni özellikler

8 Mayıs 2024, Mayıs 2024, Saat 20:00

Yeni özellikler şunlardır:

• IP erişim listeleri artık desteklenmektedir.
• Müşteri Tarafından Yönetilen Anahtarlar (CMK) artık 8 Mayıs 2024 veya sonrasında oluşturulan uç noktalarda desteklenmektedir. CMK için Vektör Arama desteği Genel Önizleme aşamasındadır.
• Geliştirilmiş denetim günlükleri ve maliyet atfı izleme. Bkz. Tanılama günlüğü başvurusu.
• Artık oluşturulan eklemeleri Delta tablosu olarak kaydedebilirsiniz. Bkz. Vektör arama dizini oluşturma.

Bkz. Mozaik AI Vektör Araması.

Kimlik bilgileri geçişi ve Hive meta veri deposu tablo erişim denetimleri kullanım dışı bırakıldı

7 Mayıs 2024, Mayıs 2024, Saat 20:00

Databricks Runtime 15.0'da kimlik bilgisi geçişi ve Hive meta veri deposu tablo erişim denetimleri kullanım dışı bırakılmıştır ve destek gelecek bir DBR sürümünde kaldırılacaktır.

Hesabınızdaki birden çok çalışma alanında veri erişimini yönetmek ve denetlemek için merkezi bir yer sağlayarak verilerinizin güvenliğini ve idaresini basitleştirmek için Unity Kataloğu'na yükseltin. Unity Kataloğu nedir? bölümüne bakın.

Databricks JDBC sürücüsü 2.6.38

6 Mayıs 2024, Mayıs 2024, Saat 20:00

Databricks JDBC sürücüsünün (indirme) 2.6.38 sürümünü yayımladık. Bu sürüm aşağıdaki yeni özellikleri ve geliştirmeleri ekler:

• Sunucu kullanıyorsa SPARK_CLI_SERVICE_PROTOCOL_V8Yerel Parametreli Sorgu desteği. Sorgudaki parametre sayısı sınırı yerel sorgu modundadır 256 .
• Birim desteği kullanarak Unity Catalog veri alımı. Unity Kataloğu'nu kullanarak bulut nesne depolamasına bağlanma bölümünde birimler hakkında daha fazla bilgi Unity Catalog edinin. Bunu kullanmak için olarak 1ayarlayınUseNativeQuery.
• QueryProfile arabirimi eklendi, IHadoopStatement uygulamaların sorguyu query idalmasına izin verir. query id, Databricks REST API'lerini kullanarak sorgunun meta verilerini getirmek için kullanılabilir.
• Sunucu kullanıyorsa meta veriler için zaman uyumsuz işlemler Thrift çağrıları gerçekleştirir SPARK_CLI_SERVICE_PROTOCOL_V9. Bu özelliği kullanmak için özelliğini olarak 1ayarlayınEnableAsyncModeForMetadataOperation.
• JWT onaylama desteği. Bağlayıcı artık istemci kimlik bilgilerini kullanarak JWT onay OAuth'u destekliyor. Bunu yapmak için özelliğini olarak 1ayarlayınUseJWTAssertion.

Bu sürüm aşağıdaki sorunları da çözer:

• Jackson kitaplıkları güncelleştirilir. Bağlayıcı artık Jackson JSON ayrıştırıcısı için şu kitaplıkları kullanır: jackson-annotations 2.16.0 (eski adıyla 2.15.2), jackson-core 2.16.0 (eski adıyla 2.15.2), jackson-databind-2.16.0 (daha önce 2.15.2)
• Bağlayıcı, META-INF dizininde gölgesiz sınıf dosyaları içerir.

Çalışma alanı depolama hesabı GA için güvenlik duvarı desteği

6 Mayıs 2024, Mayıs 2024, Saat 20:00

Yeni bir Azure Databricks çalışma alanı oluşturduğunuzda, çalışma alanı depolama hesabı olarak bilinen yönetilen bir kaynak grubunda bir Azure depolama hesabı oluşturulur. Artık çalışma alanı depolama hesabınıza erişimi yalnızca yetkili kaynaklardan ve ağlardan sınırlamak için güvenlik duvarını etkinleştirebilirsiniz. Bkz . Çalışma alanı depolama hesabınız için güvenlik duvarı desteğini etkinleştirme.

Databricks Runtime 15.2 (Beta)

2 Mayıs 2024, Mayıs 2024

Databricks Runtime 15.2 ve Databricks Runtime 15.2 ML artık Beta sürümü olarak kullanılabilir.

Bkz. Machine Learning için Databricks Runtime 15.2 ve Databricks Runtime 15.2.

Not defterleri artık Spark Connect DataFrame'ler için sütun adlarını algılar ve otomatik olarak tamamlar

1 Mayıs 2024, Mayıs 2024

Databricks not defterleri artık Spark Connect DataFrames'teki sütun adlarını otomatik olarak algılayıp görüntüler ve sütunları seçmek için otomatik tamamlama özelliğini kullanmanıza olanak sağlar.