Lakeflow Spark Deklaratif İşlem Hatları sürüm notları 2026

Aşağıdaki Lakeflow Spark Bildirimli İşlem Hatları özellikleri, iyileştirmeleri ve hata düzeltmeleri 2026'da kullanıma sunuldu.

Uyarı

Lakeflow Spark Bildirimli İşlem Hatları kanal sürümleri sıralı yükseltme işlemini izlediğinden, kanal yükseltmeleri farklı zamanlarda farklı bölgelere dağıtılır. Databricks Runtime sürümleri de dahil olmak üzere sürümünüz, ilk yayın tarihinden bir hafta veya daha sonra güncelleştirilmeyebilir. İşlem hattı için mevcut Databricks Runtime sürümünü bulmak için Çalışma zamanı bilgileri'ne bakın.

Mart 2026

Lakeflow Spark Bildirimli İşlem Hatlarında yapılan bu özellikler ve iyileştirmeler 26 Şubat 2026 ile 31 Mart 2026 tarihleri arasında yayımlandı.

Bu sürüm tarafından kullanılan Databricks Runtime sürümleri

Aşağıdaki sürümler 31 Mart 2026 itibarıyla günceldir.

Kanal:

• GÜNCEL (varsayılan): Databricks Runtime 17.3.8
• ÖNİzLEME: Databricks Runtime 18.1.0

Yeni özellikler ve geliştirmeler

• Sunucusuz işlem hatları artık CPU tabanlı dikey otomatik ölçeklendirmeyi destekliyor. Bu özellik, iş yükü kararlılığını artırmak için küme kaynaklarını gerçek CPU kullanımına göre dinamik olarak ayarlar.
• Artık işlem hattını silerken Unity Kataloğu tablolarını koruyabilir ve işlem hattı kaldırıldıktan sonra bile veri varlıklarınızı koruyabilirsiniz. Bu, veri kaybı riski olmadan işlem hattı yaşam döngülerini yönetme konusunda daha fazla esneklik sağlar.
• Artık akış verisi işlem hatlarını tanımlamak için daha doğrudan ve bildirim temelli bir yol sağlayan yeni akış söz dizimini kullanarak akış tabloları oluşturabilirsiniz. Bu işlem hattı yazmayı basitleştirir ve geçerli veri mühendisliği desenleriyle uyumlu hale getirir.
• İşlem hattı kancaları artık iş tetiklemeli işlem hatları için kullanılabilir. Lakeflow İşleri içinde işlem hattı güncelleştirmeleri öncesinde ve sonrasında özel mantık çalıştırmak için bunları kullanın. İşlem hattı kancaları, düzenlemeli veri işleme için otomasyon özelliklerini genişletir.
• İşlem hatları artık tablo güncelleştirmeleri sırasında satır filtresi ve sütun maskesi yapılandırmalarını koruduğu için Unity Kataloğu güvenlik ilkeleriniz işlem hattı yenilemelerinde olduğu gibi kalır. Bu, şema evrimi sırasında yanlışlıkla güvenlik ilkesinin kaldırılmasını önler.
• CDC değişikliklerini uygulama, artık yeniden tarih ve saat temel oluşturma modunu destekliyor. Bu özellik, eski ve modern takvim sistemleri arasındaki zaman damgası dönüştürmelerini doğru şekilde işler. Bu, değişiklik veri yakalama akışları aracılığıyla geçmiş tarih saat verilerini işlerken veri tutarsızlıklarını önler.
• Artık akış işlem hatlarındaki işlemler içinde foreachBatch SQL deyimlerini kullanarak daha esnek mikro toplu işlem mantığı sağlayabilirsiniz. Bu, özel toplu işleme için Python veya Scala gerektiren önceki sınırlamaları kaldırır.
• İşlem hatları artık alıcı kaydında ileri referansları destekliyor. Aşağı akış tablolarına başvuran veri akışlarını bildirilmeden önce tanımlayabilirsiniz. Bu, karmaşık işlem hattı tanımlarını basitleştirir ve sıralama kısıtlamalarını kaldırır.
• Yalnızca bir kez eklenebilen akışlar artık deneme çalıştırmaları sırasında doğrulanır ve işlem hattı yürütmesi başlamadan önce yapılandırma hatalarını tespit eder. Bu, işlem hattı yazma iş akışında sorunları daha erken tespit ederek geliştirme deneyimini iyileştirir.

Hata düzeltmeleri

Bu sürüm dönemine önemli bir hata düzeltmesi dahil değildi. Tüm değişiklikler yeni özellikler ve geliştirmelerdi.

Şubat 2026

Lakeflow Spark Bildirimli İşlem Hatları'na yönelik bu özellikler ve iyileştirmeler 14 Ocak 2026 ile 25 Şubat 2026 tarihleri arasında yayımlandı.

Bu sürüm tarafından kullanılan Databricks Runtime sürümleri

Aşağıdaki sürümler 25 Şubat 2026 itibarıyla günceldir.

Kanal:

• CURRENT (varsayılan): Databricks Runtime 17.3
• ÖNİzLEME: Databricks Runtime 17.3

Yeni özellikler ve geliştirmeler

• İşlem hatları artık Delta tabloları için tür genişletmeyi destekleyerek, sütun veri türlerinin işlem hattının tamamen sıfırlanmasına gerek kalmadan güvenli bir şekilde genişletilmesine olanak sağlar (örneğin, INT'dan LONG'e, FLOAT'dan DOUBLE'e). Bu, daha önce el ile müdahale gerektiren şema evrimi iş akışlarını etkinleştirir.
• SCD Tür 1 materyalleştirmesini AUTO CDC ile kullanarak, tam değişiklik geçmişini korumadan en son değeri ekleyen daha basit bir CDC deseni sağlayabilirsiniz. Bu, tam geçmiş gerektirmeyen kullanım örnekleri için depolama ek yükünü azaltır.
• İşlem hatları artık başarısız güncelleştirmeleri yeniden denerken mevcut kümeleri yeniden kullanıyor, yeniden deneme gecikme süresini azaltıyor ve yedekli küme başlatma süresini ortadan kaldırarak işlem maliyetlerini düşürüyor.
• Artık tahmine dayalı optimizasyon etkinleştirmesi, son ay içinde yenilendiyse, gerçekleştirilmiş görünümler ve akış tablolarında düzgün bir şekilde görüntüleniyor.
• İşlem hatları artık birden çok akışı birlikte doğrulayarak yürütme başlamadan önce kuru çalıştırma aşamasındaki akışlar arasında yapılandırma çakışmalarını ve bağımlılık sorunlarını yakalar.
• Artık alım işlem hattı güncelleştirmeleri sırasında değiştirilebilir meta veriler korunuyor ve alım akış tablolarında 'ALTER' komutları için tam destek sağlanıyor.
• İşlem hatlarındaki Python hataları artık SQL durum kodlarını taşıyarak hata tanılamalarını iyileştiriyor ve aşağı akış araçlarında daha iyi programlı hata işlemeyi sağlıyor.
• İşlem hatları artık klasik işlem için ARM örneklerini destekliyor.

Hata düzeltmeleri

• Artık ilk güncelleştirme çalıştırmasında, sadece ekleme yapılabilen akış tablolarındaki kimlik sütunu değerleri doğru şekilde oluşturulmaktadır.

Ocak 2026

Lakeflow Spark Bildirimli İşlem Hatlarında yapılan bu özellikler ve iyileştirmeler 14 Kasım 2025 ile 13 Ocak 2026 tarihleri arasında kullanıma sunuldu.

Bu sürüm tarafından kullanılan Databricks Runtime sürümleri

Aşağıdaki sürümler 13 Ocak 2026 itibarıyla günceldir.

Kanal:

• CURRENT (varsayılan): Databricks Runtime 17.3
• ÖNİzLEME: Databricks Runtime 17.3

Yeni özellikler ve geliştirmeler

• Artık veri kalitesi beklentilerini doğrudan Unity Kataloğu tablolarında depolayabilir ve yönetebilir ve veri idaresi çerçevenizle veri kalitesi kurallarını merkezileştirebilirsiniz. Bu, birden çok işlem hattı arasında paylaşılabilen, sürüm denetimli, denetlenebilir kalite kurallarını etkinleştirir.

• 7 günden uzun süre çalışan sürekli işlem hatları artık temel alınan işlem yenilenmesi gerektiğinde ani bir şekilde yeniden başlatmak yerine minimum kapalı kalma süresi ve açık bir güncelleştirme nedeni ()INFRASTRUCTURE_MAINTENANCE ile düzgün bir şekilde yeniden başlatılıyor.

• Ardışık düzenler artık birden fazla güncelleme isteğinin çakışmalar nedeniyle başarısız olmak yerine otomatik olarak sırayla kuyruğa alınıp yürütüldüğü kuyruklu yürütme modunu destekliyor. Bu, sık güncelleştirme tetikleyicileri olan işlem hatları için işlemleri basitleştirir ve el ile yeniden deneme koordinasyonu gereksinimini ortadan kaldırır.

• Artık tek bir değişiklik veri kaynağından birden çok SCD Tür 2 görünümünü gerçekleştirebilir ve aynı verilerin birden çok geçmiş görünümünü oluştururken verimliliği artırabilirsiniz. Bu, her SCD Tür 2 çıkışı için kaynak verileri yeniden işleme gereksinimini ortadan kaldırır.

• İşlem hattı zamanlamaları ve yapılandırma artık Unity Kataloğu tablo özelliklerinden depolanabilir ve okunabilir ve böylece veri idaresi aracılığıyla merkezi ayarlar yönetimi etkinleştirilir. Bu, veri tanımlarınızla birlikte işlem hattı davranışını yönetmenize olanak tanır.

• MANAGE izinler artık Unity Kataloğu'ndaki maddi görünümler ve akış tablolarına otomatik olarak yayılarak işlem hattı çıktılarında izin yönetimini basitleştirir. Bu, el ile izin verilmeden tutarlı erişim denetimi sağlar.

• SCD Tür 2 işlemleri artık yinelenen kayıtları aynı doğal anahtarla otomatik olarak birleştirerek veri tutarlılığını sağlar ve yavaş değişen boyut tablolarınızda yinelenen geçmiş kayıtları önler.

• İşlem hatları artık işlem hattı tanımının parçası olmayan etkin olmayan tabloları otomatik olarak bırakma seçeneğine sahiptir. Bu, temiz veri ambarlarının korunmasına yardımcı olur ve eski tablolardan gelen depolama maliyetlerini azaltır. Bkz. Unity Kataloğu'nu işlem hatlarıyla kullanma.

• İşlem hattı tanımı, yama işlemleri ve run-as kimlik değişiklikleri artık denetim günlüğüne eklenerek uyumluluk ve güvenlik izleme için yapılandırma değişikliklerinin kapsamlı bir şekilde izlenmesini sağlıyor. Bkz. İşlem hattı olay günlüğü.

Hata düzeltmeleri

Bu sürüm dönemine önemli bir hata düzeltmesi dahil değildi. Tüm değişiklikler yeni özellikler ve geliştirmelerdi.