Aracılığıyla paylaş


Mayıs 2018

Yayınlar aşamalı olarak sunulur. Azure Databricks hesabınız ilk yayın tarihinden bir hafta sonraya kadar güncelleştirilmeyebilir.

Genel Veri Koruma Yönetmeliği (GDPR)

24 Mayıs 2018: Sürüm 2.72

25 Mayıs 2018'de yürürlüğe giren Avrupa Birliği Genel Veri Koruma Yönetmeliği'nin (GDPR) gereksinimlerini karşılamak için Azure Databricks platformunda hem hesap hem de kullanıcı düzeyinde veri saklama konusunda daha fazla denetim sağlamak üzere bir dizi değişiklik yaptık. Güncelleştirmeler şunlardır:

  • Küme silme: Kullanıcı arabirimini veya Kümeler API'sini kullanarak küme yapılandırmasını kalıcı olarak silin. Bkz. Bir hesaplama silme.
  • Çalışma alanı temizleme (sürüm 2.71'de yayımlandı): Tüm not defterleri, tek tek not defteri hücreleri, tek tek not defteri açıklamaları ve not defteri düzeltme geçmişi gibi çalışma alanı nesnelerini kalıcı olarak silin. Bkz Çalışma alanı depolama alanını temizleme.
  • Not defteri revizyon geçmişini silme:
    • Tanımlı bir zaman çerçevesi için çalışma alanında bulunan tüm not defterlerinin düzeltme geçmişini kalıcı olarak silin. Bkz Çalışma alanı depolama alanını temizleme.
    • Tek bir not defteri düzeltmesini veya not defterinin düzeltme geçmişinin tamamını kalıcı olarak silin. Not defterlerindesürüm geçmişine bakın.

Azure Databricks hizmetinizi silme veya Azure hesabınızı iptal etme hakkında bilgi için bkz . Aboneliğinizi yönetme.

Azure Databricks kullanıcıları Microsoft Entra ID kiracısına bağlı olmalıdır.

24 Mayıs 2018: Sürüm 2.72

Kullanıcılar artık Azure Databricks'te yalnızca Azure Databricks çalışma alanının Microsoft Entra Id (eski adıYla Azure Active Directory) kiracısına aitse oturum açabilir. Microsoft Entra Id kiracısına ait olmayan kullanıcılarınız varsa, bunları standart veya konuk kullanıcı olarak ekleyebilirsiniz.

HorovodEstimator

29 Mayıs 2018: Sürüm 2.72

Uber'in Horovod çerçevesinden yararlanan MLlib stili bir tahmin aracı API'si olan HorovodEstimator için belgeler ve not defteri eklendi. HorovodEstimator, Spark DataFrame'lerdeki derin sinir ağlarının dağıtılmış, çok GPUlu eğitimini kolaylaştırarak EtL'nin Spark'ta TensorFlow'da model eğitimiyle tümleştirilmesini kolaylaştırır.

MLeap ML Modelini Dışarı Aktarma

24 Mayıs 2018: Sürüm 2.72

Azure Databricks'te MLeap kullanımıyla ilgili belgeler ve not defterleri eklendi. MLeap, Apache Spark ve scikit-learn'den taşınabilir biçim ve yürütme altyapısına makine öğrenmesi işlem hatlarını dağıtmanıza olanak tanır. Bkz. MLeap ML modeli dışarı aktarma.

Daha da fazla GPU küme türü

24 Mayıs 2018: Sürüm 2.72

Sürüm 2.71'de eklediğimiz Azure NC örnek türlerine (NC12 ve NC24) ek olarak, artık Azure Databricks kümelerinde NCv3 örnek türü serisini (NC6s_v3, NC12s_v3 ve NC24s_v3) destekliyoruz. NC ve NCv3 örnekleri, hesaplama açısından zor olan ve üstün performans gerektiren görüntü işleme, metin analizi ve diğer makine öğrenmesi ve derin öğrenme görevlerini desteklemek için GPU'lar sağlar.

Bkz. GPU özellikli işlem.

Not Defteri hücreleri: gizle ve göster

24 Mayıs 2018: Sürüm 2.72

Yeni göstergeler ve mesajlar, Not Defteri hücre içeriğinin gizlendikten sonra gösterilmesini kolaylaştırır. Bkz. Hücre içeriğini gizleme ve gösterme.

22 Mayıs 2018

Belge site aramamızı daha iyi bir arama aracıyla değiştirdik. Önümüzdeki haftalarda daha da fazla arama geliştirmesi göreceksiniz.

Not

Yeni arama dağıtıldıktan kısa süre sonra denerseniz arama bozuk görünebilir. Yeni arama deneyimini görmek için tarayıcı önbelleğinizi temizlemeniz yeter.

Makine Öğrenmesi için Databricks Runtime 4.1 ML (Beta)

17 Mayıs 2018

Databricks Runtime ML (Beta), makine öğrenmesi ve veri bilimi için kullanıma hazır bir ortam sağlar. TensorFlow, Keras ve XGBoost gibi birden çok popüler kitaplık içerir.

Databricks Runtime ML, dağıtılmış TensorFlow eğitimi için gereken tüm kitaplıklarla bir Databricks kümesi başlatmanıza olanak tanır. Kümeye dahil edilen kitaplıkların uyumluluğunu sağlar (örneğin TensorFlow ile CUDA / cuDNN arasında) ve başlatma betiklerini kullanmaya kıyasla küme başlatma süresini önemli ölçüde azaltır.

Not

Databricks Runtime 4.1 ML yalnızca Premium SKU'da kullanılabilir.

Databricks Runtime 4.1 ML (EoS)'un sürüm notlarının tamamına bakın.

Databricks Delta

17 Mayıs 2018

Databricks Delta artık Özel Önizleme'de Azure Databricks kullanıcılarının kullanımına sunulmuştur. Hesap yöneticinize başvurun veya adresinden https://databricks.com/product/databricks-deltakaydolun. Bu sürüm, yaklaşan GA sürümünün öncesinde bir aday sürümü temsil eder.

Daha fazla bilgi için bkz. Databricks Runtime 4.1 (EoS) ve Azure Databricks'te Delta Lake nedir?.

Görüntü veri türleri için Display() desteği

17 Mayıs 2018

Databricks Runtime 4.1'de display() artık görüntü veri türlerini içeren sütunları zengin HTML olarak işler.

Bkz . Databricks not defterlerindeki görselleştirmeler ve SQL düzenleyicisi.

GPU küme türleri

15 Mayıs 2018: Sürüm 2.71

Azure Databricks kümelerinde Azure NC örnek türleri (NC12 ve NC24) desteğini duyurmaktan mutluluk duyuyoruz. NC örnekleri, görüntü işlemeyi, metin analizini ve hesaplama açısından zor olan ve üstün performans gerektiren diğer makine öğrenmesi ve derin öğrenme görevlerini desteklemek için GPU'lar sağlar.

Azure Databricks ayrıca GPU'lar için yapılandırılmış önceden yüklenmiş NVIDIA sürücüleri ve kitaplıklarının yanı sıra çeşitli popüler derin öğrenme kitaplıklarını kullanmaya başlamaya yönelik malzemeler de sağlar.

Ayrıca bkz:

Gizli yönetimi GA

15 Mayıs 2018: Sürüm 2.71

Özel önizleme aşamasında olan gizli yönetimi artık genel kullanıma sunulmuştur. Dış veri kaynaklarında kimlik doğrulaması için ihtiyacınız olan kimlik bilgilerini yönetmek için güçlü araçlar sağlar. Kimlik bilgilerinizi doğrudan bir not defterine yazmak yerine, Databricks giz yönetimini kullanarak kimlik bilgilerinizi not defterlerinde ve işlerde depolayın ve bunlara referans verin. Gizli bilgileri yönetmek için Secrets CLI (eski)'yi kullanarak Secrets API'ye erişebilirsiniz.

Not

Gizli dizi yönetimi için Databricks Runtime 4.0 veya üzeri ve Databricks CLI 0.7.1 veya üzeri gerekir.

Bkz. Gizli yönetim.

Gizli Diziler API'si uç nokta ve CLI komutu değişiklikleri

15 Mayıs 2018: Sürüm 2.71

Gizlilik API uç noktalarına aşağıdaki değişiklikler yapıldı:

  • Tüm uç noktalar için kök yol, /secret'dan /secrets'e değiştirildi.
  • Gizli uç noktası için, /secret/secrets daraltılarak /secrets/ haline getirildi.
  • write yöntemi olarak putdeğiştirildi.

Databricks CLI 0.7.1, bu güncelleştirilmiş API uç noktalarıyla uyumlu hale getirmek için Sır komutlarına yönelik güncellemeler içerir.

Bkz Gizli API ve Gizli yönetimi.

Küme sabitleme

15 Mayıs 2018: Sürüm 2.71

Artık kümeyi Kümeler listesine sabitleyebilirsiniz. Bu, 30 gün önce sonlandırılan kümelerin yapılandırmasını korumanızı sağlar.

Pin kümesi

Ayrıca, Kümeler sayfasında artık 30 gün içinde sonlandırılan (7 günden daha fazla) tüm kümeler görüntülenir.

Bkz. Bir bilgisayarı sabitle.

Kümenin otomatik başlatılması

15 Mayıs 2018: Sürüm 2.71

Bu sürümden önce, Terminated kümelerinde çalıştırılmak üzere zamanlanan işler başarısız oldu. Azure Databricks sürüm 2.71 ve üzerinde oluşturulan kümeler için, bir JDBC/ODBC arabiriminden veya mevcut sonlandırılan kümeye atanmış bir iş çalıştırmasından gelen komutlar bu kümeyi otomatik olarak yeniden başlatır. Bkz. JDBC connect ve Configure and edit Lakeflow Jobs.

Otomatik Başlangıç, zamanlanmış işler için kümeleri yeniden başlatmak için el ile müdahaleye gerek kalmadan kümeleri otomatik sonlandırmak üzere yapılandırmanıza olanak tanır. Ayrıca, sonlandırılmış kümeleri belirli bir zamanda yeniden başlatan bir iş planlayarak küme başlatma işlemini planlayabilirsiniz.

Küme erişim denetimi zorunlu kılındı ve iş sahibi izinleri her zamanki gibi denetlendi.

Çalışma alanı temizleme

15 Mayıs 2018: Sürüm 2.71

Avrupa Birliği Genel Veri Koruma Yönetmeliği'ne (GDPR) uymaya yönelik devam eden çabalarımızın bir parçası olarak, tüm not defterleri, tek tek not defteri hücreleri, tek tek not defteri yorumları ve not defteri düzeltme geçmişi gibi çalışma alanı nesnelerini temizleme olanağı ekledik. Önümüzdeki haftalarda GDPR uyumluluğunu desteklemek için daha fazla işlevsellik ve belge yayımlayacağız.

Bkz Çalışma alanı depolama alanını temizleme.

Databricks CLI 0.7.1

10 Mayıs 2018

Databricks CLI 0.7.1, güncelleştirilmiş API uç noktalarıyla uyumlu hale getirmek için Gizli Dizi komutlarına yönelik güncelleştirmeler içerir.

Bkz Legacy Databricks CLI'si ve Gizli yönetimi.