Aracılığıyla paylaş


Ocak 2019

Bu özellikler ve Azure Databricks platformu iyileştirmeleri Ocak 2019'da yayımlandı.

Not

Sürümler hazırlanır. Azure Databricks hesabınız ilk yayın tarihinden sonraki bir haftaya kadar güncelleştirilmeyebilir.

Yaklaşan değişiklik: Küme oluşturduğunuzda varsayılan olacak Python 3

29 Ocak 2019, Saat 2019, Şubat 2019, Saat 20:00

Databricks platformu sürüm 2.91 Şubat ortasında yayımlandığında, yeni kümeler için varsayılan Python sürümü Python 2'den Python 3'e geçer. Mevcut kümeler python sürümlerini elbette değiştirmez. Ancak yeni kümeler oluştururken Python 2 varsayılanını alma alışkanlığınız varsa Python sürüm seçiminize dikkat etmeniz gerekir.

Varsayılan Python sürümü

Makine Öğrenmesi için Databricks Runtime 5.2 (Beta) sürümü

24 Ocak 2019, Saat 2019, Şubat 2019, Saat 20:00

Databricks Runtime 5.2 ML, Databricks Runtime 5.2 (desteklenmeyen) üzerine kurulmuştur. TensorFlow, PyTorch, Keras ve XGBoost gibi birçok popüler makine öğrenmesi kitaplığı içerir ve Horovod kullanarak dağıtılmış TensorFlow eğitimi sağlar. Databricks Runtime ML 5.1'den bu yana kitaplık güncelleştirmelerine ek olarak, Databricks Runtime 5.2 ML aşağıdaki yeni özellikleri içerir:

  • GraphFrames artık Databricks'in performans iyileştirmeleri ile Pregel API'sini (Python) destekliyor.
  • HorovodRunner ekler:
    • Bir GPU kümesinde eğitim işlemleri, çok GPU'lu örnek türlerinin desteğini basitleştirmek için çalışan düğümleri yerine GPU'lara eşlenir. Bu yerleşik destek, özel kod olmadan çok GPU'lu bir makinedeki tüm GPU'lara dağıtmanıza olanak tanır.
    • HorovodRunner.run() şimdi ilk eğitim işleminden döndürülen değeri döndürür.

Databricks Runtime 5.2 ML için sürüm notlarının tamamına bakın. d

Databricks Runtime 5.2 sürümü

24 Ocak 2019, Saat 2019, Şubat 2019, Saat 20:00

Databricks Runtime 5.2 artık kullanılabilir. Databricks Runtime 5.2 apache Spark 2.4.0, yeni Delta Lake ve Yapılandırılmış Akış özellikleri ve yükseltmeleri ile yükseltilen Python, R, Java ve Scala kitaplıklarını içerir. Ayrıntılar için bkz . Databricks Runtime 5.2 (desteklenmeyen).

Küme yapılandırması JSON görünümü

15-22 Ocak 2019

Küme yapılandırma sayfası artık bir JSON görünümünü destekliyor:

Küme yapılandırması JSON

JSON görünümü salt okunurdur. Ancak JSON'u kopyalayıp Kümeler API'siyle küme oluşturup güncelleştirmek için kullanabilirsiniz.

Küme kullanıcı arabirimi

15-22 Ocak 2019: Sürüm 2.89

Küme oluşturma sayfası, yeni Gelişmiş Seçenekler iki durumlu düğmesi de dahil olmak üzere kullanım kolaylığı için temizlendi ve yeniden düzenlendi.

Küme yapılandırması

Kendi Azure sanal ağınıza Azure Databricks dağıtma (sanal ağ ekleme)

10 Ocak 2019, Saat 2019, Şubat 2019, Mart 2019, Şubat 20

Önemli

Bu özellik Genel Önizlemededir.

Azure Databricks'in varsayılan dağıtımı Azure'da tam olarak yönetilen bir hizmettir: Tüm kümelerin ilişkilendirileceği sanal ağ (VNet) dahil olmak üzere tüm işlem düzlemi kaynakları kilitli bir kaynak grubuna dağıtılır. Ancak ağ özelleştirmesi gerekiyorsa, artık Azure Databricks'i kendi sanal ağınıza (bazen sanal ağ ekleme olarak da adlandırılır) dağıtarak şunları yapabilirsiniz:

  • Hizmet uç noktalarını kullanarak Azure Databricks'i diğer Azure hizmetlerine (Azure Depolama gibi) daha güvenli bir şekilde Bağlan.
  • Kullanıcı tanımlı yollardan yararlanarak Azure Databricks ile kullanılmak üzere şirket içi veri kaynaklarına Bağlan.
  • Azure Databricks'i bir ağ sanal gerecine Bağlan. Tüm giden trafiği inceleyip izin verme ve reddetme kurallarına göre eylemler gerçekleştirin.
  • Azure Databricks'i özel DNS kullanacak şekilde yapılandırın.
  • Çıkış trafiği kısıtlamalarını belirtmek için ağ güvenlik grubu (NSG) kurallarını yapılandırın.
  • Azure Databricks kümelerini mevcut sanal ağınıza dağıtın.

Azure Databricks'i kendi sanal ağınıza dağıtmak, esnek CIDR aralıklarından (sanal ağ için /16-/24 arasında ve alt ağlar için /18-/26 arasında herhangi bir yerde) yararlanmanıza da olanak tanır.

Azure portalı kullanıcı arabirimini kullanarak yapılandırma hızlı ve kolaydır: Bir çalışma alanı oluşturduğunuzda Sanal Ağ Azure Databricks çalışma alanını dağıt'ı seçmeniz, sanal ağınızı seçmeniz ve iki alt ağ için CIDR aralıkları sağlamanız gerekir. Azure Databricks, sizin sağladığınız CIDR aralıklarını kullanarak sanal ağı iki yeni alt ağ ve ağ güvenlik grubuyla güncelleştirir, gelen ve giden alt ağ trafiğine erişim sağlar ve çalışma alanını güncelleştirilmiş sanal ağa dağıtır.

Çalışma alanı dağıtımına sanal ağ ekleme

Sanal ağı sanal ağ ekleme için kendiniz yapılandırmayı tercih ediyorsanız (örneğin, mevcut alt ağları kullanmak, mevcut ağ güvenlik gruplarını kullanmak veya kendi güvenlik kurallarınızı oluşturmak istiyorsanız), portal kullanıcı arabirimi yerine Azure-Databricks tarafından sağlanan ARM şablonlarını kullanabilirsiniz.

Not

Bu özellik daha önce yalnızca kayıt tarafından kullanılabilirdi. Önizleme sürümünde kalır ancak artık tamamen self servistir.

Ayrıntılar için bkz. Azure sanal ağınızda Azure Databricks'i dağıtma (sanal ağ ekleme) ve Azure Databricks çalışma alanınızı şirket içi ağınıza Bağlan.

Kitaplık kullanıcı arabirimi

2-9 Ocak 2019: Sürüm 2.88

İlk olarak Kasım 2018'de yayımlanan ve kısa süre sonra geri alınan kitaplık kullanıcı arabirimi iyileştirmeleri yeniden yayımlandı. Bu güncelleştirmeler Azure Databricks kümelerinizin kitaplıklarını karşıya yüklemeyi, yüklemeyi ve yönetmeyi kolaylaştırır.

Azure Databricks kullanıcı arabirimi artık hem çalışma alanı kitaplıklarını hem de küme yüklü kitaplıkları destekliyor. Çalışma Alanı'nda bir çalışma alanı kitaplığı vardır ve bir veya daha fazla kümeye yüklenebilir. Küme yüklü kitaplık, yalnızca yüklü olduğu küme bağlamında bulunan bir kitaplıktır. Ek olarak:

  • Artık nesne depolama alanına yüklenen bir dosyadan kitaplık oluşturabilirsiniz.
  • Artık kitaplık ayrıntıları sayfasından ve kümenin Kitaplıklar sekmesinden kitaplıkları yükleyebilir ve kaldırabilirsiniz.
  • API kullanılarak yüklenen kitaplıklar artık bir kümenin Kitaplıklar sekmesinde görüntülenir.

Ayrıntılar için bkz . Kitaplıklar.

Küme Olayları

2-9 Ocak 2019: Sürüm 2.88

Spark sürücü durumunu yansıtmak için yeni küme olayları eklendi. Ayrıntılar için bkz . Kümeler API'si.

Azure DevOps Services kullanarak Not Defteri Sürüm Denetimi

2-9 Ocak 2019: Sürüm 2.88

Azure Databricks artık not defterlerinizin sürümünü denetlemek için Azure DevOps Services'i (eski adı VSTS) kullanmayı kolaylaştırır. Kimlik doğrulaması otomatiktir, kurulum basittir ve not defteri düzeltmelerinizi GitHub tümleştirmemizde yaptığınız gibi yönetirsiniz.

Ayrıntılar için bkz . Not defterleri için Git sürüm denetimi (eski).