Scala için Databricks Connect ile ilgili sınırlamalar

Not

Bu makale Databricks Runtime 13.3 LTS ve üzeri için Databricks Connect'i kapsar.

Bu makalede Scala için Databricks Connect ile ilgili sınırlamalar listelenir. Databricks Connect popüler IDE'leri, not defteri sunucularını ve özel uygulamaları Azure Databricks işlem kaynaklarına bağlamanızı sağlar. Bkz. Databricks Connect. Bu makalenin Python sürümünü görmek için bkz. Python için Databricks Connect ile İlgili Kısıtlamalar.

Önemli

Scala, Java, Databricks Runtime ve Databricks Connect'in kullandığınız sürümüne bağlı olarak, bazı özellikler için sürüm gereksinimleri olabilir. bkz. Gereksinimleri.

Özellik kullanılabilirliği

Databricks Runtime 13.3 LTS ve altı için Databricks Connect'te kullanılamaz:

  • Akış foreachBatch
  • 128 MB'tan büyük, çözümlenmemiş bir mantıksal planla DataFrame'ler oluşturma. Bu sınır, verilerin kendisi için değil plan boyutu için geçerlidir.
  • 3600 saniyeden uzun sorgular
  • Ayrılmış erişim modunu (eski adıyla tek kullanıcı) kullanan işlem kaynaklarındaki Skaler UDF'ler

Yok:

  • Databricks Yardımcı Programları: credentials, library, notebook workflow, widgets
  • Spark Bağlamı
  • RDD'ler
  • CREATE TABLE <table-name> AS SELECT (bunun yerine spark.sql("SELECT ...").write.saveAsTable("table")kullanın)
  • log4j log seviyesini SparkContext ile değiştirme
  • Dağıtılmış ML eğitimi
  • Yerel geliştirme ortamını uzak işlem kaynağıyla eşitleme