Scala için Databricks Bağlan sınırlamaları
Not
Bu makalede Databricks Runtime 13.3 LTS ve üzeri için Databricks Bağlan yer alır.
Bu makalede Scala için Databricks Bağlan sınırlamaları listelenir. Databricks Bağlan popüler IDE'leri, not defteri sunucularını ve özel uygulamaları Azure Databricks kümelerine bağlamanızı sağlar. Bkz. Databricks Bağlan nedir?. Bu makalenin Python sürümü için bkz. Python için Databricks Bağlan sınırlamaları.
Databricks Runtime 13.3 LTS ve altı için Databricks Bağlan'da kullanılamaz:
- Akış
foreachBatch
- 128 MB'tan büyük DataFrame'ler oluşturma
- 3600 saniyeden uzun sorgular
- Tek kullanıcı kümesi erişim modunu kullanan kümelerde Skaler UDF'ler
Kullanılamaz:
- Databricks Yardımcı Programları:
credentials
,library
,notebook workflow
,widgets
SparkContext
RDDs
- MLflow modeli çıkarımı:
pyfunc.spark_udf()
API - Mozaik jeo-uzamsal
CREATE TABLE <table-name> AS SELECT
(bunun yerine kullanınspark.sql("SELECT ...").write.saveAsTable("table")
)- log4j günlük düzeyini değiştirme
SparkContext
- Dağıtılmış ML eğitimi
- Yerel geliştirme ortamını uzak kümeyle eşitleme