Aracılığıyla paylaş

Python için Databricks Connect ile ilgili sınırlamalar

  • Makale

Not

Bu makale Databricks Runtime 13.3 LTS ve üzeri için Databricks Connect'i kapsar.

Bu makalede Python için Databricks Connect ile ilgili sınırlamalar listelenir. Databricks Connect popüler IDE'leri, not defteri sunucularını ve özel uygulamaları Azure Databricks kümelerine bağlamanızı sağlar. Bkz. Databricks Connect nedir?. Bu makalenin Scala sürümü için bkz . Scala için Databricks Connect ile ilgili sınırlamalar.

Databricks Runtime 13.3 LTS ve altı için Databricks Connect'te kullanılamaz:

  • Akış foreachBatch
  • 128 MB'tan büyük DataFrame'ler oluşturma
  • 3600 saniyeden uzun sorgular

Yok:

  • Veri kümesi API'si
  • Veri kümesi türüne göre API'ler (ve flatMap()gibireduce())
  • Databricks Yardımcı Programları: credentials, library, notebook workflow, widgets
  • SparkContext
  • RDDs
  • MLflow modeli çıkarımı: pyfunc.spark_udf() API
  • Mozaik jeo-uzamsal
  • CREATE TABLE <table-name> AS SELECT (bunun yerine kullanın spark.sql("SELECT ...").write.saveAsTable("table"))
  • ApplyinPandas() ve Cogroup() paylaşılan kümelerle
  • log4j günlük düzeyini değiştirme SparkContext
  • Dağıtılmış ML eğitimi
  • Yerel geliştirme ortamını uzak kümeyle eşitleme