Limitaciones con Databricks Connect para Scala

Nota:

Este artículo describe Databricks Connect para Databricks Runtime 13.3 LTS y versiones posteriores.

En este artículo se enumeran las limitaciones de Databricks Connect para Scala. Databricks Connect permite conectar entornos de desarrollo integrados (IDEs), servidores de cuadernos, y aplicaciones personalizadas a los recursos de proceso de Azure Databricks. Consulte ¿Qué es Databricks Connect? Para obtener la versión de Python de este artículo, consulte Limitaciones de Databricks Connect para Python.

Importante

Según la versión de Scala, Java, Databricks Runtime y Databricks Connect que use, puede haber requisitos de versión para algunas características. Vea Requisitos.

Disponibilidad de funcionalidades

No disponible en Databricks Connect para Databricks Runtime 13.3 LTS:

• Streaming de foreachBatch
• Creación de DataFrames de más de 128 MB
• Consultas largas de más de 3600 segundos
• UDF escalares en recursos de cálculo que utilizan el modo de acceso dedicado (anteriormente conocido como usuario único)

No disponible:

• Utilidades de Databricks: credentials, library, notebook workflow, widgets
• Contexto de Spark
• RDD
• CREATE TABLE <table-name> AS SELECT (en su lugar, use spark.sql("SELECT ...").write.saveAsTable("table"))
• Cambio del nivel de registro de log4j a través de SparkContext
• Entrenamiento distribuido de aprendizaje automático
• Sincronización del entorno de desarrollo local con el recurso de proceso remoto