Dela via

Begränsningar med Databricks Anslut för Scala

  • Artikel

Kommentar

Den här artikeln beskriver Databricks Anslut för Databricks Runtime 13.3 LTS och senare.

Den här artikeln innehåller begränsningar för Databricks Anslut för Scala. Med Databricks Anslut kan du ansluta populära ID:er, notebook-servrar och anpassade program till Azure Databricks-kluster. Se Vad är Databricks Anslut?. Python-versionen av den här artikeln finns i Begränsningar med Databricks Anslut för Python.

Inte tillgängligt på Databricks Anslut för Databricks Runtime 13.3 LTS och nedan:

  • Streaming foreachBatch
  • Skapa dataramar som är större än 128 MB
  • Långa frågor över 3 600 sekunder
  • Skalära UDF:er på kluster som använder åtkomstläge för kluster med en användare

Inte tillgängligt:

  • Databricks Utilities: credentials, library, notebook workflow, widgets
  • SparkContext
  • RDDs
  • MLflow-modellinferens: pyfunc.spark_udf() API
  • Mosaik geospatial
  • CREATE TABLE <table-name> AS SELECT (använd spark.sql("SELECT ...").write.saveAsTable("table")i stället )
  • Ändra log4j-loggnivån via SparkContext
  • Distribuerad ML-träning
  • Synkronisera den lokala utvecklingsmiljön med fjärrklustret