Ograniczenia dotyczące programu Databricks Connect dla języka Scala

Notatka

W tym artykule opisano usługę Databricks Connect dla środowiska Databricks Runtime 13.3 LTS lub nowszego.

W tym artykule wymieniono ograniczenia dotyczące programu Databricks Connect dla języka Scala. Usługa Databricks Connect umożliwia łączenie popularnych środowisk IDE, serwerów notesów i aplikacji niestandardowych z zasobami obliczeniowymi Azure Databricks. Zobacz Databricks Connect. Aby uzyskać wersję tego artykułu w języku Python, zobacz Ograniczenia dotyczące Databricks Connect dla Pythona.

Ważny

W zależności od używanej wersji środowiska Scala, Java, środowiska Databricks Runtime i programu Databricks Connect mogą istnieć wymagania dotyczące wersji niektórych funkcji. Zobacz wymagania .

Dostępność funkcji

Niedostępne w ramach Databricks Connect dla wersji Databricks Runtime 13.3 LTS i starszych.

• Przesyłanie strumieniowe foreachBatch
• Tworzenie ramek danych większych niż 128 MB
• Długie zapytania w ciągu 3600 sekund
• Funkcje skalarne zdefiniowane przez użytkownika w zasobach obliczeniowych używających dedykowanego trybu dostępu (dawniej trybu pojedynczego użytkownika)

Niedostępne:

• Narzędzia usługi Databricks: credentials, library, notebook workflow, widgets
• Kontekst platformy Spark
• RDDs
• CREATE TABLE <table-name> AS SELECT (zamiast tego użyj spark.sql("SELECT ...").write.saveAsTable("table"))
• Zmienianie poziomu dziennika log4j za pomocą SparkContext
• Trenowanie rozproszonego uczenia maszynowego
• Synchronizowanie lokalnego środowiska deweloperskiego ze zdalnym zasobem obliczeniowym