مشاركة عبر

القيود المفروضة على الاتصال Databricks ل Scala

  • مقالة

إشعار

تتناول هذه المقالة الاتصال Databricks لوقت تشغيل Databricks 13.3 LTS وما فوق.

تسرد هذه المقالة القيود مع الاتصال Databricks ل Scala. تمكنك الاتصال Databricks من توصيل IDEs الشائعة وخوادم دفاتر الملاحظات والتطبيقات المخصصة إلى مجموعات Azure Databricks. راجع ما هو Databricks الاتصال؟. للحصول على إصدار Python من هذه المقالة، راجع القيود مع الاتصال Databricks ل Python.

غير متوفر على الاتصال Databricks لوقت تشغيل Databricks 13.3 LTS وما يلي:

  • تدفق foreachBatch
  • إنشاء DataFrames أكبر من 128 ميغابايت
  • استعلامات طويلة على مدى 3600 ثانية
  • UDFs العددية على المجموعات التي تستخدم وضع الوصول إلى نظام مجموعة مستخدم واحد

غير متوفر:

  • أدوات Databricks المساعدة: credentials، library، ، notebook workflowwidgets
  • SparkContext
  • RDDs
  • استدلال نموذج MLflow: pyfunc.spark_udf() واجهة برمجة التطبيقات
  • الجيوفضائيات الفسيفساء
  • CREATE TABLE <table-name> AS SELECT (بدلا من ذلك، استخدم spark.sql("SELECT ...").write.saveAsTable("table"))
  • تغيير مستوى سجل log4j من خلال SparkContext
  • تدريب التعلم الآلي الموزع
  • مزامنة بيئة التطوير المحلية مع نظام المجموعة البعيد