مشاركة عبر

القيود المفروضة على Databricks Connect ل Python

  • مقالة

إشعار

تتناول هذه المقالة Databricks Connect ل Databricks Runtime 13.3 LTS وما فوق.

تسرد هذه المقالة القيود مع Databricks Connect ل Python. يمكنك Databricks Connect من توصيل IDEs الشائعة وخوادم دفاتر الملاحظات والتطبيقات المخصصة إلى مجموعات Azure Databricks. راجع ما هو Databricks Connect؟. للحصول على إصدار Scala من هذه المقالة، راجع القيود مع Databricks Connect ل Scala.

غير متوفر على Databricks Connect ل Databricks Runtime 13.3 LTS وما يلي:

  • تدفق foreachBatch
  • إنشاء DataFrames أكبر من 128 ميغابايت
  • استعلامات طويلة على مدى 3600 ثانية

غير متوفر:

  • واجهة برمجة تطبيقات مجموعة البيانات
  • واجهات برمجة التطبيقات التي كتبتها مجموعة البيانات (مثل reduce() و flatMap())
  • أدوات Databricks المساعدة: credentials، library، ، notebook workflowwidgets
  • SparkContext
  • RDDs
  • استدلال نموذج MLflow: pyfunc.spark_udf() واجهة برمجة التطبيقات
  • الجيوفضائيات الفسيفساء
  • CREATE TABLE <table-name> AS SELECT (بدلا من ذلك، استخدم spark.sql("SELECT ...").write.saveAsTable("table"))
  • ApplyinPandas() ومع Cogroup() المجموعات المشتركة
  • تغيير مستوى سجل log4j من خلال SparkContext
  • تدريب التعلم الآلي الموزع
  • مزامنة بيئة التطوير المحلية مع نظام المجموعة البعيد