مقارنة أوضاع الكشف عن ملف التحميل التلقائي

يدعم التحميل التلقائي وضعين للكشف عن الملفات الجديدة: سرد الدليل وإخطار الملف. يمكنك تبديل أوضاع اكتشاف الملفات عبر عمليات إعادة تشغيل الدفق والحصول على ضمانات معالجة البيانات مرة واحدة بالضبط.

وضع سرد الدليل

في وضع سرد الدليل، يعرف Auto Loader الملفات الجديدة عن طريق سرد دليل الإدخال. يسمح لك وضع سرد الدليل ببدء تدفقات التحميل التلقائي بسرعة دون أي تكوينات أذونات بخلاف الوصول إلى بياناتك على التخزين السحابي.

في Databricks Runtime 9.1 وما فوق، يمكن للتحميل التلقائي الكشف تلقائيا عما إذا كانت الملفات تصل بترتيب معجمي إلى التخزين السحابي وتقليل كمية استدعاءات واجهة برمجة التطبيقات المطلوبة للكشف عن الملفات الجديدة بشكل كبير. راجع ما هو وضع سرد دليل التحميل التلقائي؟ لمزيد من التفاصيل.

وضع إعلام الملف

يستفيد وضع إعلام الملف من خدمات إعلامات الملفات وقوائم الانتظار في حساب البنية الأساسية السحابية. يمكن للمحمل التلقائي تلقائيا إعداد خدمة إعلام وخدمة قائمة انتظار تشترك في أحداث الملفات من دليل الإدخال.

يعد وضع إعلام الملفات أكثر أداء وقابلية للتطوير لدلائل الإدخال الكبيرة أو حجم كبير من الملفات ولكنه يتطلب أذونات سحابية إضافية لإعدادها. لمزيد من المعلومات، راجع ما هو وضع إعلام ملف التحميل التلقائي؟.

التخزين السحابي المدعوم من قبل الأوضاع

يتم سرد توفر هذه الأوضاع أدناه.

إذا قمت بالترحيل من موقع خارجي أو تحميل DBFS إلى وحدة تخزين كتالوج Unity، يستمر التحميل التلقائي في توفير ضمانات مرة واحدة بالضبط.

تخزين على السحابة	قائمة الدليل	إعلامات الملفات
AWS S3	جميع الإصدارات	جميع الإصدارات
ADLS Gen2	جميع الإصدارات	جميع الإصدارات
GCS	جميع الإصدارات	Databricks Runtime 9.1 وما فوق
Azure Blob Storage	جميع الإصدارات	جميع الإصدارات
ADLS Gen1	جميع الإصدارات	غير مدعوم
DBFS	جميع الإصدارات	لنقاط التحميل فقط
وحدة تخزين كتالوج Unity	Databricks Runtime 13.3 LTS وما فوق	غير مدعوم