Databricks Runtime 15.3
توفر ملاحظات الإصدار التالية معلومات حول Databricks Runtime 15.3، مدعوما ب Apache Spark 3.5.0.
أصدرت Databricks هذا الإصدار في يونيو 2024.
تلميح
للاطلاع على ملاحظات الإصدار لإصدارات Databricks Runtime التي وصلت إلى نهاية الدعم (EoS)، راجع ملاحظات إصدار وقت تشغيل Databricks لنهاية الدعم. تم إيقاف إصدارات وقت تشغيل EoS Databricks وقد لا يتم تحديثها.
ميزات وتحسينات جديدة
تدعم مصادر بيانات PySpark الآن قراءة الدفق والكتابة
تدعم مصادر بيانات PySpark، التي تمكن القراءة من مصادر البيانات المخصصة والكتابة إلى متلقي البيانات المخصصة، الآن قراءة الدفق والكتابة. راجع مصادر البيانات المخصصة ل PySpark.
تعطيل تعيين العمود باستخدام ميزة الإفلات
يمكنك الآن استخدام DROP FEATURE لتعطيل تعيين العمود على جداول Delta والرجوع إلى إصدار أخفض من بروتوكول الجدول. راجع تعطيل تعيين العمود.
بناء جملة النوع المتغير والدالات في المعاينة العامة
يتوفر الآن دعم Apache Spark الأصلي للعمل مع البيانات شبه المنظمة كنوع VARIANT في Spark DataFrames وSQL. راجع بيانات متغير الاستعلام.
دعم نوع المتغير ل Delta Lake في المعاينة العامة
يمكنك الآن استخدام VARIANT لتخزين البيانات شبه المنظمة في جداول مدعومة من Delta Lake. راجع دعم المتغير في Delta Lake.
دعم أوضاع مختلفة لتطور المخطط في طرق العرض
يتيح لك CREATE VIEW وALTER VIEW الآن تعيين وضع ربط مخطط، ما يعزز كيفية معالجة طرق العرض لتغييرات المخطط في الكائنات الأساسية. تمكن هذه الميزة طرق العرض من التسامح مع تغييرات المخطط في الكائنات الأساسية أو التكيف معها. وهو يعالج التغييرات في مخطط الاستعلام الناتجة عن التعديلات على تعريفات الكائنات.
دعم الأساليب observe() المضافة إلى عميل Spark Connect Scala
يدعم عميل Spark Connect Scala الآن الأساليب Dataset.observe() . يسمح لك دعم هذه الأساليب بتعريف المقاييس لملاحظتها على كائن Dataset باستخدام الأساليب ds.observe("name", metrics...) أو ds.observe(observationObject, metrics...) .
زمن انتقال محسن لإعادة تشغيل الدفق للمحمل التلقائي
يتضمن هذا الإصدار تغييرا يحسن زمن انتقال إعادة تشغيل الدفق للمحمل التلقائي. يتم تنفيذ هذا التحسين عن طريق جعل تحميل الحالة بواسطة مخزن حالة RocksDB غير متزامن. مع هذا التغيير، يجب أن تشاهد تحسنا في أوقات البدء للتدفقات ذات الحالات الكبيرة، على سبيل المثال، التدفقات التي تحتوي على عدد كبير من الملفات التي تم استيعابها بالفعل.
إرجاع DataFrame ك pyarrow.Table
لدعم كتابة DataFrame مباشرة إلى كائن سهم pyarrow.Table Apache، يتضمن هذا الإصدار الدالة DataFrame.toArrow() . لمعرفة المزيد حول استخدام السهم في PySpark، راجع سهم Apache في PySpark.
تحسين الأداء لبعض وظائف النافذة
يتضمن هذا الإصدار تغييرا يحسن أداء بعض وظائف نافذة Spark، وتحديدا الوظائف التي لا تتضمن عبارة ORDER BY أو معلمة window_frame . في هذه الحالات، يمكن للنظام إعادة كتابة الاستعلام لتشغيله باستخدام دالة تجميعية. يسمح هذا التغيير بتشغيل الاستعلام بشكل أسرع باستخدام التجميع الجزئي وتجنب الحمل الزائد لتشغيل وظائف النافذة. تتحكم معلمة spark.databricks.optimizer.replaceWindowsWithAggregates.enabled تكوين Spark في هذا التحسين ويتم تعيينها إلى true بشكل افتراضي. لإيقاف تشغيل هذا التحسين، قم بتعيين spark.databricks.optimizer.replaceWindowsWithAggregates.enabled إلى false.
دعم الوظيفة المضافة try_mod
يضيف هذا الإصدار دعما لدالة PySpark try_mod() . تدعم هذه الدالة الحساب المتوافق مع ANSI SQL للعدد الصحيح المتبقي من قسمة قيمتين رقميتين. إذا كانت وسيطة القاسم 0، ترجع الدالة try_mod() قيمة خالية بدلا من طرح استثناء. يمكنك استخدام الدالة try_mod() بدلا من mod أو %، والتي تطرح استثناء إذا كانت وسيطة القاسم 0 وتم تمكين ANSI SQL.
دعم معلمة نطاق اختيارية في list_secrets()
يسمح لك هذا الإصدار بتحديد نتائج دالة الجدول list_secrets() إلى نطاق معين.
إصلاح الأخطاء
WriteIntoDeltaCommand يتم الآن عرض المقاييس في واجهة مستخدم Spark بشكل صحيح
يتضمن هذا الإصدار تصحيحا للمقاييس المعروضة في علامة تبويب SQL لواجهة مستخدم Spark للعقدة Execute WriteIntoDeltaCommand . في السابق، كانت المقاييس المعروضة لهذه العقدة صفرا.
groupby() تجاهلت الدالة في واجهة برمجة تطبيقات Pandas الوسيطة as_index=False
يتضمن هذا الإصدار إصلاحا لقضية تتعلق بالدالة groupby() في واجهة برمجة تطبيقات Pandas على Spark. قبل هذا الإصلاح، groupby() لم تتضمن إعادة تسمية الأعمدة التجميعية والوسيطة as_index=False مفاتيح المجموعة في DataFrame الناتج.
خطأ تحليل مع دالات نافذة متعددة تشير إلى الإخراج من الدالات الأخرى
يعمل هذا الإصدار على إصلاح مشكلة قد تحدث عندما يحتوي استعلام Spark على وظائف نافذة متتالية متعددة، حيث تشير دالات النافذة إلى الإخراج من دالات النافذة الأخرى. في حالات نادرة، قد يسقط النظام أحد المراجع، مما يؤدي إلى أخطاء في تقييم الاستعلام. يعرض هذا الإصلاح هذه المراجع لضمان تقييم الاستعلام. يتم التحكم في هذا التغيير بواسطة معلمة spark.databricks.optimizer.collapseWindows.projectReferencesتكوين Spark ، والتي يتم تعيينها إلى true افتراضيا. لإيقاف تشغيل هذا التغيير، قم بتعيين spark.databricks.optimizer.collapseWindows.projectReferences إلى false.
ترقيات المكتبة
- مكتبات Python التي تمت ترقيتها:
- filelock من 3.13.1 إلى 3.13.4
- مكتبات R التي تمت ترقيتها:
- مكتبات Java التي تمت ترقيتها:
- org.rocksdb.rocksdbjni من 8.3.2 إلى 8.11.4
Apache Spark
يتضمن Databricks Runtime 15.3 Apache Spark 3.5.0. يتضمن هذا الإصدار جميع إصلاحات Spark وتحسيناته المضمنة في Databricks Runtime 15.2، بالإضافة إلى إصلاحات الأخطاء الإضافية والتحسينات التالية التي تم إجراؤها على Spark:
- [SPARK-48211] [DBRRM-1041][15.x][15.3] Revert "[SC-165552][SQL] DB2: Read SMALLINT as Sho...
- [SPARK-47904] [DBRRM-1040][سلوك-33][SC-163409] إرجاع SPARK-47904: الاحتفاظ بالحالة في مخطط Avro عند استخدام enableStableIdentifiersForUnionType
- [SPARK-48288] [SC-166141] إضافة نوع بيانات المصدر لتعبير تحويل الموصل
- [SPARK-48175] [SC-166341][SQL][PYTHON] تخزين معلومات الترتيب في بيانات التعريف وليس في النوع ل SER/DE
- [SPARK-48172] [SC-166078][SQL] إصلاح مشكلات الهروب في JDBCDialects
- [SPARK-48186] [SC-165544][SQL] إضافة دعم ل AbstractMapType
- [SPARK-48031] [SC-166523] طرق عرض الجد القديمة لربط المخطط
- [SPARK-48369] [SC-166566][SQL][PYTHON][CONNECT] إضافة دالة
timestamp_add - [SPARK-48330] [SC-166458][SS][PYTHON] إصلاح مشكلة مهلة مصدر بيانات تدفق python للفاصل الزمني للمشغل الكبير
- [SPARK-48369] إرجاع "[SC-166494][SQL][PYTHON][CONNECT] Add function
timestamp_add" - [SPARK-48336] [SC-166495][PS][CONNECT] تنفيذ
ps.sqlفي Spark Connect - [SPARK-48369] [SC-166494][SQL][PYTHON][CONNECT] إضافة دالة
timestamp_add - [SPARK-47354] [SC-165546][SQL] إضافة دعم الترتيب للتعبيرات المتغيرة
- [SPARK-48161] [SC-165325][SQL] إصلاح العلاقات العامة المعاد إرجاعها - إضافة دعم الترتيب لتعبيرات JSON
- [SPARK-48031] [SC-166391] Decompose viewSchemaMode config, add SHOW CREATE TABLE support
- [SPARK-48268] [SC-166217][CORE] إضافة تكوين ل SparkContext.setCheckpointDir
- [SPARK-48312] [ES-1076198][SQL] تحسين أداء Alias.removeNonInheritableMetadata
- [SPARK-48294] [SC-166205][SQL] معالجة الأحرف الصغيرة في nestedTypeMissingElementTypeError
- [SPARK-47254] [SC-158847][SQL] تعيين أسماء لفئات الخطأ _LEGACY_ERROR_TEMP_325[1-9]
- [SPARK-47255] [SC-158749][SQL] تعيين أسماء لفئات الخطأ _LEGACY_ERROR_TEMP_323[6-7] _LEGACY_ERROR_TEMP_324[7-9]
- [SPARK-48310] [SC-166239][PYTHON][CONNECT] يجب أن ترجع الخصائص المخزنة مؤقتا نسخا
- [SPARK-48308] [SC-166152][الذاكرة الأساسية] توحيد الحصول على مخطط البيانات بدون أعمدة القسم في FileSourceStrategy
- [SPARK-48301] [SC-166143][SQL] إعادة التسمية
CREATE_FUNC_WITH_IF_NOT_EXISTS_AND_REPLACEإلىCREATE_ROUTINE_WITH_IF_NOT_EXISTS_AND_REPLACE - [SPARK-48287] [SC-166139][PS][CONNECT] تطبيق الأسلوب المضمن
timestamp_diff - [SPARK-47607] [SC-166129] إضافة وثائق لإطار عمل التسجيل المنظم
- [SPARK-48297] [SC-166136][SQL] إصلاح عبارة تحويل الانحدار باستخدام char/varchar
- [SPARK-47045] [SC-156808][SQL] استبدل
IllegalArgumentExceptionبSparkIllegalArgumentExceptionفيsql/api - [SPARK-46991] [SC-156399][SQL] استبدل
IllegalArgumentExceptionبSparkIllegalArgumentExceptionفيcatalyst - [SPARK-48031] [SC-165805][SQL] دعم تطور مخطط العرض
- [SPARK-48276] [SC-166116][PYTHON][CONNECT] إضافة الأسلوب المفقود
__repr__لSQLExpression - [SPARK-48278] [SC-166071][PYTHON][CONNECT] تحسين تمثيل سلسلة
Cast - [SPARK-48272] [SC-166069][SQL][PYTHON][CONNECT] إضافة دالة
timestamp_diff - [SPARK-47798] [SC-162492][SQL] إثراء رسالة الخطأ لفشل قراءة القيم العشرية
- [SPARK-47158] [SC-158078][SQL] تعيين الاسم المناسب و
sqlStateإلى_LEGACY_ERROR_TEMP_(2134|2231) - [SPARK-48218] [SC-166082][CORE] TransportClientFactory.createClient قد يتسبب NPE في FetchFailedException
- [SPARK-48277] [SC-166066] تحسين رسالة الخطأ ل ErrorClassesJsonReader.getErrorMessage
- [SPARK-47545] [SC-165444][CONNECT] دعم مجموعة
observeالبيانات لعميل Scala - [SPARK-48954] [SC-171672][SQL] إضافة
try_modدالة - [SPARK-43258] [SC-158151][SQL] تعيين أسماء للخطأ _LEGACY_ERROR_TEMP_202[3,5]
- [SPARK-48267] [SC-165903][SS] اختبار الانحدار e2e مع SPARK-47305
- [SPARK-48263] [SC-165925] دعم دالة الترتيب للسلاسل غير UTF8_BINARY
- [SPARK-48260] [SC-165883][SQL] تعطيل تنسيق ملتزم الإخراج في اختبار واحد من ParquetIOSuite
- [SPARK-47834] [SC-165645][SQL][CONNECT] وضع علامة على الدالات المهملة باستخدام
@deprecatedفيSQLImplicits - [SPARK-48011] [SC-164061][الذاكرة الأساسية] تخزين اسم LogKey كقيمة لتجنب إنشاء مثيلات سلسلة جديدة
- [SPARK-48074] [SC-164647][الذاكرة الأساسية] تحسين قابلية قراءة تسجيلات JSON
- [SPARK-44953] [SC-165866][CORE] تسجيل تحذير عند تمكين تتبع التبديل العشوائي جنبا إلى جنب مع آلية أخرى مدعومة من DA
- [SPARK-48266] [SC-165897][CONNECT] نقل كائن
org.apache.spark.sql.connect.dslالحزمة إلى دليل الاختبار - [SPARK-47847] [SC-165651][CORE] إهمال
spark.network.remoteReadNioBufferConversion - [SPARK-48171] [SC-165178][CORE] تنظيف استخدام الدالات الإنشائية المهملة ل
o.rocksdb.Logger - [SPARK-48235] [SC-165669][SQL] قم بتمرير الصلة مباشرة بدلا من جميع الوسيطات للحصول علىBroadcastBuildSide و getShuffleHashJoinBuildSide
- [SPARK-48224] [SC-165648][SQL] عدم السماح لمفاتيح الخريطة بأن تكون من نوع المتغير
- [SPARK-48248] [SC-165791][PYTHON] إصلاح المصفوفة المتداخلة لمراعاة التكوين القديم ل inferArrayTypeFromFirstElement
- [SPARK-47409] [SC-165568][SQL] إضافة دعم الترتيب لنوع StringTrim من الدالات/التعبيرات (UTF8_BINARY وLCASE)
- [SPARK-48143] [ES-1095638][SQL] استخدام استثناءات خفيفة الوزن لتدفق التحكم بين UnivocityParser و FailureSafeParser
- [SPARK-48146] [SC-165668][SQL] إصلاح الدالة التجميعية في With expression child assertion
- [SPARK-48161] إرجاع "[SC-165325][SQL] إضافة دعم الترتيب لتعبيرات JSON"
- [SPARK-47963] [CORE] جعل نظام Spark البنائي الخارجي يمكنه استخدام آليات التسجيل المنظمة
- [SPARK-48180] [SC-165632][SQL] تحسين الخطأ عندما ينسى استدعاء UDTF مع TABLE arg الأقواس حول أقسام/ترتيب متعددة بواسطة exprs
- [SPARK-48002] [SC-164132][PYTHON][SS] إضافة اختبار للمقاييس المرصودة في PySpark StreamingQueryListener
- [SPARK-47421] [SC-165548][SQL] إضافة دعم الترتيب لتعبيرات URL
- [SPARK-48161] [SC-165325][SQL] إضافة دعم الترتيب لتعبيرات JSON
- [SPARK-47359] [SC-164328][SQL] دعم الدالة TRANSLATE للعمل مع السلاسل المجمعة
- [SPARK-47365] [SC-165643][PYTHON] إضافة أسلوب DataFrame إلى PySpark
- [SPARK-48228] [SC-165649][PYTHON][CONNECT] تنفيذ التحقق من صحة الدالة المفقودة في ApplyInXXX
- [SPARK-47986] [SC-165549][CONNECT][PYTHON] يتعذر إنشاء جلسة عمل جديدة عند إغلاق الجلسة الافتراضية بواسطة الخادم
- [SPARK-47963] العودة "[CORE] جعل النظام البيئي ل Spark الخارجي يمكنه استخدام آليات التسجيل المنظمة "
- [SPARK-47963] [CORE] جعل نظام Spark البنائي الخارجي يمكنه استخدام آليات التسجيل المنظمة
- [SPARK-48208] [SC-165547][SS] تخطي توفير مقاييس استخدام الذاكرة من RocksDB إذا تم تمكين استخدام الذاكرة المحدودة
- [SPARK-47566] [SC-164314][SQL] دعم الدالة SubstringIndex للعمل مع السلاسل المجمعة
- [SPARK-47589] [SC-162127][SQL]Hive-Thriftserver: ترحيل logError مع المتغيرات إلى إطار عمل تسجيل منظم
- [SPARK-48205] [SC-165501][PYTHON] إزالة المعدل الخاص [sql] لمصادر بيانات Python
- [SPARK-48173] [SC-165181][SQL] يجب أن يرى CheckAnalysis خطة الاستعلام بأكملها
- [SPARK-48197] [SC-165520][SQL] تجنب خطأ التأكيد لدالة lambda غير صالحة
- [SPARK-47318] [SC-162573][CORE] إضافة جولة HKDF إلى اشتقاق مفتاح AuthEngine لاتباع ممارسات KEX القياسية
- [SPARK-48184] [SC-165335][PYTHON][CONNECT] تعيين القيمة الأولية دائما في
Dataframe.sampleجانب العميل - [SPARK-48128] [SC-165004][SQL] بالنسبة ل BitwiseCount / تعبير bit_count، قم بإصلاح خطأ بناء جملة codegen لإدخالات النوع المنطقي
- [SPARK-48147] [SC-165144][SS][CONNECT] إزالة المستمعين من جانب العميل عند حذف جلسة Spark المحلية
- [SPARK-48045] [SC-165299][PYTHON] يتجاهل Pandas API groupby مع multi-agg-relabel as_index=False
- [SPARK-48191] [SC-165323][SQL] دعم UTF-32 لترميز السلسلة وفك ترميزها
- [SPARK-45352] [SC-137627][SQL] إزالة أقسام النافذة القابلة للطي
- [SPARK-47297] [SC-165179][SQL] إضافة دعم الترتيب لتعبيرات التنسيق
- [SPARK-47267] [SC-165170][SQL] إضافة دعم الترتيب لتعبيرات التجزئة
- [SPARK-47965] [SC-163822][CORE] تجنب أو Null في TypedConfigBuilder و OptionalConfigEntry
- [SPARK-48166] [SQL] تجنب استخدام BadRecordException كخطأ يواجه المستخدم في VariantExpressionEvalUtils
- [SPARK-48105] [SC-165132][SS] إصلاح حالة السباق بين إلغاء تحميل مخزن الحالة والتقاط اللقطات
- [SPARK-47922] [SC-163997][SQL] تنفيذ تعبير try_parse_json
- [SPARK-47719] [SC-161909][SQL] تغيير spark.sql.legacy.timeParse...
- [SPARK-48035] [SC-165136][SQL] إصلاح try_add/try_multiply الدلالي يساوي الإضافة/الضرب
- [SPARK-48107] [SC-164878][PYTHON] استبعاد الاختبارات من توزيع Python
- [SPARK-46894] [SC-164447][PYTHON] نقل شروط خطأ PySpark إلى ملف JSON مستقل
- [SPARK-47583] [SC-163825][CORE] SQL core: ترحيل logError مع المتغيرات إلى إطار عمل تسجيل منظم
- [SPARK-48064] إرجاع "[SC-164697][SQL] تحديث رسائل الخطأ لفئات الخطأ ذات الصلة الروتينية"
- [SPARK-48048] [SC-164846][CONNECT][SS] تمت إضافة دعم وحدة الإصغاء من جانب العميل ل Scala
- [SPARK-48064] [SC-164697][SQL] تحديث رسائل الخطأ لفئات الخطأ ذات الصلة الروتينية
- [SPARK-48056] [SC-164715][CONNECT][PYTHON] إعادة تنفيذ الخطة في حالة ظهور خطأ SESSION_NOT_FOUND ولم يتم تلقي استجابة جزئية
- [SPARK-48124] [SC-165009][CORE] تعطيل التسجيل المنظم ل Connect-Repl بشكل افتراضي
- [SPARK-47922] إرجاع "[SC-163997][SQL] تنفيذ تعبير try_parse_json"
- [SPARK-48065] [SC-164817][SQL] SPJ: allowJoinKeysSubsetOfPartitionKeys صارم جدا
- [SPARK-48114] [SC-164956][CORE] regex لقالب التحويل البرمجي المسبق لتجنب العمل غير الضروري
- [SPARK-48067] [SC-164773][SQL] إصلاح الأعمدة الافتراضية للمتغير
- [SPARK-47922] [SC-163997][SQL] تنفيذ تعبير try_parse_json
- [SPARK-48075] [SC-164709] [SS] إضافة التحقق من النوع لوظائف PySpark avro
- [SPARK-47793] [SC-164324][SS][PYTHON] تنفيذ SimpleDataSourceStreamReader لمصدر بيانات تدفق python
- [SPARK-48081] [SC-164719] إصلاح ClassCastException في NTile.checkInputDataTypes() عندما تكون الوسيطة غير قابلة للطي أو من نوع خاطئ
- [SPARK-48102] [SC-164853][SS] تعقب مدة الحصول على مقاييس المصدر/المتلقي أثناء الإبلاغ عن تقدم استعلام الدفق
- [SPARK-47671] [SC-164854][الذاكرة الأساسية] تمكين التسجيل المنظم في log4j2.properties.template وتحديث المستندات
- [SPARK-47904] [SC-163409][SQL] الاحتفاظ بالحالة في مخطط Avro عند استخدام enableStableIdentifiersForUnionType
- [SPARK-48058] [SC-164695][SPARK-43727][PYTHON][CONNECT]
UserDefinedFunction.returnTypeتحليل سلسلة DDL - [SPARK-46922] [SC-156102][CORE][SQL] عدم التفاف الأخطاء التي تواجه المستخدم في وقت التشغيل
- [SPARK-48047] [SC-164576][SQL] تقليل ضغط الذاكرة لعلامات TreeNode الفارغة
- [SPARK-47934] [SC-164648] [CORE] تأكد من وجود شرطة مائلة زائدة في
HistoryServerعمليات إعادة توجيه عنوان URL - [SPARK-47921] [SC-163826][CONNECT] إصلاح إنشاء ExecuteJobTag في ExecuteHolder
- [SPARK-48014] [SC-164150][SQL] تغيير خطأ makeFromJava في EvaluatePython إلى خطأ يواجه المستخدم
- [SPARK-47903] [SC-163424][PYTHON] إضافة دعم للأنوع العددية المتبقية في مكتبة PySpark Variant
- [SPARK-48068] [SC-164579][PYTHON]
mypyيجب أن يكون لها--python-executableمعلمة - [SPARK-47846] [SC-163074][SQL] إضافة دعم لنوع المتغير في تعبير from_json
- [SPARK-48050] [SC-164322][SS] تسجيل الخطة المنطقية عند بدء الاستعلام
- [SPARK-47810] [SC-163076][SQL] استبدال التعبير المكافئ ب <=> في شرط الصلة
- [SPARK-47741] [SC-164290] تمت إضافة معالجة تجاوز المكدس في المحلل
- [SPARK-48053] [SC-164309][PYTHON][CONNECT] يجب أن يحذر SparkSession.createDataFrame من الخيارات غير المدعومة
- [SPARK-47939] [SC-164171][SQL] تنفيذ قاعدة محلل جديدة لنقل ParameterizedQuery داخل ExplainCommand و DescribeQueryCommand
- [SPARK-48063] [SC-164432][CORE] تمكين
spark.stage.ignoreDecommissionFetchFailureبشكل افتراضي - [SPARK-48016] [SC-164280][SQL] إصلاح خطأ في الدالة try_divide عند استخدام المنازل العشرية
- [SPARK-48033] [SC-164291][SQL] إصلاح
RuntimeReplaceableالتعبيرات المستخدمة في الأعمدة الافتراضية - [SPARK-48010] [SC-164051][SQL][ES-1109148] تجنب المكالمات المتكررة إلى conf.resolver في resolveExpression
- [SPARK-48003] [SC-164323][SQL] إضافة دعم الترتيب لتجميع مخطط hll
- [SPARK-47994] [SC-164175][SQL] إصلاح الخطأ باستخدام عامل تصفية العمود CASE WHEN push down في SQLServer
- [SPARK-47984] [SC-163837][التعلم الآلي][SQL] تغيير
MetricsAggregate/V2Aggregator#serialize/deserializeإلى استدعاءSparkSerDeUtils#serialize/deserialize - [SPARK-48042] [SC-164202][SQL] استخدام تنسيق الطابع الزمني مع المنطقة الزمنية على مستوى الفئة بدلا من عمل نسخ على مستوى الأسلوب
- [SPARK-47596] [SPARK-47600][SPARK-47604][SPARK-47804] عمليات ترحيل السجل المنظمة
- [SPARK-47594] [SPARK-47590][SPARK-47588][SPARK-47584] عمليات ترحيل السجل المنظمة
- [SPARK-47567] [SC-164172][SQL] دعم الدالة LOCATE للعمل مع السلاسل المجمعة
- [SPARK-47764] [SC-163820][CORE][SQL] تنظيف تبعيات التبديل العشوائي استنادا إلى ShuffleCleanupMode
- [SPARK-48039] [SC-164174][PYTHON][CONNECT] تحديث فئة الخطأ ل
group.apply - [SPARK-47414] [SC-163831][SQL] دعم الترتيب بالأحرف الصغيرة لتعبيرات regexp
- [SPARK-47418] [SC-163818][SQL] إضافة تطبيقات يدوية الصنع لاحتواء unicode-aware بالأحرف الصغيرة على، وبدءWith و endsWith وتحسين UTF8_BINARY_LCASE
- [SPARK-47580] [SC-163834][SQL] محفز SQL: إزالة المتغيرات غير المسماة في سجلات الأخطاء
- [SPARK-47351] [SC-164008][SQL] إضافة دعم الترتيب ل StringToMap وقناع تعبيرات السلسلة
- [SPARK-47292] [SC-164151][SS] safeMapToJValue يجب مراعاة القيم الخالية التي تم كتابتها
- [SPARK-47476] [SC-164014][SQL] دعم الدالة REPLACE للعمل مع السلاسل المجمعة
- [SPARK-47408] [SC-164104][SQL] إصلاح التعبيرات الرياضية التي تستخدم StringType
- [SPARK-47350] [SC-164006][SQL] إضافة دعم الترتيب لتعبير سلسلة SplitPart
- [SPARK-47692] [SC-163819][SQL] إصلاح معنى StringType الافتراضي في التحويل الضمني
- [SPARK-47094] [SC-161957][SQL] SPJ: إعادة توازن عدد المستودعات ديناميكيا عندما لا تكون متساوية
- [SPARK-48001] [SC-164000][CORE] إزالة غير مستخدم من
private implicit def arrayToArrayWritableSparkContext - [SPARK-47986] [SC-163999][CONNECT][PYTHON] يتعذر إنشاء جلسة عمل جديدة عند إغلاق الجلسة الافتراضية بواسطة الخادم
- [SPARK-48019] [SC-164121] إصلاح السلوك غير الصحيح في ColumnVector/Columnararray باستخدام القاموس والقيم الخالية
- [SPARK-47743] [SPARK-47592][SPARK-47589][SPARK-47581][SPARK-47586][SPARK-47593][SPARK-47595][SPARK-47587][SPARK-47603] عمليات ترحيل السجل المنظمة
- [SPARK-47999] [SC-163998][SS] تحسين التسجيل حول إنشاء اللقطة وإضافة/إزالة الإدخالات من خريطة ذاكرة التخزين المؤقت للحالة في موفر مخزن الحالة المدعوم من HDFS
- [SPARK-47417] [SC-162872][SQL] دعم الترتيب: Ascii وChr وBas64 و UnBase64 و Decode و StringDecode و Encode و ToBinary و FormatNumber و Sentences
- [SPARK-47712] [SC-161871][CONNECT] السماح للمكونات الإضافية للاتصال بإنشاء مجموعات البيانات ومعالجتها
- [SPARK-47411] [SC-163351][SQL] دعم وظائف StringInstr و FindInSet للعمل مع السلاسل المجمعة
- [SPARK-47360] [SC-163014][SQL] دعم الترتيب: التراكب، تنسيق السلسلة، الطول، BitLength، OctetLength، SoundEx، Luhncheck
- [SPARK-47413] [SC-163323][SQL] - إضافة دعم إلى السلسلة الفرعية/اليسار/اليمين للترجيمات
- [SPARK-47983] [SC-163835][SQL] تخفيض spark.sql.pyspark.legacy.inferArrayTypeFromFirstElement.enabled إلى داخلي
- [SPARK-47964] [SC-163816][PYTHON][CONNECT] إخفاء SQLContext وHiveContext في pyspark-connect
- [SPARK-47985] [SC-163841][PYTHON] تبسيط الوظائف باستخدام
lit - [SPARK-47633] [SC-163453][SQL] قم بتضمين إخراج
LateralJoin#allAttributesالخطة من الجانب الأيمن للحصول على ترجمة برمجية أكثر اتساقا - [SPARK-47909] إرجاع "[PYTHON][CONNECT] فئة DataFrame الأصل f...
- [SPARK-47767] [SC-163096][SQL] إظهار قيمة الإزاحة في TakeOrderedAndProjectExec
- [SPARK-47822] [SC-162968][SQL] منع تعبيرات التجزئة من تجزئة نوع البيانات المتغير
- [SPARK-47490] [SC-160494][SS] إصلاح استخدام منشئ مسجل RocksDB لتجنب تحذير الإهمال
- [SPARK-47417] إرجاع "[SC-162872][SQL] دعم الترتيب: Ascii, Chr, Base64, UnBase64, Decode, StringDecode, Encode, ToBinary, FormatNumber, Sentences"
- [SPARK-47352] [SC-163460][SQL] إصلاح الوعي بترتيب أعلى وسفلي و InitCap
- [SPARK-47909] [PYTHON][CONNECT] فئة DataFrame الأصل ل Spark Connect وSpark Classic
- [SPARK-47417] [SC-162872][SQL] دعم الترتيب: Ascii وChr وBas64 و UnBase64 و Decode و StringDecode و Encode و ToBinary و FormatNumber و Sentences
دعم برنامج تشغيل Databricks ODBC/JDBC
يدعم Databricks برامج تشغيل ODBC/JDBC التي تم إصدارها في العامين الماضيين. يرجى تنزيل برامج التشغيل التي تم إصدارها مؤخرا والترقية (تنزيل ODBC، تنزيل JDBC).
بيئة النظام
- نظام التشغيل: Ubuntu 22.04.4 LTS
- Java: Zulu 8.78.0.19-CA-linux64
- Scala: 2.12.18
- Python: 3.11.0
- R: 4.3.2
- Delta Lake: 3.2.0
مكتبات Python المثبتة
| مكتبة | إصدار | مكتبة | إصدار | مكتبة | إصدار |
|---|---|---|---|---|---|
| الرموز المميزة | 2.0.5 | astunparse | 1.6.3 | azure-core | 1.30.1 |
| azure-storage-blob | 12.19.1 | azure-storage-file-datalake | 12.14.0 | تثبيت خلفي | 0.2.0 |
| black | 23.3.0 | وامض | 1.4 | boto3 | 1.34.39 |
| روبوت الدردشة | 1.34.39 | قوالب ذاكرة التخزين المؤقت | 5.3.3 | شهادة | 2023.7.22 |
| cffi | 1.15.1 | تجزئة | 4.0.0 | charset-normalizer | 2.0.4 |
| نقر | 8.0.4 | cloudpickle | 2.2.1 | الاتصالات | 0.1.2 |
| مخطط إحاطة | 1.0.5 | التشفير | 41.0.3 | دورة | 0.11.0 |
| Cython | 0.29.32 | databricks-sdk | 0.20.0 | dbus-python | 1.2.18 |
| تصحيح الأخطاء | 1.6.7 | ديكور | 5.1.1 | استياء | 0.3.8 |
| نقاط الإدخال | 0.4 | تنفيذ | 0.8.3 | نظرة عامة على الواجهات | 1.1.1 |
| قفل الملف | 3.13.4 | أصوام الخطوط | 4.25.0 | gitdb | 4.0.11 |
| GitPython | 3.1.43 | google-api-core | 2.18.0 | google-auth | 2.29.0 |
| google-cloud-core | 2.4.1 | google-cloud-storage | 2.16.0 | google-crc32c | 1.5.0 |
| google-resumable-media | 2.7.0 | googleapis-common-protos | 1.63.0 | grpcio | 1.60.0 |
| حالة grpcio | 1.60.0 | httplib2 | 0.20.2 | idna | 3.4 |
| بيانات تعريف importlib | 6.0.0 | ipyflow-core | 0.0.198 | ipykernel | 6.25.1 |
| ipython | 8.15.0 | ipython-genutils | 0.2.0 | عناوين ipywidgets | 7.7.2 |
| isodate | 0.6.1 | jedi | 0.18.1 | سيارة جيب | 0.7.1 |
| مسار jmespath | 0.10.0 | joblib | 1.2.0 | jupyter_client | 7.4.9 |
| jupyter_core | 5.3.0 | أداة إنشاء المفاتيح | 23.5.0 | kiwisolver | 1.4.4 |
| launchpadlib | 1.10.16 | lazr.restfulclient | 0.14.4 | lazr.uri | 1.0.6 |
| matplotlib | 3.7.2 | matplotlib-inline | 0.1.6 | mlflow-skinny | 2.11.3 |
| المزيد من التكرارات | 8.10.0 | mypy-extensions | 0.4.3 | nest-asyncio | 1.5.6 |
| numpy | 1.23.5 | أواتهليب | 3.2.0 | التغليف | 23.2 |
| pandas | 1.5.3 | parso | 0.8.3 | pathspec | 0.10.3 |
| بتسي | 0.5.3 | pexpect | 4.8.0 | pickleshare | 0.7.5 |
| مخدة | 9.4.0 | pip | 23.2.1 | المنصات | 3.10.0 |
| بشكل مخطط | 5.9.0 | مجموعة أدوات المطالبة | 3.0.36 | proto-plus | 1.23.0 |
| protobuf | 4.24.1 | psutil | 5.9.0 | psycopg2 | 2.9.3 |
| عملية ptyprocess | 0.7.0 | تقييم خالص | 0.2.2 | pyarrow | 14.0.1 |
| pyasn1 | 0.4.8 | وحدات pyasn1 | 0.2.8 | pyccolo | 0.0.52 |
| pycparser | 2.21 | pydantic | 1.10.6 | Pygments | 2.15.1 |
| PyGObject | 3.42.1 | PyJWT | 2.3.0 | pyodbc | 4.0.38 |
| pyparsing | 3.0.9 | python-dateutil | 2.8.2 | python-lsp-jsonrpc | 1.1.1 |
| pytz | 2022.7 | PyYAML | 6.0 | pyzmq | 23.2.0 |
| الطلبات | 2.31.0 | rsa | 4.9 | s3transfer | 0.10.1 |
| scikit-learn | 1.3.0 | شفرة | 1.11.1 | بحر محمول | 0.12.2 |
| مخزن البيانات السرية | 3.3.1 | أدوات الإعداد | 68.0.0 | ستة | 1.16.0 |
| smmap | 5.0.1 | sqlparse | 0.5.0 | ssh-import-id | 5.11 |
| بيانات المكدس | 0.2.0 | نماذج الإحصائيات | 0.14.0 | مثابره | 8.2.2 |
| threadpoolctl | 2.2.0 | tokenize-rt | 4.2.1 | اعصار | 6.3.2 |
| سمات السمات | 5.7.1 | typing_extensions | 4.10.0 | tzdata | 2022.1 |
| ujson | 5.4.0 | ترقيات غير مراقبة | 0.1 | urllib3 | 1.26.16 |
| virtualenv | 20.24.2 | wadllib | 1.3.6 | wcwidth | 0.2.5 |
| دولاب | 0.38.4 | zipp | 3.11.0 |
مكتبات R المثبتة
يتم تثبيت مكتبات R من لقطة Posit مدير الحِزَم CRAN.
| مكتبة | إصدار | مكتبة | إصدار | مكتبة | إصدار |
|---|---|---|---|---|---|
| سهم | 14.0.0.2 | askpass | 1.2.0 | assertthat | 0.2.1 |
| backports | 1.4.1 | الأساس | 4.3.2 | base64enc | 0.1-3 |
| bigD | 0.2.0 | بت | 4.0.5 | bit64 | 4.0.5 |
| bitops | 1.0-7 | كائن ثنائي كبير الحجم | 1.2.4 | boot | 1.3-28 |
| المشروب | 1.0-10 | بريو | 1.1.4 | broom | 1.0.5 |
| bslib | 0.6.1 | ذاكرة التخزين المؤقت | 1.0.8 | callr | 3.7.3 |
| علامة إقحام | 6.0-94 | cellranger | 1.1.0 | كرون | 2.3-61 |
| فئة | 7.3-22 | cli | 3.6.2 | clipr | 0.8.0 |
| ساعة | 0.7.0 | نظام مجموعة | 2.1.4 | codetools | 0.2-19 |
| colorspace | 2.1-0 | العلامة الشائعة | 1.9.1 | compiler | 4.3.2 |
| config | 0.3.2 | تتعارض | 1.2.0 | cpp11 | 0.4.7 |
| crayon | 1.5.2 | بيانات الاعتماد | 2.0.1 | curl | 5.2.0 |
| data.table | 1.15.0 | مجموعات البيانات | 4.3.2 | DBI | 1.2.1 |
| dbplyr | 2.4.0 | تنازلي | 1.4.3 | devtools | 2.4.5 |
| الرسم التخطيطي | 1.6.5 | diffobj | 0.3.5 | digest | 0.6.34 |
| إضاءة هابطة | 0.4.3 | dplyr | 1.1.4 | dtplyr | 1.3.1 |
| e1071 | 1.7-14 | علامة الحذف | 0.3.2 | التقييم | 0.23 |
| fansi | 1.0.6 | مسافة بعيدة | 2.1.1 | خريطة سريعة | 1.1.1 |
| fontawesome | 0.5.2 | forcats | 1.0.0 | Foreach | 1.5.2 |
| foreign | 0.8-85 | زور | 0.2.0 | fs | 1.6.3 |
| future | 1.33.1 | future.apply | 1.11.1 | تغرغر | 1.5.2 |
| generics | 0.1.3 | غيرت | 2.0.1 | ggplot2 | 3.4.4 |
| غ | 1.4.0 | git2r | 0.33.0 | صور gitcred | 0.1.2 |
| glmnet | 4.1-8 | عموميات | 0.16.2 | glue | 1.7.0 |
| googledrive | 2.1.1 | googlesheets4 | 1.1.1 | gower | 1.0.1 |
| graphics | 4.3.2 | grDevices | 4.3.2 | grid | 4.3.2 |
| gridExtra | 2.3 | gsubfn | 0.7 | gt | 0.10.1 |
| gtable | 0.3.4 | هاردات | 1.3.1 | haven | 2.5.4 |
| highr | 0.10 | hms | 1.1.3 | htmltools | 0.5.7 |
| htmlwidgets | 1.6.4 | httpuv | 1.6.14 | httr | 1.4.7 |
| httr2 | 1.0.0 | ids | 1.0.1 | ini | 0.3.1 |
| ipred | 0.9-14 | isoband | 0.2.7 | iterators | 1.0.14 |
| jquerylib | 0.1.4 | jsonlite | 1.8.8 | اجتهادي | 0.1.0 |
| KernSmooth | 2.23-21 | knitr | 1.45 | labeling | 0.4.3 |
| فيما بعد | 1.3.2 | lattice | 0.21-8 | lava | 1.7.3 |
| دورة الحياة | 1.0.4 | listenv | 0.9.1 | lubridate | 1.9.3 |
| magrittr | 2.0.3 | markdown | 1.12 | MASS | 7.3-60 |
| مصفوفة | 1.5-4.1 | المذكرة | 2.0.1 | الأساليب | 4.3.2 |
| mgcv | 1.8-42 | mime | 0.12 | واجهة مستخدم مصغرة | 0.1.1.1 |
| تدفق التعلم الآلي | 2.10.0 | ModelMetrics | 1.2.2.2 | modelr | 0.1.11 |
| munsell | 0.5.0 | nlme | 3.1-163 | nnet | 7.3-19 |
| numDeriv | 2016.8-1.1 | openssl | 2.1.1 | parallel | 4.3.2 |
| بالتوازي | 1.36.0 | pillar | 1.9.0 | pkgbuild | 1.4.3 |
| pkgconfig | 2.0.3 | pkgdown | 2.0.7 | pkgload | 1.3.4 |
| plogr | 0.2.0 | plyr | 1.8.9 | مدح | 1.0.0 |
| prettyunits | 1.2.0 | بروك | 1.18.5 | processx | 3.8.3 |
| prodlim | 2023.08.28 | ملفات تعريفية | 0.3.8 | التقدم | 1.2.3 |
| متدرج التقدم | 0.14.0 | الوعود | 1.2.1 | proto | 1.0.0 |
| الوكيل | 0.4-27 | ps | 1.7.6 | purrr | 1.0.2 |
| R6 | 2.5.1 | رعوج | 1.2.7 | randomForest | 4.7-1.1 |
| طيور الراب | 0.3.3 | rcmdcheck | 1.4.0 | RColorBrewer | 1.1-3 |
| Rcpp | 1.0.12 | RcppEigen | 0.3.3.9.4 | قابلة للتفاعل | 0.4.4 |
| reactR | 0.5.0 | readr | 2.1.5 | readxl | 1.4.3 |
| recipes | 1.0.9 | rematch | 2.0.0 | إعادة المباراة2 | 2.1.2 |
| أجهزة التحكم عن بعد | 2.4.2.1 | reprex | 2.1.0 | reshape2 | 1.4.4 |
| rlang | 1.1.3 | rmarkdown | 2.25 | RODBC | 1.3-23 |
| roxygen2 | 7.3.1 | rpart | 4.1.21 | rprojroot | 2.0.4 |
| Rserve | 1.8-13 | RSQLite | 2.3.5 | rstudioapi | 0.15.0 |
| تحويلات | 2.1.2 | rvest | 1.0.3 | ساس | 0.4.8 |
| scales | 1.3.0 | selectr | 0.4-2 | معلومات الجلسة | 1.2.2 |
| شكل | 1.4.6 | بَرَّاق | 1.8.0 | قوالب المصدر | 0.1.7-1 |
| sparklyr | 1.8.4 | spatial | 7.3-15 | splines | 4.3.2 |
| sqldf | 0.4-11 | SQUAREM | 2021.1 | stats | 4.3.2 |
| stats4 | 4.3.2 | stringi | 1.8.3 | stringr | 1.5.1 |
| survival | 3.5-5 | غرور | 3.33.1 | sys | 3.4.2 |
| الشبكات الأساسية للنظام | 1.0.5 | tcltk | 4.3.2 | اختبار الذي | 3.2.1 |
| تشكيل النص | 0.3.7 | tibble | 3.2.1 | tidyr | 1.3.1 |
| tidyselect | 1.2.0 | tidyverse | 2.0.0 | تغيير الوقت | 0.3.0 |
| timeDate | 4032.109 | tinytex | 0.49 | الأدوات | 4.3.2 |
| tzdb | 0.4.0 | محدد موقع المعلومات (urlchecker) | 1.0.1 | استخدام هذا | 2.2.2 |
| utf8 | 1.2.4 | utils | 4.3.2 | uuid | 1.2-0 |
| الإصدار 8 | 4.4.1 | vctrs | 0.6.5 | viridisLite | 0.4.2 |
| غرفة vroom | 1.6.5 | والدو | 0.5.2 | whisker | 0.4.1 |
| withr | 3.0.0 | xfun | 0.41 | xml2 | 1.3.6 |
| xopen | 1.0.0 | xtable | 1.8-4 | yaml | 2.3.8 |
| zeallot | 0.1.0 | zip | 2.3.1 |
مكتبات Java و Scala المثبتة (إصدار مجموعة Scala 2.12)
| معرف مجموعة | معرف البيانات الاصطناعية | إصدار |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | amazon-kinesis-client | 1.12.0 |
| com.amazonaws | aws-java-sdk-autoscaling | 1.12.610 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.12.610 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.12.610 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.12.610 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.12.610 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.12.610 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.12.610 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.12.610 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.12.610 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.12.610 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.12.610 |
| com.amazonaws | aws-java-sdk-config | 1.12.610 |
| com.amazonaws | aws-java-sdk-core | 1.12.610 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.12.610 |
| com.amazonaws | aws-java-sdk-directconnect | 1.12.610 |
| com.amazonaws | aws-java-sdk-directory | 1.12.610 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.12.610 |
| com.amazonaws | aws-java-sdk-ec2 | 1.12.610 |
| com.amazonaws | aws-java-sdk-ecs | 1.12.610 |
| com.amazonaws | aws-java-sdk-efs | 1.12.610 |
| com.amazonaws | aws-java-sdk-elasticache | 1.12.610 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.12.610 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.12.610 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.12.610 |
| com.amazonaws | aws-java-sdk-emr | 1.12.610 |
| com.amazonaws | aws-java-sdk-glacier | 1.12.610 |
| com.amazonaws | aws-java-sdk-glue | 1.12.610 |
| com.amazonaws | aws-java-sdk-iam | 1.12.610 |
| com.amazonaws | aws-java-sdk-importexport | 1.12.610 |
| com.amazonaws | aws-java-sdk-kinesis | 1.12.610 |
| com.amazonaws | aws-java-sdk-kms | 1.12.610 |
| com.amazonaws | aws-java-sdk-lambda | 1.12.610 |
| com.amazonaws | aws-java-sdk-logs | 1.12.610 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.12.610 |
| com.amazonaws | aws-java-sdk-opsworks | 1.12.610 |
| com.amazonaws | aws-java-sdk-rds | 1.12.610 |
| com.amazonaws | aws-java-sdk-redshift | 1.12.610 |
| com.amazonaws | aws-java-sdk-route53 | 1.12.610 |
| com.amazonaws | aws-java-sdk-s3 | 1.12.610 |
| com.amazonaws | aws-java-sdk-ses | 1.12.610 |
| com.amazonaws | aws-java-sdk-simpledb | 1.12.610 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.12.610 |
| com.amazonaws | aws-java-sdk-sns | 1.12.610 |
| com.amazonaws | aws-java-sdk-sqs | 1.12.610 |
| com.amazonaws | aws-java-sdk-ssm | 1.12.610 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.12.610 |
| com.amazonaws | aws-java-sdk-sts | 1.12.610 |
| com.amazonaws | دعم aws-java-sdk | 1.12.610 |
| com.amazonaws | مكتبات aws-java-sdk-swf | 1.11.22 |
| com.amazonaws | مساحات عمل aws-java-sdk | 1.12.610 |
| com.amazonaws | jmespath-java | 1.12.610 |
| com.clearspring.analytics | استدر | 2.9.6 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | databricks-sdk-java | 0.17.1 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.12 | 0.4.15-10 |
| com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
| com.esotericsoftware | kryo مظلل | 4.0.2 |
| com.esotericsoftware | سجل الحد الأدنى | 1.3.0 |
| com.fasterxml | زميل | 1.3.4 |
| com.fasterxml.jackson.core | التعليقات التوضيحية ل جاكسون | 2.15.2 |
| com.fasterxml.jackson.core | جاكسون النواة | 2.15.2 |
| com.fasterxml.jackson.core | جاكسون-databind | 2.15.2 |
| com.fasterxml.jackson.dataformat | جاكسون-dataformat-cbor | 2.15.2 |
| com.fasterxml.jackson.dataformat | جاكسون-dataformat-yaml | 2.15.2 |
| com.fasterxml.jackson.datatype | جاكسون-datatype-joda | 2.15.2 |
| com.fasterxml.jackson.datatype | jackson-datatype-jsr310 | 2.16.0 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.15.2 |
| com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.15.2 |
| com.github.ben-manes.كافيين | كافايين | 2.9.3 |
| com.github.fommil | أداة تحميل jniloader | 1.1 |
| com.github.fommil.netlib | native_ref-java | 1.1 |
| com.github.fommil.netlib | native_ref-java | 1.1 من السكان الأصليين |
| com.github.fommil.netlib | native_system-java | 1.1 |
| com.github.fommil.netlib | native_system-java | 1.1 من السكان الأصليين |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64 | 1.1 من السكان الأصليين |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64 | 1.1 من السكان الأصليين |
| com.github.luben | zstd-jni | 1.5.5-4 |
| com.github.wendykierp | JTransforms | 3.1 |
| com.google.code.findbugs | jsr305 | 3.0.0 |
| com.google.code.gson | gson | 2.10.1 |
| com.google.crypto.tink | تينك | 1.9.0 |
| com.google.errorprone | error_prone_annotations | 2.10.0 |
| com.google.flatbuffers | flatbuffers-java | 23.5.26 |
| com.google.guava | الجوافه | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.helger | profiler | 1.1.1 |
| com.ibm.icu | icu4j | 72.1 |
| com.jcraft | jsch | 0.1.55 |
| com.jolbox | cp عظمي | 0.8.0.RELEASE |
| com.lihaoyi | sourcecode_2.12 | 0.1.9 |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.3.9 |
| com.microsoft.sqlserver | mssql-jdbc | 11.2.2.jre8 |
| com.ning | ضغط lzf | 1.1.2 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.sun.xml.bind | jaxb-core | 2.2.11 |
| com.sun.xml.bind | jaxb-impl | 2.2.11 |
| com.tdunning | json | 1.8 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
| com.twitter | برد-java | 0.10.0 |
| com.twitter | chill_2.12 | 0.10.0 |
| com.twitter | util-app_2.12 | 7.1.0 |
| com.twitter | util-core_2.12 | 7.1.0 |
| com.twitter | util-function_2.12 | 7.1.0 |
| com.twitter | util-jvm_2.12 | 7.1.0 |
| com.twitter | util-lint_2.12 | 7.1.0 |
| com.twitter | util-registry_2.12 | 7.1.0 |
| com.twitter | util-stats_2.12 | 7.1.0 |
| com.typesafe | config | 1.4.3 |
| com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
| com.uber | h3 | 3.7.3 |
| com.univocity | محللات أحادية التكافؤ | 2.9.1 |
| com.zaxxer | HikariCP | 4.0.3 |
| commons-cli | commons-cli | 1.5.0 |
| commons-codec | commons-codec | 1.16.0 |
| المجموعات المشتركة | المجموعات المشتركة | 3.2.2 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-fileupload | commons-fileupload | 1.5 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.13.0 |
| commons-lang | commons-lang | 2.6 |
| تسجيل المشتركات | تسجيل المشتركات | 1.1.3 |
| تجمع مشترك | تجمع مشترك | 1.5.4 |
| dev.ludovic.netlib | arpack | 3.0.3 |
| dev.ludovic.netlib | بلاس | 3.0.3 |
| dev.ludovic.netlib | lapack | 3.0.3 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
| io.airlift | أداة ضغط الهواء | 0.25 |
| io.delta | delta-sharing-client_2.12 | 1.0.5 |
| io.dropwizard.metrics | التعليقات التوضيحية للمقاييس | 4.2.19 |
| io.dropwizard.metrics | metrics-core | 4.2.19 |
| io.dropwizard.metrics | metrics-graphite | 4.2.19 |
| io.dropwizard.metrics | المقاييس-الفحوصات الصحية | 4.2.19 |
| io.dropwizard.metrics | metrics-jetty9 | 4.2.19 |
| io.dropwizard.metrics | metrics-jmx | 4.2.19 |
| io.dropwizard.metrics | metrics-json | 4.2.19 |
| io.dropwizard.metrics | metrics-jvm | 4.2.19 |
| io.dropwizard.metrics | metrics-servlets | 4.2.19 |
| io.netty | netty-all | 4.1.96.Final |
| io.netty | netty-buffer | 4.1.96.Final |
| io.netty | netty-codec | 4.1.96.Final |
| io.netty | netty-codec-http | 4.1.96.Final |
| io.netty | netty-codec-http2 | 4.1.96.Final |
| io.netty | netty-codec-socks | 4.1.96.Final |
| io.netty | netty-common | 4.1.96.Final |
| io.netty | معالج netty | 4.1.96.Final |
| io.netty | netty-handler-proxy | 4.1.96.Final |
| io.netty | محلل netty | 4.1.96.Final |
| io.netty | netty-tcnative-مملة-ثابت | 2.0.61.Final-linux-aarch_64 |
| io.netty | netty-tcnative-مملة-ثابت | 2.0.61.Final-linux-x86_64 |
| io.netty | netty-tcnative-مملة-ثابت | 2.0.61.Final-osx-aarch_64 |
| io.netty | netty-tcnative-مملة-ثابت | 2.0.61.Final-osx-x86_64 |
| io.netty | netty-tcnative-مملة-ثابت | 2.0.61.Final-windows-x86_64 |
| io.netty | netty-tcnative-classes | 2.0.61.Final |
| io.netty | netty-transport | 4.1.96.Final |
| io.netty | netty-transport-classes-epoll | 4.1.96.Final |
| io.netty | netty-transport-classes-kqueue | 4.1.96.Final |
| io.netty | netty-transport-native-epoll | 4.1.96.Final |
| io.netty | netty-transport-native-epoll | 4.1.96.Final-linux-aarch_64 |
| io.netty | netty-transport-native-epoll | 4.1.96.Final-linux-x86_64 |
| io.netty | netty-transport-native-kqueue | 4.1.96.Final-osx-aarch_64 |
| io.netty | netty-transport-native-kqueue | 4.1.96.Final-osx-x86_64 |
| io.netty | netty-transport-native-unix-common | 4.1.96.Final |
| io.prometheus | واجهة سطر الأوامر البسيطة | 0.7.0 |
| io.prometheus | simpleclient_common | 0.7.0 |
| io.prometheus | simpleclient_dropwizard | 0.7.0 |
| io.prometheus | simpleclient_pushgateway | 0.7.0 |
| io.prometheus | simpleclient_servlet | 0.7.0 |
| io.prometheus.jmx | جامع | 0.12.0 |
| jakarta.annotation | jakarta.annotation-api | 1.3.5 |
| jakarta.servlet | jakarta.servlet-api | 4.0.3 |
| jakarta.validation | jakarta.validation-api | 2.0.2 |
| jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
| javax.activation | التنشيط | 1.1.1 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.transaction | jta | 1.1 |
| javax.transaction | واجهة برمجة تطبيقات المعاملات | 1.1 |
| javax.xml.bind | jaxb-api | 2.2.11 |
| التفاف دائري | التفاف دائري | 5.5.1 |
| jline | jline | 2.14.6 |
| joda-time | joda-time | 2.12.1 |
| net.java.dev.jna | jna | 5.8.0 |
| net.razorvine | مخلل | 1.3 |
| net.sf.jpam | jpam | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | snowflake-ingest-sdk | 0.9.6 |
| net.sourceforge.f2j | arpack_combined_all | 0.1 |
| org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | وقت تشغيل antlr | 3.5.2 |
| org.antlr | وقت تشغيل antlr4 | 4.9.3 |
| org.antlr | سلسلة قوالب | 3.2.1 |
| org.apache.ant | نمل | 1.10.11 |
| org.apache.ant | نملة-jsch | 1.10.11 |
| org.apache.ant | ant-launcher | 1.10.11 |
| org.apache.سهم | تنسيق السهم | 15.0.0 |
| org.apache.سهم | ذاكرة أساسية للسهم | 15.0.0 |
| org.apache.سهم | سهم-ذاكرة-netty | 15.0.0 |
| org.apache.سهم | خط متجه للسهم | 15.0.0 |
| org.apache.avro | avro | 1.11.3 |
| org.apache.avro | avro-ipc | 1.11.3 |
| org.apache.avro | avro-mapred | 1.11.3 |
| org.apache.commons | commons-collections4 | 4.4 |
| org.apache.commons | ضغط الشائعات | 1.23.0 |
| org.apache.commons | commons-crypto | 1.1.0 |
| org.apache.commons | commons-lang3 | 3.12.0 |
| org.apache.commons | commons-math3 | 3.6.1 |
| org.apache.commons | commons-text | 1.10.0 |
| org.apache.curator | عميل أمين | 2.13.0 |
| org.apache.curator | إطار عمل أمين | 2.13.0 |
| org.apache.curator | وصفات أمين | 2.13.0 |
| org.apache.datasketches | datasketches-java | 3.1.0 |
| org.apache.datasketches | datasketches-memory | 2.0.0 |
| org.apache.derby | الدربي | 10.14.2.0 |
| org.apache.hadoop | وقت تشغيل عميل hadoop | 3.3.6 |
| org.apache.hive | hive-beeline | 2.3.9 |
| org.apache.hive | hive-cli | 2.3.9 |
| org.apache.hive | hive-jdbc | 2.3.9 |
| org.apache.hive | عميل hive-llap | 2.3.9 |
| org.apache.hive | hive-llap-common | 2.3.9 |
| org.apache.hive | hive-serde | 2.3.9 |
| org.apache.hive | hive-shims | 2.3.9 |
| org.apache.hive | hive-storage-api | 2.8.1 |
| org.apache.hive.shims | hive-shims-0.23 | 2.3.9 |
| org.apache.hive.shims | hive-shims-common | 2.3.9 |
| org.apache.hive.shims | hive-shims-scheduler | 2.3.9 |
| org.apache.httpcomponents | httpclient | 4.5.14 |
| org.apache.httpcomponents | httpcore | 4.4.16 |
| org.apache.ivy | لبلاب | 2.5.1 |
| org.apache.logging.log4j | log4j-1.2-api | 2.22.1 |
| org.apache.logging.log4j | log4j-api | 2.22.1 |
| org.apache.logging.log4j | log4j-core | 2.22.1 |
| org.apache.logging.log4j | log4j-layout-template-json | 2.22.1 |
| org.apache.logging.log4j | log4j-slf4j2-impl | 2.22.1 |
| org.apache.orc | orc-core | 1.9.2-shaded-protobuf |
| org.apache.orc | orc-mapreduce | 1.9.2-shaded-protobuf |
| org.apache.orc | orc-shims | 1.9.2 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.12.0 |
| org.apache.ws.xmlschema | xmlschema-core | 2.3.0 |
| org.apache.xbean | xbean-asm9-shaded | 4.23 |
| org.apache.yetus | التعليقات التوضيحية للجمهور | 0.13.0 |
| org.apache.zookeeper | zookeeper | 3.6.3 |
| org.apache.zookeeper | zookeeper-jute | 3.6.3 |
| org.checkerframework | مدقق كهومي | 3.31.0 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | جاكسون-mapper-asl | 1.9.13 |
| org.codehaus.janino | محول برمجي مشترك | 3.0.16 |
| org.codehaus.janino | جانينو | 3.0.16 |
| org.datanucleus | datanucleus-api-jdo | 4.2.4 |
| org.datanucleus | datanucleus-core | 4.1.17 |
| org.datanucleus | datanucleus-rdbms | 4.1.19 |
| org.datanucleus | javax.jdo | 3.2.0-m3 |
| org.eclipse.collections | مجموعات الكسوف | 11.1.0 |
| org.eclipse.collections | eclipse-collections-api | 11.1.0 |
| org.eclipse.jetty | عميل jetty | 9.4.52.v20230823 |
| org.eclipse.jetty | متابعة jetty | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-http | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-io | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-jndi | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-plus | 9.4.52.v20230823 |
| org.eclipse.jetty | وكيل jetty | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-security | 9.4.52.v20230823 |
| org.eclipse.jetty | خادم jetty | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-servlet | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-servlets | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-util | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-util-ajax | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-webapp | 9.4.52.v20230823 |
| org.eclipse.jetty | jetty-xml | 9.4.52.v20230823 |
| org.eclipse.jetty.websocket | websocket-api | 9.4.52.v20230823 |
| org.eclipse.jetty.websocket | عميل websocket | 9.4.52.v20230823 |
| org.eclipse.jetty.websocket | websocket-common | 9.4.52.v20230823 |
| org.eclipse.jetty.websocket | خادم websocket | 9.4.52.v20230823 |
| org.eclipse.jetty.websocket | websocket-servlet | 9.4.52.v20230823 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.6.1 |
| org.glassfish.hk2 | محدد موقع hk2 | 2.6.1 |
| org.glassfish.hk2 | hk2-utils | 2.6.1 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.3 |
| org.glassfish.hk2.external | إعادة حزم الأوبالين | 2.6.1 |
| org.glassfish.hk2.external | jakarta.inject | 2.6.1 |
| org.glassfish.jersey.containers | جيرسي حاوية-servlet | 2.40 |
| org.glassfish.jersey.containers | جيرسي-حاوية-servlet-core | 2.40 |
| org.glassfish.jersey.core | جيرسي-العميل | 2.40 |
| org.glassfish.jersey.core | جيرسي المشتركة | 2.40 |
| org.glassfish.jersey.core | خادم جيرسي | 2.40 |
| org.glassfish.jersey.inject | جيرسي-hk2 | 2.40 |
| org.hibernate.validator | مدقق الإسبات | 6.1.7.Final |
| org.ini4j | ini4j | 0.5.4 |
| org.javassist | javassist | 3.29.2-GA |
| org.jboss.logging | تسجيل jboss | 3.3.2.Final |
| org.jdbi | jdbi | 2.63.1 |
| org.jetbrains | التعليقات التوضيحية | 17.0.0 |
| org.joda | joda-convert | 1.7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.12 | 3.7.0-M11 |
| org.json4s | json4s-core_2.12 | 3.7.0-M11 |
| org.json4s | json4s-jackson_2.12 | 3.7.0-M11 |
| org.json4s | json4s-scalap_2.12 | 3.7.0-M11 |
| org.lz4 | lz4-java | 1.8.0 |
| org.mlflow | mlflow-spark_2.12 | 2.9.1 |
| org.objenesis | داء objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.6.1 |
| org.roaringbitmap | هديرBitmap | 0.9.45-databricks |
| org.roaringbitmap | الحشوات | 0.9.45-databricks |
| org.rocksdb | rocksdbjni | 8.11.4 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.12 | 2.12.15 |
| org.scala-lang | scala-library_2.12 | 2.12.15 |
| org.scala-lang | scala-reflect_2.12 | 2.12.15 |
| org.scala-lang.modules | scala-collection-compat_2.12 | 2.11.0 |
| org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
| org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
| org.scala-sbt | واجهة الاختبار | 1.0 |
| org.scalacheck | scalacheck_2.12 | 1.14.2 |
| org.scalactic | scalactic_2.12 | 3.2.15 |
| org.scalanlp | macros_2.12 | 2.1.0 |
| org.scalanlp | breeze_2.12 | 2.1.0 |
| org.scalatest | المتوافق مع التحجيم | 3.2.15 |
| org.scalatest | scalatest-core_2.12 | 3.2.15 |
| org.scalatest | scalatest-diagrams_2.12 | 3.2.15 |
| org.scalatest | scalatest-featurespec_2.12 | 3.2.15 |
| org.scalatest | scalatest-flatspec_2.12 | 3.2.15 |
| org.scalatest | scalatest-freespec_2.12 | 3.2.15 |
| org.scalatest | scalatest-funspec_2.12 | 3.2.15 |
| org.scalatest | scalatest-funsuite_2.12 | 3.2.15 |
| org.scalatest | scalatest-matchers-core_2.12 | 3.2.15 |
| org.scalatest | scalatest-mustmatchers_2.12 | 3.2.15 |
| org.scalatest | scalatest-propspec_2.12 | 3.2.15 |
| org.scalatest | scalatest-refspec_2.12 | 3.2.15 |
| org.scalatest | scalatest-shouldmatchers_2.12 | 3.2.15 |
| org.scalatest | scalatest-wordspec_2.12 | 3.2.15 |
| org.scalatest | scalatest_2.12 | 3.2.15 |
| org.slf4j | jcl-over-slf4j | 2.0.7 |
| org.slf4j | jul-to-slf4j | 2.0.7 |
| org.slf4j | slf4j-api | 2.0.7 |
| org.slf4j | slf4j-simple | 1.7.25 |
| org.threeten | ثلاثتين إضافية | 1.7.1 |
| org.tukaani | xz | 1.9 |
| مستوى org.typelevel | algebra_2.12 | 2.0.1 |
| مستوى org.typelevel | cats-kernel_2.12 | 2.1.1 |
| مستوى org.typelevel | spire-macros_2.12 | 0.17.0 |
| مستوى org.typelevel | spire-platform_2.12 | 0.17.0 |
| مستوى org.typelevel | spire-util_2.12 | 0.17.0 |
| مستوى org.typelevel | spire_2.12 | 0.17.0 |
| org.wildfly.openssl | wildfly-openssl | 1.1.3.Final |
| org.xerial | sqlite-jdbc | 3.42.0.0 |
| org.xerial.snappy | snappy-java | 1.1.10.3 |
| org.yaml | ثعبان الثعبان | 2.0 |
| oro | oro | 2.0.8 |
| pl.edu.icm | JLargeArrays | 1.5 |
| software.amazon.cryptools | AmazonCorrettoCryptoProvider | 1.6.1-linux-x86_64 |
| software.amazon.ion | ion-java | 1.0.2 |
| stax | stax-api | 1.0.1 |