Databricks Runtime 10.1 (غير مدعوم)

توفر ملاحظات الإصدار التالية معلومات حول Databricks Runtime 10.1 وDatabricks Runtime 10.1 Photon، مدعوم من Apache Spark 3.2.0. أصدرت Databricks هذه الصور في نوفمبر 2021. الفوتون في المعاينة العامة.

ميزات وتحسينات جديدة

إعدادات جدول Delta جديدة لضغط الملفات الصغيرة

تقبل خاصية delta.autoOptimize.autoCompact جدول Delta الآن القيم الجديدة ل auto و legacy بالإضافة إلى القيم الموجودة ل true و false. عند التعيين إلى auto (مستحسن)، يستخدم الضغط التلقائي إعدادات افتراضية أفضل، مثل تعيين 32 ميغابايت كحجم الملف الهدف (على الرغم من أن السلوكيات الافتراضية عرضة للتغيير في المستقبل). عند التعيين إلى legacy أو true، يستخدم الضغط التلقائي 128 ميغابايت كحجم الملف الهدف.

بدلا من تعيين هذه الخاصية لجدول فردي، يمكنك تعيين spark.databricks.delta.autoCompact.enabled التكوين إلى autoأو legacyأو true لتمكين الضغط التلقائي لكافة جداول دلتا. هذا التكوين له الأسبقية على خاصية الجدول ذات الصلة أثناء جلسة العمل الحالية.

يمكن التحكم في حجم الملف الهدف للضغط التلقائي باستخدام spark.databricks.delta.autoCompact.maxFileSize التكوين.

لمزيد من المعلومات حول الضغط التلقائي، راجع الضغط التلقائي ل Delta Lake على Azure Databricks.

مقاييس مجموعة صفوف جديدة لمسح استعلام Parquet

الاستعلامات باستخدام Parquet تفحص الآن مقاييس مجموعة الصفوف في واجهة مستخدم Spark. مقاييس مجموعة الصفوف هذه هي:

  • العدد الإجمالي لمجموعات صفوف باركيه
  • عدد مجموعات صفوف parquet المقروءة

Trigger.AvailableNow للاستعلامات المتدفقة لمصدر دلتا

يدعم هذا التغيير نوعا جديدا من المشغلات للاستعلامات المتدفقة لمصدر دلتا في Scala: Trigger.AvailableNow. إنه مثل Trigger.Once، الذي يعالج جميع البيانات المتوفرة ثم يوقف الاستعلام. ومع ذلك، Trigger.AvailableNow يوفر قابلية توسع أفضل، لأنه يمكن معالجة البيانات على دفعات متعددة بدلا من دفعة واحدة. لا يقدم هذا التغيير واجهة جديدة؛ ينفذ واجهة برمجة تطبيقات Spark موجودة. يدعم هذا المشغل أيضا جميع خيارات تحديد المعدل التي تدعمها Delta كمصدر بالفعل.

مثال:

spark.readStream
  .format("delta")
  .option("maxFilesPerTrigger", "1")
  .load(inputDir)
  .writeStream
  .trigger(Trigger.AvailableNow)
  .option("checkpointLocation", checkpointDir)
  .start()

راجع تغطية Trigger.AvailableNow في ما هو المحمل التلقائي؟.

Trigger.AvailableNow ل Auto Loader

Trigger.AvailableNow هو وضع مشغل دفق جديد مشابه ل Trigger.Once. Trigger.Once يعالج جميع البيانات المتوفرة ثم يوقف الاستعلام. Trigger.AvailableNow لديه قابلية توسع أفضل، لأنه يمكن معالجة البيانات على دفعات متعددة بدلا من دفعة واحدة. يدعم Trigger.AvailableNow Loader التلقائي الآن في كل من سرد الدليل وأوضاع إعلام الملف ل Scala. راجع تغطية Trigger.AvailableNow في ما هو المحمل التلقائي؟.

دعم دلتا لتكوينات نظام ملفات Hadoop التي يتم تمريرها عبر خيارات DataFrame

على غرار Parquet، تدعم Delta الآن قراءة تكوينات نظام ملفات Hadoop من DataFrameReader وخيارات DataFrameWriter عند قراءة الجدول أو كتابته، باستخدام DataFrameReader.load(path) أو DataFrameWriter.save(path). راجع تكوين بيانات اعتماد تخزين دلتا.

يتم الآن دعم نقاط التحقق من الحالة غير المتزامنة في مهام الدفق ذات الحالة (المعاينة العامة)

نقاط التفتيش غير المتزامنة للحالة هي ميزة جديدة من المحتمل أن تقلل من زمن انتقال الميكروبات من طرف إلى طرف في مهام الدفق ذات الحالة ذات التحديثات الكبيرة للحالة. راجع نقاط التحقق غير المتزامنة في الحالة للاستعلامات ذات الحالة.

Sparklyr مع تمرير بيانات الاعتماد

يمكنك الآن استخدام واجهات برمجة التطبيقات sparklyr لقراءة البيانات وكتابتها من وإلى التخزين السحابي باستخدام تمرير بيانات الاعتماد. تقتصر هذه الوظيفة على المجموعات القياسية التي لها وصول مستخدم واحد. راجع Access Azure Data Lake Storage باستخدام Microsoft Entra ID (المعروف سابقا ب Azure Active Directory) credential passthrough (legacy).

تلخص بيانات Databricks Utilities التحكم في الدقة (معاينة عامة)

تتحكم معلمة جديدة precise لدقة dbutils.data.summarize نتائج الملخص. عندما precise يتم تعيين إلى خطأ (الافتراضي)، يقوم الملخص بإرجاع نتائج تقريبية لعدد مميز، ونسبة مئوية، وعدد العناصر المتكررة. عندما precise يتم تعيين إلى صحيح، يتم الآن حساب الملخصات بعدد مميز دقيق وعدد العناصر المتكررة، مع تقديرات مئوية أكثر دقة. راجع أمر التلخيص (dbutils.data.summarize).

يمكن الآن استخدام دفاتر ملاحظات Azure Databricks مع نواة IPython

يمكنك الآن تكوين مجموعة Azure Databricks لاستخدام نواة IPython لتنفيذ التعليمات البرمجية ل Python. يؤدي استخدام نواة IPython على Azure Databricks إلى إضافة دعم أدوات عرض وإخراج IPython. أيضا، يلتقط IPython kernel مخرجات stdout وstderr للعمليات التابعة التي تم إنشاؤها بواسطة دفتر ملاحظات، ما يسمح بتضمين هذا الإخراج في نتائج أوامر دفتر الملاحظات.

لمزيد من المعلومات، راجع نواة IPython.

وظائف جديدة في Spark SQL

تمت إضافة الكائنات والأوامر التالية للعمل مع البيانات في كتالوج Unity (معاينة):

تمت إضافة الأوامر التالية لمشاركة دلتا (معاينة)، والتي تسمح لك بمشاركة بيانات القراءة فقط مع مستلمين من خارج مؤسستك:

إصلاح الأخطاء

  • تم إصلاح شرط تعارض قد يتسبب في فشل استعلام مع IOException مثل No FileSystem for scheme أو قد يتسبب في عدم سريان التعديلات sparkContext.hadoopConfiguration في الاستعلامات.

ترقيات المكتبة

  • مكتبات Python التي تمت ترقيتها:
    • filelock من 3.0.12 إلى 3.3.1
    • koalas من 1.8.1 إلى 1.8.2
    • رسم من 5.1.0 إلى 5.3.0
  • مكتبات R التي تمت ترقيتها:
    • bslib من 0.3.0 إلى 0.3.1
    • علامة الإقطف من 6.0-88 إلى 6.0-90
    • cpp11 من 0.3.1 إلى 0.4.0
    • data.table من 1.14.0 إلى 1.14.2
    • desc من 1.3.0 إلى 1.4.0
    • diffobj من 0.3.4 إلى 0.3.5
    • ملخص من 0.6.27 إلى 0.6.28
    • الأنواع المعممة من 0.1.0 إلى 0.1.1
    • hms من 1.1.0 إلى 1.1.1
    • من 1.34 إلى 1.36
    • شعري من 0.20-44 إلى 0.20-45
    • دورة الحياة من 1.0.0 إلى 1.0.1
    • التشحيم من 1.7.10 إلى 1.8.0
    • mgcv من 1.8-37 إلى 1.8-38
    • mime من 0.11 إلى 0.12
    • pkgload من 1.2.2 إلى 1.2.3
    • progressr من 0.8.0 إلى 0.9.0
    • rcmdcheck من 1.3.3 إلى 1.4.0
    • قراءة من 2.0.1 إلى 2.0.2
    • وصفات من 0.1.16 إلى 0.1.17
    • أجهزة التحكم عن بعد من 2.4.0 إلى 2.4.1
    • rlang من 0.4.11 إلى 0.4.12
    • rvest من 1.0.1 إلى 1.0.2
    • لامعة من 1.6.0 إلى 1.7.1
    • stringi من 1.7.4 إلى 1.7.5
    • اختبار من 3.0.4 إلى 3.1.0
    • مرتبة من 1.1.3 إلى 1.1.4
    • نص صغير من 0.33 إلى 0.34
    • استخدام هذا من 2.0.1 إلى 2.1.2
    • xfun من 0.26 إلى 0.27
  • مكتبات Java التي تمت ترقيتها:
    • com.zaxxer.HikariCP من 3.1.0 إلى 4.0.3

Apache Spark

يتضمن Databricks Runtime 10.1 Apache Spark 3.2.0. يتضمن هذا الإصدار جميع إصلاحات Spark وتحسيناته المضمنة في Databricks Runtime 10.0 (غير مدعوم)، بالإضافة إلى إصلاحات الأخطاء الإضافية والتحسينات التالية التي تم إجراؤها على Spark:

  • [SPARK-37037] [SQL] تحسين فرز صفيف البايت حسب unify compareTo دالة UTF8String و ByteArray
  • [SPARK-37091] [R] طلبات النظام لتضمين Java < 18
  • [SPARK-37041] [SQL] Backport HIVE-15025: دعم Secure-Socket-Layer (SSL) ل HMS
  • [SPARK-37098] [SQL] يجب أن يؤدي تغيير خصائص الجدول إلى إبطال ذاكرة التخزين المؤقت
  • [SPARK-36992] [SQL] تحسين فرز صفيف البايت من خلال توحيد دالة getPrefix ل UTF8String و ByteArray
  • [SPARK-37047] [SQL] إضافة دالات lpad وrpad للسلاسل الثنائية
  • [SPARK-37076] [SQL] تنفيذ StructType.toString بشكل صريح ل Scala 2.13
  • [SPARK-37075] [SQL] نقل بناء تعبير UDAF من sql/catalyst إلى sql/core
  • [SPARK-37084] [SQL] تعيين spark.sql.files.openCostInBytes إلى bytesConf
  • [SPARK-37088] [PYSPARK] [SQL] يجب ألا يصل مؤشر ترابط الكاتب إلى الإدخال بعد إرجاع وحدة الإصغاء لإكمال المهمة
  • [SPARK-37069] [SQL] النسخ الاحتياطي بشكل صحيح عندما لا يتوفر Hive.getWithoutRegisterFns
  • [SPARK-37050] [PYTHON] تحديث إرشادات تثبيت Conda
  • [SPARK-37067] [SQL] استخدام ZoneId.of() لمعالجة سلسلة المنطقة الزمنية في DatetimeUtils
  • [SPARK-35925] [SQL] دعم DayTimeIntervalType في دالة مستودع العرض
  • [SPARK-35926] [SQL] إضافة دعم YearMonthIntervalType ل width_bucket
  • [SPARK-35973] [SQL] إضافة أمر SHOW CATALOGS
  • [SPARK-36922] [SQL] يجب أن تدعم دالات SIGN/SIGNUM فواصل ANSI الزمنية
  • [SPARK-37078] [CORE] دعم منشئات المتلقي القديمة ثلاثية المعلمات
  • [SPARK-37061] [SQL] إصلاح CustomMetrics عند استخدام الفئات الداخلية
  • [SPARK-35918] [AVRO] توحيد معالجة عدم تطابق المخطط للقراءة/الكتابة وتحسين رسائل الخطأ
  • [SPARK-36871] [SQL] ترحيل الأمر CreateViewStatement إلى الإصدار 2
  • [SPARK-36898] [SQL] جعل عامل ربط تجزئة تجزئة التبديل قابلا للتكوين
  • [SPARK-36921] [SQL] دعم فواصل ANSI الزمنية بواسطة DIV
  • [SPARK-36794] [SQL] تجاهل مفاتيح الربط المكررة عند إنشاء علاقة لصلة التجزئة المتداخلة SEMI/ANTI
  • [SPARK-36867] [SQL] إصلاح رسالة الخطأ باستخدام الاسم المستعار GROUP BY
  • [SPARK-36914] [SQL] تنفيذ dropIndex و listIndexes في JDBC (لهجة MySQL)
  • [SPARK-35531] [SQL] تمرير جدول الخلية مباشرة إلى HiveClient عند استدعاء getPartitions لتجنب التحويل غير الضروري من HiveTable -> CatalogTable -> HiveTable
  • [SPARK-36718] [SQL] طي المشاريع فقط إذا لم نكرر التعبيرات باهظة الثمن
  • [SPARK-37046] [SQL]: لا يحافظ تغيير طريقة العرض على حالة العمود
  • [SPARK-36978] [SQL] يجب أن تنشئ قاعدة InferConstraints قيود IsNotNull على الحقل المتداخل الذي تم الوصول إليه بدلا من نوع الجذر المتداخل
  • [SPARK-37052] [CORE] يجب أن يمرر Spark الوسيطة المطولة فقط إلى الفئة الرئيسية عندما تكون sql shell
  • [SPARK-37017] [SQL] تقليل نطاق المزامنة لمنع حدوث حالة توقف تام محتملة
  • [SPARK-37032] [SQL] إصلاح ارتباط بناء جملة SQL المقطوع في صفحة مرجع SQL
  • [SPARK-36905] [SQL] إصلاح قراءة طرق عرض الخلية بدون أسماء أعمدة صريحة
  • [SPARK-36678] ترحيل SHOW TABLES لاستخدام الأمر V2 بشكل افتراضي
  • [SPARK-36943] [SQL] تحسين قابلية قراءة رسالة خطأ العمود المفقودة
  • [SPARK-36980] [SQL] إدراج استعلام دعم باستخدام CTE
  • [SPARK-37001] [SQL] تعطيل مستويين من الخريطة لتجميع التجزئة النهائية بشكل افتراضي
  • [SPARK-36970] [SQL] تنسيق B دالة date_format معطل يدويا لجعل Java 17 متوافقا مع Java 8
  • [SPARK-36546] [SQL] إضافة دعم الصفيف إلى الاتحاد حسب الاسم
  • [SPARK-36979] [SQL] إضافة قاعدة RewriteRalSubquery إلى nonExcludableRules
  • [SPARK-36949] [SQL] عدم السماح بجداول موفر Hive مع فواصل ANSI
  • [SPARK-36849] [SQL] ترحيل UseStatement إلى إطار عمل الأوامر v2
  • [SPARK-36868] [SQL] ترحيل CreateFunctionStatement إلى إطار عمل أوامر v2
  • [SPARK-36841] [SQL] إضافة بناء جملة ansi لتغيير الكتالوج set catalog xxx الحالي
  • [SPARK-36821] [SQL] جعل الفئة ColumnarBatch قابلة للتوسيع - الملحق
  • [SPARK-36963] [SQL] إضافة max_by/min_by إلى sql.functions
  • [SPARK-36913] [SQL] تنفيذ createIndex وExists في DS V2 JDBC (لهجة MySQL)
  • [SPARK-36848] [SQL] ترحيل ShowCurrentNamespaceStatement إلى إطار عمل الأوامر v2
  • [SPARK-36526] [SQL] دعم فهرس DSV2: إضافة واجهة supportIndex
  • [SPARK-36960] [SQL] عوامل التصفية المنبثقة مع قيم الفاصل الزمني ANSI إلى ORC
  • [SPARK-36929] [SQL] إزالة الأسلوب غير المستخدم RemoveSubqueryAliasesSuite#assertEquivalent
  • [SPARK-36931] [SQL] دعم قراءة وكتابة فواصل ANSI من/إلى مصادر بيانات ORC
  • [SPARK-34980] [SQL] دعم تقسيم الاندماج من خلال الاتحاد في AQE
  • [SPARK-36809] [SQL] إزالة البث ل InSubqueryExec المستخدم في DPP
  • [SPARK-36813] [SQL] [PYTHON] اقتراح بنية تحتية اعتبارا من الانضمام وimlement ps.merge_asof
  • [SPARK-36918] [SQL] تجاهل الأنواع عند مقارنة بنيات unionByName
  • [SPARK-36891] [SQL] إعادة بناء التعليمات البرمجية SpecificParquetRecordReaderBase وإضافة المزيد من التغطية على فك ترميز Parquet المتجه
  • [SPARK-36920] [SQL] دعم فواصل ANSI الزمنية بواسطة ABS()
  • [SPARK-36888] [SQL] إضافة حالات اختبارات لدالة sha2
  • [SPARK-36889] [SQL] احترام spark.sql.parquet.filterPushdown منشئ فحص v2 parquet
  • [SPARK-36830] [SQL] دعم قراءة وكتابة فواصل ANSI من/إلى مصادر بيانات JSON
  • [SPARK-36870] [SQL] تقديم فئة خطأ INTERNAL_ERROR
  • [SPARK-36831] [SQL] دعم قراءة وكتابة فواصل ANSI من/إلى مصادر بيانات CSV.
  • [SPARK-36550] [SQL] سبب الانتشار عند فشل انعكاس UDF
  • [SPARK-36866] [SQL] عوامل التصفية المنبثقة مع قيم الفاصل الزمني ANSI إلى parquet
  • [SPARK-33832] [SQL] فرض تبسيط التعليمات البرمجية المرتبطة المنحرفة وتحسينها
  • [SPARK-36642] [SQL] إضافة df.withMetadata pyspark API
  • [SPARK-35765] [SQL] لا تكون الأغس المميزة حساسة للتكرار
  • [SPARK-36825] [SQL] قراءة/كتابة إطارات البيانات مع فواصل ANSI من/إلى ملفات parquet
  • [SPARK-36829] [SQL] التحقق من قيمة NULL لإعادة بناء التعليمات البرمجية ل collectionOperators
  • [SPARK-32712] [SQL] دعم كتابة جدول Hive بالمستودعات (تنسيقات ملفات Hive مع تجزئة Hive)
  • [SPARK-36797] [SQL] يجب أن يحل الاتحاد الأعمدة المتداخلة كأعمدة ذات مستوى أعلى
  • [SPARK-36838] [SQL] تحسين أداء التعليمات البرمجية التي تم إنشاؤها في InSet
  • [SPARK-36683] [SQL] إضافة وظائف SQL مضمنة جديدة: SEC وCS
  • [SPARK-36721] [SQL] تبسيط المساواة المنطقية إذا كان أحد الجوانب حرفيا
  • [SPARK-36760] [SQL] إضافة واجهة SupportsPushDownV2Filters
  • [SPARK-36652] [SQL] يجب ألا ينطبق تحديد الانضمام الديناميكي ل AQE على الصلة غير المتساوية
  • [SPARK-36745] [SQL] يجب أن ترجع ExtractEquiJoinKeys التقييمات الأصلية على مفاتيح الانضمام
  • [SPARK-36107] [SQL] إعادة بناء التعليمات البرمجية المجموعة الأولى من 20 خطأ في تنفيذ الاستعلام لاستخدام فئات الخطأ
  • [SPARK-32709] [SQL] دعم كتابة جدول Hive ذو مستودع (تنسيق Parquet/ORC مع تجزئة Hive)
  • [SPARK-36735] [SQL] ضبط النفقات العامة للعلاقة المخزنة مؤقتا ل DPP
  • [SPARK-33832] [SQL] دعم تحسين الصلة المنحرفة حتى إذا قدم تبديلا إضافيا
  • [SPARK-36822] [SQL] يجب أن يستخدم BroadcastNestedLoopJoinExec جميع الشروط بدلا من شرط غير مكافئ
  • [SPARK-35221] [SQL] إضافة التحقق من تلميحات الانضمام المدعومة
  • [SPARK-36814] [SQL] جعل الفئة ColumnarBatch قابلة للتوسيع
  • [SPARK-36663] [SQL] دعم أسماء أعمدة الأرقام فقط في مصادر بيانات ORC
  • [SPARK-36751] [SQL] [PYTHON] [R] إضافة bit/octet_length APIs إلى Scala وPython وR
  • [SPARK-36733] [SQL] إصلاح مشكلة perf في SchemaPruning عندما تحتوي البنية على العديد من الحقول
  • [SPARK-36724] [SQL] دعم timestamp_ntz كنوع من عمود الوقت ل SessionWindow
  • [SPARK-36556] [SQL] إضافة عوامل تصفية DSV2
  • [SPARK-36687] [SQL] [CORE] إعادة تسمية فئات الخطأ بلاحقة _ERROR
  • [SPARK-35803] [SQL] دعم DataSource V2 CreateTempViewUsing
  • [SPARK-36642] [SQL] إضافة df.withMetadata: بناء جملة suger لتحديث بيانات التعريف لإطار البيانات

تحديثات الصيانة

راجع تحديثات صيانة Databricks Runtime 10.1.

بيئة النظام

  • نظام التشغيل: Ubuntu 20.04.3 LTS
  • Java: Zulu 8.56.0.21-CA-linux64
  • Scala: 2.12.14
  • Python: 3.8.10
  • R: 4.1.1
  • Delta Lake: 1.0.0

مكتبات Python المثبتة

مكتبة ‏‏الإصدار مكتبة ‏‏الإصدار مكتبة ‏‏الإصدار
Antergos Linux 2015.10 (ISO-Rolling) dirs 1.4.4 argon2-cffi 20.1.0
مولد غير متزامن 1.10 سلاسل السلاسل 20.3.0 تثبيت خلفي 0.2.0
التبييض 3.3.0 boto3 1.16.7 روبوت الدردشة 1.19.7
شهادة 2020.12.5 cffi 1.14.5 تجزئة 4.0.0
دورة 0.10.0 Cython 0.29.23 dbus-python 1.2.16
ديكور 5.0.6 defusedxml 0.7.1 استياء 0.3.3
معلومات توزيعية 0.23ubuntu1 نقاط الإدخال 0.3 نظرة عامة على الواجهات 1.0.0
قفل الملف 3.3.1 idna 2.10 ipykernel 5.3.4
ipython 7.22.0 ipython-genutils 0.2.0 عناوين ipywidgets 7.6.3
جدي 0.17.2 جينجا 2 2.11.3 مسار jmespath 0.10.0
joblib 1.0.1 jsonschema 3.2.0 jupyter-client 6.1.12
jupyter-core 4.7.1 jupyterlab-pygments 0.1.2 jupyterlab-widgets 1.0.0
kiwisolver ⁦⁩⁦⁩1.3.1 الكوالا 1.8.2 العلامات خزينة 2.0.1
matplotlib 3.4.2 سوء الحظ 0.8.4 nbclient 0.5.3
nbconvert 6.0.7 تنسيق nbformat 5.1.3 nest-asyncio 1.5.1
notebook 6.3.0 numpy 1.19.2 التغليف 20.9
pandas 1.2.4 عوامل تصفية pandocfilter 1.4.3 parso 0.7.0
باتسي 0.5.1 pexpect 4.8.0 pickleshare 0.7.5
وساده 8.2.0 pip 21.0.1 بشكل مخطط 5.3.0
prometheus-client 0.10.1 مجموعة أدوات المطالبة 3.0.17 protobuf 3.17.2
psycopg2 2.8.5 عملية ptyprocess 0.7.0 pyarrow 4.0.0
pycparser 2.20 Pygments 2.8.1 PyGObject 3.36.0
pyparsing 2.4.7 pyrsistent 0.17.3 python-apt 2.0.0+ubuntu0.20.4.6
python-dateutil 2.8.1 pytz 2020.5 pyzmq 20.0.0
الطلبات 2.25.1 requests-unixsocket 0.2.0 s3transfer 0.3.7
scikit-learn 0.24.1 شفرة 1.6.2 بحر محمول 0.11.1
Send2Trash 1.5.0 أدوات الإعداد 52.0.0 ستة 1.15.0
ssh-import-id 5.10 نماذج الإحصائيات 0.12.2 مثابره 8.0.1
terminado 0.9.4 مسار الاختبار 0.4.4 threadpoolctl 2.1.0
اعصار 6.1 سمات السمات 5.0.5 ترقيات غير مراقبة 0.1
urllib3 1.25.11 virtualenv 20.4.1 wcwidth 0.2.5
ترميزات الويب 0.5.1 عجله 0.36.2 عنصر واجهة المستخدم 3.5.1

مكتبات R المثبتة

يتم تثبيت مكتبات R من لقطة Microsoft CRAN في 2021-10-26.

مكتبة ‏‏الإصدار مكتبة ‏‏الإصدار مكتبة ‏‏الإصدار
askpass 1.1 assertthat 0.2.1 backports 1.2.1
الأساس 4.1.1 base64enc 0.1-3 بت 4.0.4
bit64 4.0.5 كائن ثنائي كبير الحجم 1.2.2 boot 1.3-28
المشروب 1.0-6 بريو 1.1.2 broom 0.7.9
bslib 0.3.1 ذاكرة التخزين المؤقت 1.0.6 callr 3.7.0
علامة إقحام 6.0-90 cellranger 1.1.0 كرون 2.3-56
فئة 7.3-19 cli 3.0.1 clipr 0.7.1
نظام مجموعة 2.1.2 codetools 0.2-18 colorspace 2.0-2
العلامة الشائعة 1.7 compiler 4.1.1 config 0.3.1
cpp11 0.4.0 crayon 1.4.1 بيانات الاعتماد ⁦⁩⁦⁩1.3.1
curl 4.3.2 data.table 1.14.2 مجموعات البيانات 4.1.1
DBI 1.1.1 dbplyr 2.1.1 تنازلي 1.4.0
devtools 2.4.2 diffobj 0.3.5 digest 0.6.28
dplyr 1.0.7 dtplyr 1.1.0 e1071 1.7-9
علامة الحذف 0.3.2 التقييم 0.14 fansi 0.5.0
مسافة بعيدة 2.1.0 خريطة سريعة 1.1.0 fontawesome 0.2.2
forcats 0.5.1 Foreach 1.5.1 foreign 0.8-81
صياغه 0.2.0 fs 1.5.0 future 1.22.1
future.apply 1.8.1 الغرغره 1.2.0 generics 0.1.1
غيرت 1.4.1 ggplot2 3.3.5 غ 1.3.0
صور gitcred 0.1.1 glmnet 4.1-2 Globals 0.14.0
glue 1.4.2 googledrive 2.0.0 googlesheets4 1.0.0
gower 0.2.2 graphics 4.1.1 grDevices 4.1.1
grid 4.1.1 gridExtra 2.3 gsubfn 0.7
gtable 0.3.0 haven 2.4.3 highr 0.9
hms 1.1.1 htmltools 0.5.2 htmlwidgets 1.5.4
httpuv 1.6.3 httr 1.4.2 hwriter 1.3.2
hwriterPlus 1.0-3 ids 1.0.1 Ini 0.3.1
ipred 0.9-12 isoband 0.2.5 iterators 1.0.13
jquerylib 0.1.4 jsonlite 1.7.2 KernSmooth 2.23-20
knitr 1.36 labeling 0.4.2 لاحقا 1.3.0
lattice 0.20-45 lava 1.6.10 دورة الحياة 1.0.1
listenv 0.8.0 lubridate 1.8.0 magrittr 2.0.1
markdown 1.1 MASS 7.3-54 المصفوفة 1.3-4
المذكرة 2.0.0 الأساليب 4.1.1 mgcv 1.8-38
mime 0.12 ModelMetrics 1.2.2.2 modelr 0.1.8
munsell 0.5.0 nlme 3.1-152 nnet 7.3-16
numDeriv 2016.8-1.1 openssl 1.4.5 parallel 4.1.1
بالتوازي 1.28.1 pillar 1.6.4 pkgbuild 1.2.0
pkgconfig 2.0.3 pkgload 1.2.3 plogr 0.2.0
plyr 1.8.6 الثناء 1.0.0 prettyunits 1.1.1
بروك 1.18.0 processx 3.5.2 prodlim 2019.11.13
التقدم 1.2.2 متدرج التقدم 0.9.0 وعود 1.2.0.1
proto 1.0.0 الوكيل 0.4-26 ps 1.6.0
purrr 0.3.4 r2d3 0.2.5 R6 2.5.1
randomForest 4.6-14 طيور الراب 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-2 Rcpp 1.0.7 readr 2.0.2
readxl ⁦⁩⁦⁩1.3.1 recipes 0.1.17 rematch 1.0.1
إعادة المباراة2 2.1.2 Remotes 2.4.1 reprex 2.0.1
reshape2 1.4.4 rlang 0.4.12 rmarkdown 2.11
RODBC 1.3-19 roxygen2 7.1.2 rpart 4.1-15
rprojroot 2.0.2 Rserve 1.8-8 RSQLite 2.2.8
rstudioapi 0.13 تحويلات 2.1.1 rvest 1.0.2
ساس 0.4.0 scales 1.1.1 selectr 0.4-2
معلومات الجلسة 1.1.1 الشكل 1.4.6 لامعه 1.7.1
قوالب المصدر 0.1.7 sparklyr 1.7.2 سبارك 3.2.0
spatial 7.3-11 splines 4.1.1 sqldf 0.4-11
SQUAREM 2021.1 stats 4.1.1 stats4 4.1.1
stringi 1.7.5 stringr 1.4.0 survival 3.2-13
sys 3.4 tcltk 4.1.1 TeachingDemos 2.10
اختبار الذي 3.1.0 tibble 3.1.5 tidyr 1.1.4
tidyselect 1.1.1 tidyverse ⁦⁩⁦⁩1.3.1 timeDate 3043.102
tinytex 0.34 الأدوات 4.1.1 tzdb 0.1.2
استخدام هذا 2.1.2 utf8 1.2.2 utils 4.1.1
uuid 0.1-4 vctrs 0.3.8 viridisLite 0.4.0
غرفة vroom 1.5.5 والدو 0.3.1 whisker 0.4
withr 2.4.2 xfun 0.27 xml2 1.3.2
xopen 1.0.0 xtable 1.8-4 yaml 2.2.1
zip 2.2.0

مكتبات Java و Scala المثبتة (إصدار مجموعة Scala 2.12)

معرف مجموعة معرف البيانات الاصطناعية ‏‏الإصدار
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.11.655
com.amazonaws aws-java-sdk-cloudformation 1.11.655
com.amazonaws aws-java-sdk-cloudfront 1.11.655
com.amazonaws aws-java-sdk-cloudhsm 1.11.655
com.amazonaws aws-java-sdk-cloudsearch 1.11.655
com.amazonaws aws-java-sdk-cloudtrail 1.11.655
com.amazonaws aws-java-sdk-cloudwatch 1.11.655
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.655
com.amazonaws aws-java-sdk-codedeploy 1.11.655
com.amazonaws aws-java-sdk-cognitoidentity 1.11.655
com.amazonaws aws-java-sdk-cognitosync 1.11.655
com.amazonaws aws-java-sdk-config 1.11.655
com.amazonaws aws-java-sdk-core 1.11.655
com.amazonaws aws-java-sdk-datapipeline 1.11.655
com.amazonaws aws-java-sdk-directconnect 1.11.655
com.amazonaws aws-java-sdk-directory 1.11.655
com.amazonaws aws-java-sdk-dynamodb 1.11.655
com.amazonaws aws-java-sdk-ec2 1.11.655
com.amazonaws aws-java-sdk-ecs 1.11.655
com.amazonaws aws-java-sdk-efs 1.11.655
com.amazonaws aws-java-sdk-elasticache 1.11.655
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.655
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.655
com.amazonaws aws-java-sdk-elastictranscoder 1.11.655
com.amazonaws aws-java-sdk-emr 1.11.655
com.amazonaws aws-java-sdk-glacier 1.11.655
com.amazonaws aws-java-sdk-glue 1.11.655
com.amazonaws aws-java-sdk-iam 1.11.655
com.amazonaws aws-java-sdk-importexport 1.11.655
com.amazonaws aws-java-sdk-kinesis 1.11.655
com.amazonaws aws-java-sdk-kms 1.11.655
com.amazonaws aws-java-sdk-lambda 1.11.655
com.amazonaws aws-java-sdk-logs 1.11.655
com.amazonaws aws-java-sdk-machinelearning 1.11.655
com.amazonaws aws-java-sdk-opsworks 1.11.655
com.amazonaws aws-java-sdk-rds 1.11.655
com.amazonaws aws-java-sdk-redshift 1.11.655
com.amazonaws aws-java-sdk-route53 1.11.655
com.amazonaws aws-java-sdk-s3 1.11.655
com.amazonaws aws-java-sdk-ses 1.11.655
com.amazonaws aws-java-sdk-simpledb 1.11.655
com.amazonaws aws-java-sdk-simpleworkflow 1.11.655
com.amazonaws aws-java-sdk-sns 1.11.655
com.amazonaws aws-java-sdk-sqs 1.11.655
com.amazonaws aws-java-sdk-ssm 1.11.655
com.amazonaws aws-java-sdk-storagegateway 1.11.655
com.amazonaws aws-java-sdk-sts 1.11.655
com.amazonaws دعم aws-java-sdk 1.11.655
com.amazonaws مكتبات aws-java-sdk-swf 1.11.22
com.amazonaws مساحات عمل aws-java-sdk 1.11.655
com.amazonaws jmespath-java 1.11.655
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics تيار 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo مظلل 4.0.2
com.esotericsoftware سجل الحد الأدنى 1.3.0
com.fasterxml زميل 1.3.4
com.fasterxml.jackson.core التعليقات التوضيحية ل جاكسون 2.12.2
com.fasterxml.jackson.core جاكسون النواة 2.12.2
com.fasterxml.jackson.core جاكسون-databind 2.12.2
com.fasterxml.jackson.dataformat جاكسون-dataformat-cbor 2.12.2
com.fasterxml.jackson.datatype جاكسون-datatype-joda 2.12.2
com.fasterxml.jackson.module jackson-module-paranamer 2.12.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.12.2
com.github.ben-manes.كافيين الكافيين 2.3.4
com.github.fommil أداة تحميل jniloader 1.1
com.github.fommil.netlib الذاكرة الأساسية 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.luben zstd-jni 1.5.0-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.6
com.google.crypto.tink تينك 1.6.0
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava الجوافه 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 1.4.195
com.helger profiler 1.1.1
com.jcraft jsch 0.1.50
com.jolbox cp عظمي 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 9.2.1.jre8
com.ning ضغط lzf 1.0.3
com.sun.istack وقت تشغيل istack-commons 3.0.8
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter برد-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity محللات أحادية التكافؤ 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.2
commons-codec commons-codec 1.15
المجموعات المشتركة المجموعات المشتركة 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.8.0
commons-lang commons-lang 2.6
تسجيل المشتركات تسجيل المشتركات 1.1.3
commons-net commons-net 3.1
تجمع مشترك تجمع مشترك 1.5.4
dev.ludovic.netlib arpack 1.3.2
dev.ludovic.netlib بلاس 1.3.2
dev.ludovic.netlib lapack 1.3.2
hive-2.3__hadoop-3.2 jets3t-0.7 liball_deps_2.12
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift أداة ضغط الهواء 0.19
io.delta delta-sharing-spark_2.12 0.2.0
io.dropwizard.metrics metrics-core 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics المقاييس-الفحوصات الصحية 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics metrics-servlets 4.1.1
io.netty netty-all 4.1.63.Final
io.prometheus واجهة سطر الأوامر البسيطة 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx جامع 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation التنشيط 1.1.1
javax.annotation javax.annotation-api 1.3.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction واجهة برمجة تطبيقات المعاملات 1.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
التفاف دائري التفاف دائري 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.5
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
أشجار maven hive-2.3__hadoop-3.2 liball_deps_2.12
net.java.dev.jna jna 5.8.0
net.razorvine pyrolite 4.30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.3
net.snowflake spark-snowflake_2.12 2.9.0-spark_3.1
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr وقت تشغيل antlr 3.5.2
org.antlr وقت تشغيل antlr4 4.8
org.antlr سلسلة قوالب 3.2.1
org.apache.ant النمل 1.9.2
org.apache.ant نملة-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.سهم تنسيق السهم 2.0.0
org.apache.سهم ذاكرة أساسية للسهم 2.0.0
org.apache.سهم سهم-ذاكرة-netty 2.0.0
org.apache.سهم خط متجه للسهم 2.0.0
org.apache.avro افرو 1.10.2
org.apache.avro avro-ipc 1.10.2
org.apache.avro avro-mapred 1.10.2
org.apache.commons ضغط الشائعات 1.20
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.4.1
org.apache.commons commons-text 1.6
org.apache.curator عميل أمين 2.13.0
org.apache.curator إطار عمل أمين 2.13.0
org.apache.curator وصفات أمين 2.13.0
org.apache.derby ديربي 10.14.2.0
org.apache.hadoop hadoop-client-api 3.3.1-databricks
org.apache.hadoop وقت تشغيل عميل hadoop 3.3.1
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive عميل hive-llap 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.htrace htrace-core4 4.1.0 حاضنة
org.apache.httpcomponents httpclient 4.5.13
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy اللبلاب 2.5.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.6.10
org.apache.orc orc-mapreduce 1.6.10
org.apache.orc orc-shims 1.6.10
org.apache.parquet عمود باركيه 1.12.0-databricks-0003
org.apache.parquet parquet-common 1.12.0-databricks-0003
org.apache.parquet ترميز باركيه 1.12.0-databricks-0003
org.apache.parquet parquet-format-structures 1.12.0-databricks-0003
org.apache.parquet parquet-hadoop 1.12.0-databricks-0003
org.apache.parquet باركيه جاكسون 1.12.0-databricks-0003
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-shaded 4.20
org.apache.yetus التعليقات التوضيحية للجمهور 0.5.0
org.apache.zookeeper zookeeper 3.6.2
org.apache.zookeeper zookeeper-jute 3.6.2
org.checkerframework مدقق كهومي 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson جاكسون-mapper-asl 1.9.13
org.codehaus.janino محول برمجي مشترك 3.0.16
org.codehaus.janino جانينو 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty عميل jetty 9.4.40.v20210413
org.eclipse.jetty متابعة jetty 9.4.40.v20210413
org.eclipse.jetty jetty-http 9.4.40.v20210413
org.eclipse.jetty jetty-io 9.4.40.v20210413
org.eclipse.jetty jetty-jndi 9.4.40.v20210413
org.eclipse.jetty jetty-plus 9.4.40.v20210413
org.eclipse.jetty وكيل jetty 9.4.40.v20210413
org.eclipse.jetty jetty-security 9.4.40.v20210413
org.eclipse.jetty خادم jetty 9.4.40.v20210413
org.eclipse.jetty jetty-servlet 9.4.40.v20210413
org.eclipse.jetty jetty-servlets 9.4.40.v20210413
org.eclipse.jetty jetty-util 9.4.40.v20210413
org.eclipse.jetty jetty-util-ajax 9.4.40.v20210413
org.eclipse.jetty jetty-webapp 9.4.40.v20210413
org.eclipse.jetty jetty-xml 9.4.40.v20210413
org.eclipse.jetty.websocket websocket-api 9.4.40.v20210413
org.eclipse.jetty.websocket عميل websocket 9.4.40.v20210413
org.eclipse.jetty.websocket websocket-common 9.4.40.v20210413
org.eclipse.jetty.websocket خادم websocket 9.4.40.v20210413
org.eclipse.jetty.websocket websocket-servlet 9.4.40.v20210413
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 محدد موقع hk2 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external إعادة حزم الأوبالين 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jaxb وقت تشغيل jaxb 2.3.2
org.glassfish.jersey.containers جيرسي حاوية-servlet 2.34
org.glassfish.jersey.containers جيرسي-حاوية-servlet-core 2.34
org.glassfish.jersey.core جيرسي-العميل 2.34
org.glassfish.jersey.core جيرسي المشتركة 2.34
org.glassfish.jersey.core خادم جيرسي 2.34
org.glassfish.jersey.inject جيرسي-hk2 2.34
org.hibernate.validator مدقق الإسبات 6.1.0.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging تسجيل jboss 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains التعليقات التوضيحية 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-client 2.2.5
org.objenesis داء objenesis 2.5.1
org.postgresql الانترنت 42.2.19
org.roaringbitmap هديرBitmap 0.9.14
org.roaringbitmap الحشوات 0.9.14
org.rocksdb rocksdbjni 6.20.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.14
org.scala-lang scala-library_2.12 2.12.14
org.scala-lang scala-reflect_2.12 2.12.14
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt واجهة الاختبار 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp macros_2.12 1.0
org.scalanlp breeze_2.12 1.0
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark غير مستخدم 1.0.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.threeten ثلاثتين إضافية 1.5.0
org.tukaani xz 1.8
مستوى org.typelevel algebra_2.12 2.0.0-M2
مستوى org.typelevel cats-kernel_2.12 2.0.0-M4
مستوى org.typelevel machinist_2.12 0.6.8
مستوى org.typelevel ماكرو-compat_2.12 1.1.1
مستوى org.typelevel spire-macros_2.12 0.17.0-M1
مستوى org.typelevel spire-platform_2.12 0.17.0-M1
مستوى org.typelevel spire-util_2.12 0.17.0-M1
مستوى org.typelevel spire_2.12 0.17.0-M1
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml ثعبان الثعبان 1.24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1