Databricks Runtime 9.1 LTS
توفر ملاحظات الإصدار التالية معلومات حول Databricks Runtime 9.1 LTS وDatabricks Runtime 9.1 LTS Photon، مدعوم من Apache Spark 3.1.2. أصدرت Databricks هذه الصور في سبتمبر 2021. الفوتون في المعاينة العامة.
إشعار
LTS يعني أن هذا الإصدار تحت الدعم طويل الأجل. راجع دورة حياة إصدار Databricks Runtime LTS.
ميزات وتحسينات جديدة
- تعمل تلميحات مخطط التحميل التلقائي الآن مع أنواع الصفيف والخريطة
- دعم ملف Avro لمخطط الدمج
- دعم القائمة التزايدية للتحميل التلقائي (معاينة عامة)
- يدعم Delta الآن استبدال عشوائيا في أي مكان
- يدعم برنامج التحميل التلقائي ل Google Cloud الآن إعلامات الملفات (معاينة عامة)
- يدعم CREATE FUNCTION الآن إنشاء وظائف الجدول
- يبلغ Kafka Streaming Source الآن عن المقياس
estimatedTotalBytesBehindLatest - بالنسبة للبنى داخل الصفائف، تقوم Delta MERGE INTO الآن بحل حقول البنية بالاسم وتتطور مخططات البنية
تعمل تلميحات مخطط التحميل التلقائي الآن مع أنواع الصفيف والخريطة
يتم اعتماد أنواع الصفيف والخريطة في تجاوز استنتاج المخطط مع تلميحات المخطط للمحمل التلقائي.
تتضمن أمثلة تلميحات المخطط للصفائف ما يلي:
arr Array<TYPE>تغيير نوع الصفيف.arr.element TYPEتغيير نوع الصفيف (باستخدامelementالكلمة الأساسية).arr.element.x TYPEتغيير نوع حقل متداخل في صفيف من البنيات.
المثالان الأولان هما تلميحات لتغيير نوع الصفيف arr إلى TYPE، ولكنهما يستخدمان بناء جملة مختلفا. في المثال الثالث، arr صفيف من البنيات مع حقل x. يوضح هذا المثال كيفية تغيير نوع x إلى TYPE.
تتضمن أمثلة تلميحات المخطط للخرائط ما يلي:
m Map<KEY-TYPE, VALUE-TYPE>تغيير مفتاح الخريطة وأنواع القيم.m.key TYPEتغيير نوع مفاتيح الخريطة.m.value TYPEتغيير نوع قيم الخريطة.m.key.x TYPEتغيير نوع الحقل في مفتاح خريطة.m.value.x TYPEتغيير نوع الحقل لقيمة الخريطة.
يغير المثال الأول كلا من نوعي المفتاح والقيمة للخريطة m إلى KEY_TYPE وعلى VALUE_TYPE التوالي. يمكن استخدام المثالين الثاني والثالث إذا كان نوع المفتاح فقط أو نوع القيمة فقط بحاجة إلى تغيير. في المثالين الرابع والخامس، m توجد خريطة ذات مفتاح وقيمة أنواع البنية مع حقل x. يوضح هذا المثال كيفية تغيير نوع x إلى TYPE.
دعم ملف Avro لمخطط الدمج
يدعم mergeSchema تنسيق ملف Avro الآن الخيار عند قراءة الملفات. سيؤدي الإعداد mergeSchema إلى true عند قراءة ملفات Avro إلى استنتاج مخطط من مجموعة من ملفات Avro بدلا من ملف واحد. يؤدي ذلك إلى تحسين قابلية الاستخدام عن طريق استنتاج مخطط قد يكون قادرا على قراءة جميع الملفات حتى إذا كانت مخططاتها الفردية مختلفة. راجع التكوين.
دعم القائمة التزايدية للتحميل التلقائي (معاينة عامة)
في حالة الملفات التي تم إنشاؤها معجميا، ما هو التحميل التلقائي؟ يستفيد الآن من ترتيب الملفات المعجمية وواجهات برمجة التطبيقات المحسنة الحالية لجعل سرد الدليل أكثر كفاءة عن طريق الإدراج من الملفات التي تم استيعابها مسبقا بدلا من سرد الدليل بأكمله. يكتشف "التحميل التلقائي" تلقائيا ما إذا كان دليل معين مناسبا للقائمة التزايدية بشكل افتراضي. للتحكم في هذا السلوك بشكل صريح، قم بتعيين الخيار الجديد cloudFiles.useIncrementalListing إلى تشغيل (true)، أو إيقاف تشغيل (false)، أو تلقائي (auto). إذا قمت بتعيين هذا السلوك إلى true، يمكنك أيضا تعيين cloudFiles.backfillInterval خيار جدولة ملفات التصفية العادية عبر بياناتك، للتأكد من استيعاب جميع بياناتك بالكامل.
يدعم Delta الآن استبدال عشوائيا في أي مكان
بالاقتران مع وضع الكتابة فوق، replaceWhere يمكن استخدام الخيار للكتابة فوق البيانات التي تتطابق مع دالة تقييم محددة في الخيار في نفس الوقت. في السابق، replaceWhere كان يدعم دالة تقييم فقط على أعمدة القسم، ولكن يمكن أن يكون الآن تعبيرا عشوائيا. راجع الكتابة إلى جدول.
يدعم برنامج التحميل التلقائي ل Google Cloud الآن إعلامات الملفات (معاينة عامة)
يدعم "التحميل التلقائي" الآن وضع إعلام الملف على Google Cloud. قم بتعيين .option("cloudFiles.useNotifications", "true") للسماح للتحميل التلقائي بإعداد موارد Google Cloud Pub/Sub تلقائيا لك. باستخدام وضع إعلام الملف، يتم الكشف عن الملفات الجديدة واستيعابها عند وصولها دون سرد دليل الإدخال. راجع ما هو وضع إعلام ملف التحميل التلقائي؟.
يدعم CREATE FUNCTION الآن إنشاء وظائف الجدول
بالإضافة إلى إنشاء دالة عددية ترجع قيمة عددية، يمكنك الآن إنشاء دالة جدول ترجع مجموعة من الصفوف. راجع CREATE FUNCTION (SQL وPython).
يبلغ Kafka Streaming Source الآن عن المقياس estimatedTotalBytesBehindLatest
يبلغ مصدر دفق Kafka الآن عن تقدير عدد وحدات البايت التي يقف المستهلك خلف أحدث بايت متوفر بعد كل دفعة. يمكنك استخدام هذا المقياس لتعقب تقدم الدفق. راجع استرداد مقاييس Kafka.
مثال على إخراج القياس:
StreamingQueryProgress {
"batchId": 0,
.....
"sources": [ {
"description" : "KafkaV2[Subscribe[topic-0]]",
"metrics":{
"avgOffsetsBehindLatest" : "1.0",
"estimatedTotalBytesBehindLatest" : "80.0", // new
"maxOffsetsBehindLatest" : "1",
"minOffsetsBehindLatest" : "1"
} ],
....
}
بالنسبة للبنى داخل الصفائف، تقوم Delta MERGE INTO الآن بحل حقول البنية بالاسم وتتطور مخططات البنية
تدعم Delta MERGE INTO الآن دقة حقول البنية حسب الاسم وتطور المخطط التلقائي لصفائف البنيات. عند تمكين تطور المخطط التلقائي عن طريق الإعداد spark.databricks.delta.schema.autoMerge.enabled إلى صحيح، UPDATEINSERT وستقوم العبارات بحل حقول البنية داخل صفيف بالاسم، والتحويل إلى نوع البيانات المقابل الذي تم تعريفه في الصفيف الهدف وملء الحقول الإضافية أو المفقودة في المصدر أو الهدف بقيم خالية. عند تعطيل تطور المخطط التلقائي، UPDATE وستقوم INSERT العبارات بحل حقول البنية داخل صفيف بالاسم ولكن لن تكون قادرة على تطوير الحقول الإضافية. راجع تطور المخطط التلقائي لصفائف البنيات.
إصلاح الأخطاء
- تم إصلاح تسرب الذاكرة في موصل Amazon S3 الذي يمكن أن يحدث في وظائف أو خدمات طويلة الأمد، والذي كان بسبب وظيفة JVM
DeleteOnExit.
ترقيات المكتبة
- مكتبات Python التي تمت ترقيتها:
- رسم من 4.14.3 إلى 5.1.0
- مكتبات R التي تمت ترقيتها:
- قاعدة من 4.1.0 إلى 4.1.1
- bslib من 0.2.5.1 إلى 0.3.0
- ذاكرة التخزين المؤقت من 1.0.5 إلى 1.0.6
- المحول البرمجي من 4.1.0 إلى 4.1.1
- مجموعات البيانات من 4.1.0 إلى 4.1.1
- في المستقبل من 1.21.0 إلى 1.22.1
- غيرت من 1.3.1 إلى 1.3.2
- الرسومات من 4.1.0 إلى 4.1.1
- grDevices من 4.1.0 إلى 4.1.1
- شبكة من 4.1.0 إلى 4.1.1
- مكتبات Java التي تمت ترقيتها:
- org.eclipse.jetty من 9.4.36.v20210114 إلى 9.4.42.v20210604
Apache Spark
يتضمن Databricks Runtime 9.1 LTS Apache Spark 3.1.2. يتضمن هذا الإصدار جميع إصلاحات Spark وتحسيناته المضمنة في Databricks Runtime 9.0 (غير مدعوم)، بالإضافة إلى إصلاحات الأخطاء الإضافية والتحسينات التالية التي تم إجراؤها على Spark:
- [SPARK-36674][SQL] [CHERRY-PICK] دعم ILIKE - مثل غير حساس لحالة الأحرف
- [SPARK-36353][SQL] [3.1] يجب أن تحتفظ RemoveNoopOperators بمخطط الإخراج
- [SPARK-35876][SQL] [3.1] يجب أن تحتفظ ArraysZip بأسماء الحقول لتجنب إعادة كتابتها بواسطة محلل/محسن
- [SPARK-36398][SQL] تنقيح المعلومات الحساسة في سجل Spark Thrift Server
- [SPARK-36498][SQL] إعادة ترتيب الحقول الداخلية لاستعلام الإدخال في كتابة byName V2
- [SPARK-36614][CORE] [واجهة المستخدم] تصحيح سبب فقدان المنفذ بسبب إيقاف التشغيل في واجهة المستخدم
- [SPARK-36012][SQL] إضافة علامة فارغة في SHOW CREATE TABLE
- [SPARK-36509][CORE] إصلاح مشكلة عدم إعادة جدولة المنفذين أبدا إذا توقف العامل عن استخدام نظام مجموعة مستقل
- [SPARK-36603][CORE] استخدام WeakReference وليس SoftReference في LevelDB
- [SPARK-36564][CORE] إصلاح NullPointerException في LiveRDDDistribution.toApi
- [SPARK-36086][SQL] [3.1] يجب أن يستخدم الاسم المستعار لاستبدال مشروع طي المشروع اسم عمود الأصل
- [SPARK-33527][SQL] توسيع دالة فك التشفير بحيث تتسق مع قواعد البيانات الرئيسية
- [SPARK-36400][SPARK-36398][SQL] [WEBUI] جعل ThriftServer يتعرف على spark.sql.redaction.string.regex
- [SPARK-34054][CORE] تنظيف التعليمات البرمجية BlockManagerDecommissioner
- [SPARK-36500][CORE] إصلاح تسرب الملفات temp_shuffle عند مقاطعة مهمة
- [SPARK-36489][SQL] دالات التجميع عبر عدم وجود مفاتيح تجميع، في الجداول التي تحتوي على مستودع واحد، ترجع صفوفا متعددة
- [SPARK-36464][CORE] إصلاح تهيئة متغير الحجم الأساسي في ChunkedByteBufferOutputStream لكتابة أكثر من 2 غيغابايت من البيانات
- [SPARK-36339][SQL] [3.0] مراجع التجميع التي لا يجب استبدالها بجزء من التجميع
- [SPARK-36354][CORE] يجب أن يتخطى EventLogFileReader دلائل سجل الأحداث المتداولة بدون سجلات
- [SPARK-36242][CORE] [3.1] تأكد من إغلاق ملف الانسكاب قبل تعيين النجاح = صحيح في الأسلوب ExternalSorter.spillMemoryIteratorToDisk
- [SPARK-36211][PYTHON] الكتابة الصحيحة للقيمة المرجعة
udf - [SPARK-34222][SQL] تحسين قاعدة التبسيط المنطقي
- [SPARK-35027][CORE] أغلق inputStream في FileAppender عند الكتابة...
- [SPARK-36269][SQL] إصلاح تعيين أعمدة البيانات فقط إلى تكوين أسماء أعمدة Hive
- [SPARK-36213][SQL] تسوية PartitionSpec لأمر وصف الجدول باستخدام PartitionSpec
- [SPARK-36210][SQL] الاحتفاظ بترتيب إدراج العمود في Dataset.withColumns
- [SPARK-36079][SQL] يجب أن يكون تقدير عامل التصفية المستند إلى القيم الخالية دائما في النطاق [0، 1]
- [SPARK-28266][SQL] convertToLogicalRelation يجب ألا يفسر
pathالخاصية عند قراءة جداول Hive
تحديثات الصيانة
راجع تحديثات صيانة Databricks Runtime 9.1 LTS.
بيئة النظام
- نظام التشغيل: Ubuntu 20.04.4 LTS
- Java: Zulu 8.56.0.21-CA-linux64
- Scala: 2.12.10
- Python: 3.8.10
- R: 4.1.1
- Delta Lake: 1.0.0
مكتبات Python المثبتة
| مكتبة | الإصدار | مكتبة | الإصدار | مكتبة | الإصدار |
|---|---|---|---|---|---|
| Antergos Linux | 2015.10 (ISO-Rolling) | dirs | 1.4.4 | تثبيت خلفي | 0.2.0 |
| boto3 | 1.16.7 | روبوت الدردشة | 1.19.7 | شهادة | 2020.12.5 |
| تجزئة | 4.0.0 | دورة | 0.10.0 | Cython | 0.29.23 |
| dbus-python | 1.2.16 | ديكور | 5.0.6 | استياء | 0.3.2 |
| معلومات توزيعية | 0.23ubuntu1 | نظرة عامة على الواجهات | 1.0.0 | قفل الملف | 3.0.12 |
| idna | 2.10 | ipykernel | 5.3.4 | ipython | 7.22.0 |
| ipython-genutils | 0.2.0 | جدي | 0.17.2 | مسار jmespath | 0.10.0 |
| joblib | 1.0.1 | jupyter-client | 6.1.12 | jupyter-core | 4.7.1 |
| kiwisolver | 1.3.1 | الكوالا | 1.8.1 | matplotlib | 3.4.2 |
| numpy | 1.19.2 | pandas | 1.2.4 | parso | 0.7.0 |
| باتسي | 0.5.1 | pexpect | 4.8.0 | pickleshare | 0.7.5 |
| وساده | 8.2.0 | pip | 21.0.1 | بشكل مخطط | 5.1.0 |
| مجموعة أدوات المطالبة | 3.0.17 | protobuf | 3.17.2 | psycopg2 | 2.8.5 |
| عملية ptyprocess | 0.7.0 | pyarrow | 4.0.0 | Pygments | 2.8.1 |
| PyGObject | 3.36.0 | pyparsing | 2.4.7 | python-apt | 2.0.0+ubuntu0.20.4.5 |
| python-dateutil | 2.8.1 | pytz | 2020.5 | pyzmq | 20.0.0 |
| الطلبات | 2.25.1 | requests-unixsocket | 0.2.0 | s3transfer | 0.3.7 |
| scikit-learn | 0.24.1 | شفرة | 1.6.2 | بحر محمول | 0.11.1 |
| أدوات الإعداد | 52.0.0 | ستة | 1.15.0 | ssh-import-id | 5.10 |
| نماذج الإحصائيات | 0.12.2 | مثابره | 8.0.1 | threadpoolctl | 2.1.0 |
| اعصار | 6.1 | سمات السمات | 5.0.5 | ترقيات غير مراقبة | 0.1 |
| urllib3 | 1.25.11 | virtualenv | 20.4.1 | wcwidth | 0.2.5 |
| عجله | 0.36.2 |
مكتبات R المثبتة
يتم تثبيت مكتبات R من لقطة Microsoft CRAN في 2021-09-08.
| مكتبة | الإصدار | مكتبة | الإصدار | مكتبة | الإصدار |
|---|---|---|---|---|---|
| askpass | 1.1 | assertthat | 0.2.1 | backports | 1.2.1 |
| الأساس | 4.1.1 | base64enc | 0.1-3 | بت | 4.0.4 |
| bit64 | 4.0.5 | كائن ثنائي كبير الحجم | 1.2.2 | boot | 1.3-28 |
| المشروب | 1.0-6 | بريو | 1.1.2 | broom | 0.7.9 |
| bslib | 0.3.0 | ذاكرة التخزين المؤقت | 1.0.6 | callr | 3.7.0 |
| علامة إقحام | 6.0-88 | cellranger | 1.1.0 | كرون | 2.3-56 |
| فئة | 7.3-19 | cli | 3.0.1 | clipr | 0.7.1 |
| نظام مجموعة | 2.1.2 | codetools | 0.2-18 | colorspace | 2.0-2 |
| العلامة الشائعة | 1.7 | compiler | 4.1.1 | config | 0.3.1 |
| cpp11 | 0.3.1 | crayon | 1.4.1 | بيانات الاعتماد | 1.3.1 |
| curl | 4.3.2 | data.table | 1.14.0 | مجموعات البيانات | 4.1.1 |
| DBI | 1.1.1 | dbplyr | 2.1.1 | تنازلي | 1.3.0 |
| devtools | 2.4.2 | diffobj | 0.3.4 | digest | 0.6.27 |
| dplyr | 1.0.7 | dtplyr | 1.1.0 | علامة الحذف | 0.3.2 |
| التقييم | 0.14 | fansi | 0.5.0 | مسافة بعيدة | 2.1.0 |
| خريطة سريعة | 1.1.0 | forcats | 0.5.1 | Foreach | 1.5.1 |
| foreign | 0.8-81 | صياغه | 0.2.0 | fs | 1.5.0 |
| future | 1.22.1 | future.apply | 1.8.1 | الغرغره | 1.2.0 |
| generics | 0.1.0 | غيرت | 1.3.2 | ggplot2 | 3.3.5 |
| غ | 1.3.0 | صور gitcred | 0.1.1 | glmnet | 4.1-2 |
| Globals | 0.14.0 | glue | 1.4.2 | googledrive | 2.0.0 |
| googlesheets4 | 1.0.0 | gower | 0.2.2 | graphics | 4.1.1 |
| grDevices | 4.1.1 | grid | 4.1.1 | gridExtra | 2.3 |
| gsubfn | 0.7 | gtable | 0.3.0 | haven | 2.4.3 |
| highr | 0.9 | hms | 1.1.0 | htmltools | 0.5.2 |
| htmlwidgets | 1.5.3 | httpuv | 1.6.2 | httr | 1.4.2 |
| hwriter | 1.3.2 | hwriterPlus | 1.0-3 | ids | 1.0.1 |
| Ini | 0.3.1 | ipred | 0.9-11 | isoband | 0.2.5 |
| iterators | 1.0.13 | jquerylib | 0.1.4 | jsonlite | 1.7.2 |
| KernSmooth | 2.23-20 | knitr | 1.33 | labeling | 0.4.2 |
| لاحقا | 1.3.0 | lattice | 0.20-44 | lava | 1.6.10 |
| دورة الحياة | 1.0.0 | listenv | 0.8.0 | lubridate | 1.7.10 |
| magrittr | 2.0.1 | markdown | 1.1 | MASS | 7.3-54 |
| المصفوفة | 1.3-4 | المذكرة | 2.0.0 | الأساليب | 4.1.1 |
| mgcv | 1.8-36 | mime | 0.11 | ModelMetrics | 1.2.2.2 |
| modelr | 0.1.8 | munsell | 0.5.0 | nlme | 3.1-152 |
| nnet | 7.3-16 | numDeriv | 2016.8-1.1 | openssl | 1.4.5 |
| parallel | 4.1.1 | بالتوازي | 1.27.0 | pillar | 1.6.2 |
| pkgbuild | 1.2.0 | pkgconfig | 2.0.3 | pkgload | 1.2.1 |
| plogr | 0.2.0 | plyr | 1.8.6 | الثناء | 1.0.0 |
| prettyunits | 1.1.1 | بروك | 1.18.0 | processx | 3.5.2 |
| prodlim | 2019.11.13 | التقدم | 1.2.2 | متدرج التقدم | 0.8.0 |
| وعود | 1.2.0.1 | proto | 1.0.0 | ps | 1.6.0 |
| purrr | 0.3.4 | r2d3 | 0.2.5 | R6 | 2.5.1 |
| randomForest | 4.6-14 | طيور الراب | 0.3.3 | rcmdcheck | 1.3.3 |
| RColorBrewer | 1.1-2 | Rcpp | 1.0.7 | readr | 2.0.1 |
| readxl | 1.3.1 | recipes | 0.1.16 | rematch | 1.0.1 |
| إعادة المباراة2 | 2.1.2 | Remotes | 2.4.0 | reprex | 2.0.1 |
| reshape2 | 1.4.4 | rlang | 0.4.11 | rmarkdown | 2.10 |
| RODBC | 1.3-18 | roxygen2 | 7.1.1 | rpart | 4.1-15 |
| rprojroot | 2.0.2 | Rserve | 1.8-8 | RSQLite | 2.2.8 |
| rstudioapi | 0.13 | تحويلات | 2.1.1 | rvest | 1.0.1 |
| ساس | 0.4.0 | scales | 1.1.1 | selectr | 0.4-2 |
| معلومات الجلسة | 1.1.1 | الشكل | 1.4.6 | لامعه | 1.6.0 |
| قوالب المصدر | 0.1.7 | sparklyr | 1.7.1 | سبارك | 3.1.1 |
| spatial | 7.3-11 | splines | 4.1.1 | sqldf | 0.4-11 |
| SQUAREM | 2021.1 | stats | 4.1.1 | stats4 | 4.1.1 |
| stringi | 1.7.4 | stringr | 1.4.0 | survival | 3.2-13 |
| sys | 3.4 | tcltk | 4.1.1 | TeachingDemos | 2.10 |
| اختبار الذي | 3.0.4 | tibble | 3.1.4 | tidyr | 1.1.3 |
| tidyselect | 1.1.1 | tidyverse | 1.3.1 | timeDate | 3043.102 |
| tinytex | 0.33 | الأدوات | 4.1.1 | tzdb | 0.1.2 |
| استخدام هذا | 2.0.1 | utf8 | 1.2.2 | utils | 4.1.1 |
| uuid | 0.1-4 | vctrs | 0.3.8 | viridisLite | 0.4.0 |
| غرفة vroom | 1.5.4 | والدو | 0.3.0 | whisker | 0.4 |
| withr | 2.4.2 | xfun | 0.25 | xml2 | 1.3.2 |
| xopen | 1.0.0 | xtable | 1.8-4 | yaml | 2.2.1 |
| zip | 2.2.0 |
مكتبات Java و Scala المثبتة (إصدار مجموعة Scala 2.12)
| معرف مجموعة | معرف البيانات الاصطناعية | الإصدار |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | amazon-kinesis-client | 1.12.0 |
| com.amazonaws | aws-java-sdk-autoscaling | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.655 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.655 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.655 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.655 |
| com.amazonaws | aws-java-sdk-config | 1.11.655 |
| com.amazonaws | aws-java-sdk-core | 1.11.655 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.655 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.655 |
| com.amazonaws | aws-java-sdk-directory | 1.11.655 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.655 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.655 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.655 |
| com.amazonaws | aws-java-sdk-efs | 1.11.655 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.655 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.655 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.655 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.655 |
| com.amazonaws | aws-java-sdk-emr | 1.11.655 |
| com.amazonaws | aws-java-sdk-glacier | 1.11.655 |
| com.amazonaws | aws-java-sdk-glue | 1.11.655 |
| com.amazonaws | aws-java-sdk-iam | 1.11.655 |
| com.amazonaws | aws-java-sdk-importexport | 1.11.655 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.655 |
| com.amazonaws | aws-java-sdk-kms | 1.11.655 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.655 |
| com.amazonaws | aws-java-sdk-logs | 1.11.655 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.11.655 |
| com.amazonaws | تحليلات التجارة aws-java-sdk-marketplace | 1.11.655 |
| com.amazonaws | aws-java-sdk-marketplacemeteringservice | 1.11.655 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.655 |
| com.amazonaws | aws-java-sdk-rds | 1.11.655 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.655 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.655 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.655 |
| com.amazonaws | aws-java-sdk-ses | 1.11.655 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.655 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.655 |
| com.amazonaws | aws-java-sdk-sns | 1.11.655 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.655 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.655 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.11.655 |
| com.amazonaws | aws-java-sdk-sts | 1.11.655 |
| com.amazonaws | دعم aws-java-sdk | 1.11.655 |
| com.amazonaws | مكتبات aws-java-sdk-swf | 1.11.22 |
| com.amazonaws | مساحات عمل aws-java-sdk | 1.11.655 |
| com.amazonaws | jmespath-java | 1.11.655 |
| com.chuusai | shapeless_2.12 | 2.3.3 |
| com.clearspring.analytics | تيار | 2.9.6 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.12 | 0.4.15-10 |
| com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
| com.esotericsoftware | kryo مظلل | 4.0.2 |
| com.esotericsoftware | سجل الحد الأدنى | 1.3.0 |
| com.fasterxml | زميل | 1.3.4 |
| com.fasterxml.jackson.core | التعليقات التوضيحية ل جاكسون | 2.10.0 |
| com.fasterxml.jackson.core | جاكسون النواة | 2.10.0 |
| com.fasterxml.jackson.core | جاكسون-databind | 2.10.0 |
| com.fasterxml.jackson.dataformat | جاكسون-dataformat-cbor | 2.10.0 |
| com.fasterxml.jackson.datatype | جاكسون-datatype-joda | 2.10.0 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.10.0 |
| com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.10.0 |
| com.github.ben-manes.كافيين | الكافيين | 2.3.4 |
| com.github.fommil | أداة تحميل jniloader | 1.1 |
| com.github.fommil.netlib | الذاكرة الأساسية | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1.1 |
| com.github.fommil.netlib | native_ref-java-natives | 1.1 |
| com.github.fommil.netlib | native_system-java | 1.1 |
| com.github.fommil.netlib | native_system-java-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1.1 |
| com.github.joshelser | dropwizard-metrics-hadoop-metrics2-reporter | 0.1.2 |
| com.github.luben | zstd-jni | 1.4.8-1 |
| com.github.wendykierp | JTransforms | 3.1 |
| com.google.code.findbugs | jsr305 | 3.0.0 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.crypto.tink | تينك | 1.6.0 |
| com.google.flatbuffers | flatbuffers-java | 1.9.0 |
| com.google.guava | الجوافه | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.h2database | h2 | 1.4.195 |
| com.helger | profiler | 1.1.1 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | cp عظمي | 0.8.0.RELEASE |
| com.lihaoyi | sourcecode_2.12 | 0.1.9 |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.3.9 |
| com.microsoft.sqlserver | mssql-jdbc | 9.2.1.jre8 |
| com.ning | ضغط lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.tdunning | json | 1.8 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
| com.twitter | برد-java | 0.9.5 |
| com.twitter | chill_2.12 | 0.9.5 |
| com.twitter | util-app_2.12 | 7.1.0 |
| com.twitter | util-core_2.12 | 7.1.0 |
| com.twitter | util-function_2.12 | 7.1.0 |
| com.twitter | util-jvm_2.12 | 7.1.0 |
| com.twitter | util-lint_2.12 | 7.1.0 |
| com.twitter | util-registry_2.12 | 7.1.0 |
| com.twitter | util-stats_2.12 | 7.1.0 |
| com.typesafe | config | 1.2.1 |
| com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
| com.univocity | محللات أحادية التكافؤ | 2.9.1 |
| com.zaxxer | HikariCP | 3.1.0 |
| شائعات-beanutils | شائعات-beanutils | 1.9.4 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1.10 |
| المجموعات المشتركة | المجموعات المشتركة | 3.2.2 |
| تكوين المشتركات | تكوين المشتركات | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| أداة تجزئة الشائعات | أداة تجزئة الشائعات | 1.8 |
| commons-fileupload | commons-fileupload | 1.3.3 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.4 |
| commons-lang | commons-lang | 2.6 |
| تسجيل المشتركات | تسجيل المشتركات | 1.1.3 |
| commons-net | commons-net | 3.1 |
| تجمع مشترك | تجمع مشترك | 1.5.4 |
| hive-2.3__hadoop-2.7 | jets3t-0.7 | liball_deps_2.12 |
| hive-2.3__hadoop-2.7 | zookeeper-3.4 | liball_deps_2.12 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
| io.airlift | أداة ضغط الهواء | 0.10 |
| io.delta | delta-sharing-spark_2.12 | 0.1.0 |
| io.dropwizard.metrics | metrics-core | 4.1.1 |
| io.dropwizard.metrics | metrics-graphite | 4.1.1 |
| io.dropwizard.metrics | المقاييس-الفحوصات الصحية | 4.1.1 |
| io.dropwizard.metrics | metrics-jetty9 | 4.1.1 |
| io.dropwizard.metrics | metrics-jmx | 4.1.1 |
| io.dropwizard.metrics | metrics-json | 4.1.1 |
| io.dropwizard.metrics | metrics-jvm | 4.1.1 |
| io.dropwizard.metrics | metrics-servlets | 4.1.1 |
| io.netty | netty-all | 4.1.51.Final |
| io.prometheus | واجهة سطر الأوامر البسيطة | 0.7.0 |
| io.prometheus | simpleclient_common | 0.7.0 |
| io.prometheus | simpleclient_dropwizard | 0.7.0 |
| io.prometheus | simpleclient_pushgateway | 0.7.0 |
| io.prometheus | simpleclient_servlet | 0.7.0 |
| io.prometheus.jmx | جامع | 0.12.0 |
| jakarta.annotation | jakarta.annotation-api | 1.3.5 |
| jakarta.validation | jakarta.validation-api | 2.0.2 |
| jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
| javax.activation | التنشيط | 1.1.1 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | jta | 1.1 |
| javax.transaction | واجهة برمجة تطبيقات المعاملات | 1.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| التفاف دائري | التفاف دائري | 5.5.1 |
| jline | jline | 2.14.6 |
| joda-time | joda-time | 2.10.5 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| أشجار maven | hive-2.3__hadoop-2.7 | liball_deps_2.12 |
| net.java.dev.jna | jna | 5.8.0 |
| net.razorvine | pyrolite | 4.30 |
| net.sf.jpam | jpam | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | snowflake-ingest-sdk | 0.9.6 |
| net.snowflake | snowflake-jdbc | 3.13.3 |
| net.snowflake | spark-snowflake_2.12 | 2.9.0-spark_3.1 |
| net.sourceforge.f2j | arpack_combined_all | 0.1 |
| org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | وقت تشغيل antlr | 3.5.2 |
| org.antlr | وقت تشغيل antlr4 | 4.8-1 |
| org.antlr | سلسلة قوالب | 3.2.1 |
| org.apache.ant | النمل | 1.9.2 |
| org.apache.ant | نملة-jsch | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.سهم | تنسيق السهم | 2.0.0 |
| org.apache.سهم | ذاكرة أساسية للسهم | 2.0.0 |
| org.apache.سهم | سهم-ذاكرة-netty | 2.0.0 |
| org.apache.سهم | خط متجه للسهم | 2.0.0 |
| org.apache.avro | افرو | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.commons | ضغط الشائعات | 1.20 |
| org.apache.commons | commons-crypto | 1.1.0 |
| org.apache.commons | commons-lang3 | 3.10 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.commons | commons-text | 1.6 |
| org.apache.curator | عميل أمين | 2.7.1 |
| org.apache.curator | إطار عمل أمين | 2.7.1 |
| org.apache.curator | وصفات أمين | 2.7.1 |
| org.apache.derby | ديربي | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | تعليقات توضيحية ل hadoop | 2.7.4 |
| org.apache.hadoop | hadoop-auth | 2.7.4 |
| org.apache.hadoop | عميل hadoop | 2.7.4 |
| org.apache.hadoop | hadoop-common | 2.7.4 |
| org.apache.hadoop | hadoop-hdfs | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-common | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-core | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.4 |
| org.apache.hive | hive-beeline | 2.3.7 |
| org.apache.hive | hive-cli | 2.3.7 |
| org.apache.hive | hive-jdbc | 2.3.7 |
| org.apache.hive | عميل hive-llap | 2.3.7 |
| org.apache.hive | hive-llap-common | 2.3.7 |
| org.apache.hive | hive-serde | 2.3.7 |
| org.apache.hive | hive-shims | 2.3.7 |
| org.apache.hive | hive-storage-api | 2.7.2 |
| org.apache.hive.shims | hive-shims-0.23 | 2.3.7 |
| org.apache.hive.shims | hive-shims-common | 2.3.7 |
| org.apache.hive.shims | hive-shims-scheduler | 2.3.7 |
| org.apache.htrace | htrace-core | 3.1.0 حاضنة |
| org.apache.httpcomponents | httpclient | 4.5.6 |
| org.apache.httpcomponents | httpcore | 4.4.12 |
| org.apache.ivy | اللبلاب | 2.4.0 |
| org.apache.mesos | mesos-shaded-protobuf | 1.4.0 |
| org.apache.orc | orc-core | 1.5.12 |
| org.apache.orc | orc-mapreduce | 1.5.12 |
| org.apache.orc | orc-shims | 1.5.12 |
| org.apache.parquet | عمود باركيه | 1.10.1-databricks9 |
| org.apache.parquet | parquet-common | 1.10.1-databricks9 |
| org.apache.parquet | ترميز باركيه | 1.10.1-databricks9 |
| org.apache.parquet | تنسيق باركيه | 2.4.0 |
| org.apache.parquet | parquet-hadoop | 1.10.1-databricks9 |
| org.apache.parquet | باركيه جاكسون | 1.10.1-databricks9 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.12.0 |
| org.apache.xbean | xbean-asm7 مظلل | 4.15 |
| org.apache.yetus | التعليقات التوضيحية للجمهور | 0.5.0 |
| org.apache.zookeeper | zookeeper | 3.4.14 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | جاكسون جاكرس | 1.9.13 |
| org.codehaus.jackson | جاكسون-mapper-asl | 1.9.13 |
| org.codehaus.jackson | جاكسون-xc | 1.9.13 |
| org.codehaus.janino | محول برمجي مشترك | 3.0.16 |
| org.codehaus.janino | جانينو | 3.0.16 |
| org.datanucleus | datanucleus-api-jdo | 4.2.4 |
| org.datanucleus | datanucleus-core | 4.1.17 |
| org.datanucleus | datanucleus-rdbms | 4.1.19 |
| org.datanucleus | javax.jdo | 3.2.0-m3 |
| org.eclipse.jetty | عميل jetty | 9.4.42.v20210604 |
| org.eclipse.jetty | متابعة jetty | 9.4.42.v20210604 |
| org.eclipse.jetty | jetty-http | 9.4.42.v20210604 |
| org.eclipse.jetty | jetty-io | 9.4.42.v20210604 |
| org.eclipse.jetty | jetty-jndi | 9.4.42.v20210604 |
| org.eclipse.jetty | jetty-plus | 9.4.42.v20210604 |
| org.eclipse.jetty | وكيل jetty | 9.4.42.v20210604 |
| org.eclipse.jetty | jetty-security | 9.4.42.v20210604 |
| org.eclipse.jetty | خادم jetty | 9.4.42.v20210604 |
| org.eclipse.jetty | jetty-servlet | 9.4.42.v20210604 |
| org.eclipse.jetty | jetty-servlets | 9.4.42.v20210604 |
| org.eclipse.jetty | jetty-util | 9.4.42.v20210604 |
| org.eclipse.jetty | jetty-util-ajax | 9.4.42.v20210604 |
| org.eclipse.jetty | jetty-webapp | 9.4.42.v20210604 |
| org.eclipse.jetty | jetty-xml | 9.4.42.v20210604 |
| org.eclipse.jetty.websocket | websocket-api | 9.4.42.v20210604 |
| org.eclipse.jetty.websocket | عميل websocket | 9.4.42.v20210604 |
| org.eclipse.jetty.websocket | websocket-common | 9.4.42.v20210604 |
| org.eclipse.jetty.websocket | خادم websocket | 9.4.42.v20210604 |
| org.eclipse.jetty.websocket | websocket-servlet | 9.4.42.v20210604 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.6.1 |
| org.glassfish.hk2 | محدد موقع hk2 | 2.6.1 |
| org.glassfish.hk2 | hk2-utils | 2.6.1 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.3 |
| org.glassfish.hk2.external | إعادة حزم الأوبالين | 2.6.1 |
| org.glassfish.hk2.external | jakarta.inject | 2.6.1 |
| org.glassfish.jersey.containers | جيرسي حاوية-servlet | 2.30 |
| org.glassfish.jersey.containers | جيرسي-حاوية-servlet-core | 2.30 |
| org.glassfish.jersey.core | جيرسي-العميل | 2.30 |
| org.glassfish.jersey.core | جيرسي المشتركة | 2.30 |
| org.glassfish.jersey.core | خادم جيرسي | 2.30 |
| org.glassfish.jersey.inject | جيرسي-hk2 | 2.30 |
| org.glassfish.jersey.media | جيرسي-وسائل الإعلام-جاكسب | 2.30 |
| org.hibernate.validator | مدقق الإسبات | 6.1.0.Final |
| org.javassist | javassist | 3.25.0-GA |
| org.jboss.logging | تسجيل jboss | 3.3.2.Final |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1.7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.12 | 3.7.0-M5 |
| org.json4s | json4s-core_2.12 | 3.7.0-M5 |
| org.json4s | json4s-jackson_2.12 | 3.7.0-M5 |
| org.json4s | json4s-scalap_2.12 | 3.7.0-M5 |
| org.lz4 | lz4-java | 1.7.1 |
| org.mariadb.jdbc | mariadb-java-client | 2.2.5 |
| org.objenesis | داء objenesis | 2.5.1 |
| org.postgresql | الانترنت | 42.1.4 |
| org.roaringbitmap | هديرBitmap | 0.9.14 |
| org.roaringbitmap | الحشوات | 0.9.14 |
| org.rocksdb | rocksdbjni | 6.20.3 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.12 | 2.12.10 |
| org.scala-lang | scala-library_2.12 | 2.12.10 |
| org.scala-lang | scala-reflect_2.12 | 2.12.10 |
| org.scala-lang.modules | scala-collection-compat_2.12 | 2.1.1 |
| org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
| org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
| org.scala-sbt | واجهة الاختبار | 1.0 |
| org.scalacheck | scalacheck_2.12 | 1.14.2 |
| org.scalactic | scalactic_2.12 | 3.0.8 |
| org.scalanlp | macros_2.12 | 1.0 |
| org.scalanlp | breeze_2.12 | 1.0 |
| org.scalatest | scalatest_2.12 | 3.0.8 |
| org.slf4j | jcl-over-slf4j | 1.7.30 |
| org.slf4j | jul-to-slf4j | 1.7.30 |
| org.slf4j | slf4j-api | 1.7.30 |
| org.slf4j | slf4j-log4j12 | 1.7.30 |
| org.spark-project.spark | غير مستخدم | 1.0.0 |
| org.springframework | spring-core | 4.1.4.RELEASE |
| org.springframework | spring-test | 4.1.4.RELEASE |
| org.threeten | ثلاثتين إضافية | 1.5.0 |
| org.tukaani | xz | 1.5 |
| مستوى org.typelevel | algebra_2.12 | 2.0.0-M2 |
| مستوى org.typelevel | cats-kernel_2.12 | 2.0.0-M4 |
| مستوى org.typelevel | machinist_2.12 | 0.6.8 |
| مستوى org.typelevel | ماكرو-compat_2.12 | 1.1.1 |
| مستوى org.typelevel | spire-macros_2.12 | 0.17.0-M1 |
| مستوى org.typelevel | spire-platform_2.12 | 0.17.0-M1 |
| مستوى org.typelevel | spire-util_2.12 | 0.17.0-M1 |
| مستوى org.typelevel | spire_2.12 | 0.17.0-M1 |
| org.wildfly.openssl | wildfly-openssl | 1.0.7.Final |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.8.2 |
| org.yaml | ثعبان الثعبان | 1.24 |
| oro | oro | 2.0.8 |
| pl.edu.icm | JLargeArrays | 1.5 |
| software.amazon.ion | ion-java | 1.0.2 |
| stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0.52 |