Databricks Runtime 10.2 （不支援）

  • 發行項

下列版本資訊提供由 Apache Spark 3.2.0 提供的 Databricks Runtime 10.2 和 Databricks Runtime 10.2 Photon 的相關信息。 Databricks 於 2021 年 12 月發行了這些映像。 Photon 處於 公開預覽狀態。

新功能和改善

搭配 Spark 串流使用 Repos 中的檔案

您現在可以從 Spark 串流存取 Repos 中的檔案。

Databricks 公用程式會新增更新掛接命令

新的命令類似於 dbutils.fs.mount，但這個新dbutils.fs.updateMount命令會更新現有的裝入點，而不是建立新的裝入點。 請參閱 updateMount 命令 （dbutils.fs.updateMount） 。

Delta Lake 支援重新命名資料列 （公開預覽）

Delta Lake 現在支援數據行重新命名。 若要重新命名 Delta 資料表的數據行，您必須升級 Delta 數據表的版本，然後將數據行對應模式設定為名稱對應。 請參閱 使用 Delta Lake 數據行對應來重新命名和卸除數據行。

Delta Lake 數據表歷程記錄會新增 Databricks 執行時間版本資訊

現在對 Delta 數據表進行寫入時，也會記錄建立寫入之 Databricks Runtime 版本的相關信息。 若要取得版本資訊，請在資料表上執行 DESCRIBE HISTORY 命令，然後查看 engineInfo 輸出中的數據行。 請參閱 DESCRIBE HISTORY and Work with Delta Lake table history。

Databricks 公用程式會在列出目錄時新增最新的修改時間資訊

列出 dbutils.fs.ls 目錄內容的命令現在會輸出 modificationTime 欄位。 此欄位包含每個欄位的檔案或目錄的最新修改時間。 請參閱 ls 指令 （dbutils.fs.ls） 。

Spark SQL 新增函 approx_top_k 式以傳回最上層專案及其計數

新 approx_top_k 函式會針對指定的表達式傳回最常發生的專案值及其近似計數。 這些範例包含：

df = spark.sql('SELECT approx_top_k(col, 10, 100) FROM VALUES (0), (1), (1), (2), (2), (2) AS tab(col)')

display(df)

import pyspark.sql.functions as F

df = spark.createDataFrame([
       (0,), (1,), (1,), (2,), (2,), (2,)
     ]).select(F.expr('approx_top_k(_1, 10)'))

display(df)

執行任一範例的結果為：

[{"item": 2, "count": 3}, {"item": 1, "count": 2}, {"item": 0, "count": 1}]

請參閱 approx_top_k聚合函數。

Trigger.AvailableNow 現在可在 Python 和 Scala 中使用

這項變更支援 Python 和 Scala 中的 Delta 來源串流查詢 Trigger.AvailableNow 。 Databricks Runtime 10.1 引進了在 Scala 中此觸發程序的支援。 Databricks Runtime 10.2 現在也支援 Python 中的此觸發程式。 請參閱什麼是自動載入器？中的涵蓋範圍Trigger.AvailableNow。

自動載入器現在支援 Avro 的架構演進 （公開預覽）

請參閱 在自動載入器中設定架構推斷和演進。

連結庫升級

  • 升級的 Python 連結庫：
    • filelock from 3.3.1 to 3.4.0
    • 從 5.3.0 到 5.3.1 的繪圖
  • 升級的 R 連結庫：
    • base 從 4.1.1 到 4.1.2
    • 編譯程式從 4.1.1 到 4.1.2
    • 從 4.1.1 到 4.1.2 的數據集
    • 從 4.1.1 到 4.1.2 的圖形
    • grDevices 從 4.1.1 到 4.1.2
    • 從 4.1.1 到 4.1.2 的方格
    • 從 4.1.1 到 4.1.2 的方法
    • 平行從 4.1.1 到 4.1.2
    • 從 1.8-8 到 1.8-10 的 Rserve
    • 從 4.1.1 到 4.1.2 的曲線
    • 從 4.1.1 到 4.1.2 的統計數據
    • stats4 從 4.1.1 到 4.1.2
    • tcltk 從 4.1.1 到 4.1.2
    • 從 4.1.1 到 4.1.2 的工具
    • utils from 4.1.1 to 4.1.2
    • 從 1.2.1 到 1.4.0 的反向移植
    • 從 0.7.9 到 0.7.10 的掃把
    • cli 從 3.0.1 到 3.1.0
    • cpp11 從 0.4.0 到 0.4.1
    • 從 1.4.1 到 1.4.2 的 crayon
    • 從 1.3.1 到 1.3.2 的認證
    • 未來從 1.22.1 到 1.23.0
    • 從 1.4.1 到 1.4.3 的 gert
    • 從 4.1-2 到 4.1-3 的 glmnet
    • 從 1.4.2 到 1.5.0 的黏附
    • 備忘從 2.0.0 到 2.0.1
    • 平行從 1.28.1 到 1.29.0
    • 自 2.0.2 到 2.1.0 的 readr
    • sessioninfo 從 1.1.1 到 1.2.1
    • stringi 從 1.7.5 到 1.7.6
    • 從 3.1.5 到 3.1.6 的 tibble
    • tinytex from 0.34 to 0.35
    • tzdb 從 0.1.2 到 0.2.0
    • usethis from 2.1.2 to 2.1.3
    • 從 0.1-4 到 1.0-3 的 uuid
    • 從 1.5.5 到 1.5.6 的 vroom
    • 從 0.27 到 0.28 的 xfun
  • 升級的 Java 連結庫：
    • com.fasterxml.jackson 從 2.12.2 到 2.12.3
    • io.airlift.aircompressor from 0.19 to 0.21
    • io.netty.netty-all 從 4.1.63.Final 到 4.1.68.Final
    • joda-time.joda-time 從 2.10.5 到 2.10.10
    • org.apache.commons.commons-compress 從 1.20 到 1.21
    • org.apache.orc 從 1.6.10 到 1.6.12
    • org.eclipse.jetty 從 9.4.40.v20210413 到 9.4.43.v20210629
    • org.scalanlp.breeze-macros_2.12 從 1.0 到 1.2
    • 從 1.0 到 1.2 org.scalanlp.breeze_2.12
    • 從 2.0.0 到 2.0.1 的 org.org.typelevel.algebra_2.12
    • org.typelevel.cats-kernel_2.12，從 2.0.0 到 2.0.1

Apache Spark

Databricks Runtime 10.2 包含 Apache Spark 3.2.0。 此版本包含 Databricks Runtime 10.1 中所包含的所有 Spark 修正和改善，以及下列對 Spark 進行的其他錯誤修正和改進：

  • [SPARK-37447] [SQL]Cache LogicalPlan.isStreaming（） 會導致延遲 val
  • [SPARK-37468] [SQL]支援 UnionEstimation 的 ANSI 間隔和 TimestampNTZ
  • [SPARK-37464] [SQL]SCHEMA 和 DATABASE 應該是 NAMESPACE 的別名
  • [SPARK-37452] [SQL]Char 和 Varchar 會中斷 v3.1 與 v2 之間的回溯相容性
  • [SPARK-36861] [SQL]使用 yyyy-MM-dd 作為數據分割探索中的日期模式
  • [SPARK-37456] [SQL]CREATE NAMESPACE 應符合 v2 命令的位置
  • [SPARK-37357] [SQL]新增用於重新平衡數據分割的小型分割區因數
  • [SPARK-37446] [SQL]使用 getWithoutRegisterFns 的反映來允許不同的 Hive 版本進行建置
  • [SPARK-37444] [SQL]ALTER NAMESPACE ... SET LOCATION 應該一致地處理 v1 和 v2 命令的空白位置
  • [SPARK-36357] [SQL]支持沒有 orc 時區的下推時間戳
  • [SPARK-36346] [SQL]支援 Orc 檔案來源中的 TimestampNTZ 類型
  • [SPARK-36646] [SQL]依數據分割數據行向下推入群組以進行匯總
  • [SPARK-34960] [SQL]ORC 的匯總下推
  • [SPARK-37386] [SQL]簡化 OptimizeSkewedJoin 以不執行成本評估工具
  • [SPARK-36073] [SQL]EquivalentExpressions 修正和改善
  • [SPARK-35352] [SQL]新增完整外部排序合併聯結的程式代碼 Gen
  • [SPARK-37292] [SQL]如果外部聯結只有具有別名的數據流端有 DISTINCT，則移除外部聯結
  • [SPARK-37371] [SQL]如果所有子系支援單欄式，UnionExec 應該支援單欄式
  • [SPARK-36645] [SQL]Parquet 的匯總 （最小值/最大值/計數） 下推
  • [SPARK-37379] [SQL]將樹狀結構模式剪除新增至 CTESubstitution 規則
  • [SPARK-37332] [SQL]允許中的 ANSI 間隔 ALTER TABLE .. ADD COLUMNS
  • [SPARK-37224] [SS]優化 RocksDB 狀態存放區提供者上的寫入路徑
  • [SPARK-37304] [SQL]允許 v2 中的 ANSI 間隔 ALTER TABLE .. REPLACE COLUMNS
  • [SPARK-36924] [SQL]ANSI 間隔與 IntegralType 之間的 CAST
  • [SPARK-37289] [SQL]Remove partitionSchemaOption 函式
  • [SPARK-37270] [SQL]如果 elseValue 是空的，請修正可折疊至 CaseWhen 分支
  • [SPARK-35345] [SQL]將 Parquet 測試新增至 BloomFilterBenchmark
  • [SPARK-37341] [SQL]避免不必要的緩衝區，並在完整外部排序合併聯結中複製
  • [SPARK-37266] [SQL]檢視文字只能是 SELECT 查詢
  • [SPARK-37288] [PYTHON][3.2] 批注更新之後的Backport
  • [SPARK-37262] [SQL]請勿在 JDBCScan 中記錄空的匯總和群組
  • [SPARK-37283] [SQL]請勿嘗試儲存包含Hive相容格式 ANSI 間隔的 V1 資料表
  • [SPARK-37221] [SQL]SparkPlan 中的類似收集 API 應該支援單欄輸出
  • [SPARK-37202] [SQL]使用 AnalysisContext 追蹤參考的暫存函式
  • [SPARK-37023] [CORE]當 shuffleMergeEnabled 在重試期間隨機顯示為 false 時，請避免擷取合併狀態
  • [SPARK-37307] [CORE]請勿取得空白分割區的 JDBC 連線
  • [SPARK-37267] [SQL]OptimizeSkewInRebalancePartitions 支持優化非根節點
  • [SPARK-36799] [SQL]在 CLI 中傳遞 queryExecution 名稱
  • [SPARK-37261] [SQL]允許在 DSv2 中使用 ANSI 間隔新增分割區
  • [SPARK-37203] [SQL]使用 TypedImperativeAggregate 觀察時修正 NotSerializableException
  • [SPARK-37199] [SQL]將決定性欄位新增至 QueryPlan
  • [SPARK-37253] [PYTHON] try_simplify_traceback 當 為 None 時 tb_frame.f_lineno 不應該失敗
  • [SPARK-37214] [SQL]先前的查詢分析失敗，標識碼無效
  • [SPARK-37240] [SQL]處理 ANSI 間隔依據 ColumnVectorUtils.populate()
  • [SPARK-35437] [SQL]使用表達式來篩選用戶端的Hive分割區
  • [SPARK-32940] [SQL]收集，第一個和最後一個應該是決定性聚合函數
  • [SPARK-37231] [SQL]ANSI 間隔分割區的動態寫入/讀取
  • [SPARK-37038] [SQL]DSV2 範例下推
  • [SPARK-36665] [SQL]新增更多 Not 運算子簡化
  • [SPARK-37150] [SQL]移轉 DESCRIBE NAMESPACE 以預設使用 V2 命令
  • [SPARK-37196] [SQL]HiveDecimal enforcePrecisionScale 傳回 Null 失敗
  • [SPARK-37212] [SQL]改善匯總下推的實作。
  • [SPARK-37190] [SQL]改善 ANSI 模式下轉換的錯誤訊息
  • [SPARK-37161] [SQL]RowToColumnConverter 支援 AnsiIntervalType
  • [SPARK-37160] [SQL]新增組態以選擇性地停用char類型的填補
  • [SPARK-36554] [SQL][PYTHON]在 functions.scala 中公開make_date表達式
  • [SPARK-37200] [SQL]支持數據源 V2 的卸除索引
  • [SPARK-37179] [SQL]ANSI 模式：新增設定以允許在 Datetime 與 Numeric 之間轉換
  • [SPARK-37168] [SQL]改善 ANSI 模式下 SQL 函式和運算子的錯誤訊息
  • [SPARK-36935] [SQL]擴充 ParquetSchemaConverter 以計算 Parquet 重複和定義層級
  • [SPARK-37066] [SQL]改善錯誤訊息，以在無法讀取下一個檔案時顯示檔案路徑
  • [SPARK-32567] [SQL]為完整外部隨機哈希聯結新增程序代碼 Gen
  • [SPARK-37176] [SQL]使用 JacksonParser#parse 方法同步處理 JsonInferSchema#infer 方法的例外狀況句柄邏輯
  • [SPARK-37149] [SQL]改善 ANSI 模式下算術溢位例外狀況的錯誤訊息
  • [SPARK-37136] [SQL]拿掉hive buildin函式的相關程序代碼，但不在spark中實作
  • [SPARK-16280][SPARK-37082] [SQL]實作支援部分匯總的histogram_numeric聚合函數。
  • [SPARK-36975] [SQL]更正 HiveClientImpl 中 Hive 用戶端呼叫的計量

維護更新

請參閱 Databricks Runtime 10.2 維護更新。

系統環境

  • 作業系統：Ubuntu 20.04.3 LTS
  • Java：Zulu 8.58.0.13-CA-linux64
  • Scala：2.12.14
  • Python：3.8.10
  • R：4.1.2
  • Delta Lake：1.1.0

已安裝的 Python 程式庫

程式庫 版本 程式庫 版本 程式庫 版本
Antergos Linux 2015.10 （ISO-Rolling） appdirs 1.4.4 argon2-cffi 20.1.0
async-generator 1.10 attrs 20.3.0 backcall 0.2.0
bidict 0.21.4 bleach 3.3.0 boto3 1.16.7
botocore 1.19.7 certifi 2020.12.5 cffi 1.14.5
chardet 4.0.0 cycler 0.10.0 Cython 0.29.23
dbus-python 1.2.16 decorator 5.0.6 defusedxml 0.7.1
distlib 0.3.3 distro-info 0.23ubuntu1 entrypoints 0.3
facets-overview 1.0.0 filelock 3.4.0 idna 2.10
ipykernel 5.3.4 ipython 7.22.0 ipython-genutils 0.2.0
ipywidgets 7.6.3 jedi 0.17.2 Jinja2 2.11.3
jmespath 0.10.0 joblib 1.0.1 jsonschema 3.2.0
jupyter-client 6.1.12 jupyter-core 4.7.1 jupyterlab-pygments 0.1.2
jupyterlab-widgets 1.0.0 kiwisolver 1.3.1 koalas 1.8.2
MarkupSafe 2.0.1 matplotlib 3.4.2 mistune 0.8.4
nbclient 0.5.3 nbconvert 6.0.7 nbformat 5.1.3
nest-asyncio 1.5.1 notebook 6.3.0 numpy 1.19.2
封裝 20.9 pandas 1.2.4 pandocfilters 1.4.3
parso 0.7.0 patsy 0.5.1 pexpect 4.8.0
pickleshare 0.7.5 Pillow 8.2.0 pip 21.0.1
plotly 5.3.1 prometheus-client 0.10.1 prompt-toolkit 3.0.17
protobuf 3.17.2 psycopg2 2.8.5 ptyprocess 0.7.0
pyarrow 4.0.0 pycparser 2.20 Pygments 2.8.1
PyGObject 3.36.0 pyparsing 2.4.7 火熱 0.17.3
python-apt 2.0.0+ubuntu0.20.4.6 python-dateutil 2.8.1 python-engineio 4.3.0
python-socketio 5.4.1 pytz 2020.5 pyzmq 20.0.0
requests 2.25.1 requests-unixsocket 0.2.0 s3transfer 0.3.7
scikit-learn 0.24.1 scipy 1.6.2 seaborn 0.11.1
Send2Trash 1.5.0 setuptools 52.0.0 六次 1.15.0
ssh-import-id 5.10 statsmodels 0.12.2 tenacity 8.0.1
terminado 0.9.4 testpath 0.4.4 threadpoolctl 2.1.0
tornado 6.1 traitlets 5.0.5 自動升級 0.1
urllib3 1.25.11 virtualenv 20.4.1 wcwidth 0.2.5
webencodings 0.5.1 wheel 0.36.2 widgetsnbextension 3.5.1

已安裝的 R 連結庫

R 連結庫會從 2021-11-30 上的 Microsoft CRAN 快照集安裝。

程式庫 版本 程式庫 版本 程式庫 版本
askpass 1.1 assertthat 0.2.1 backports 1.4.0
base 4.1.2 base64enc 0.1-3 bit 4.0.4
bit64 4.0.5 blob 1.2.2 boot 1.3-28
brew 1.0-6 brio 1.1.2 broom 0.7.10
bslib 0.3.1 cachem 1.0.6 callr 3.7.0
caret 6.0-90 cellranger 1.1.0 chron 2.3-56
class 7.3-19 cli 3.1.0 clipr 0.7.1
叢集 2.1.2 codetools 0.2-18 colorspace 2.0-2
commonmark 1.7 compiler 4.1.2 config 0.3.1
cpp11 0.4.1 crayon 1.4.2 credentials 1.3.2
curl 4.3.2 data.table 1.14.2 datasets 4.1.2
DBI 1.1.1 dbplyr 2.1.1 遞減 1.4.0
devtools 2.4.2 diffobj 0.3.5 digest 0.6.28
dplyr 1.0.7 dtplyr 1.1.0 e1071 1.7-9
省略符號 0.3.2 evaluate 0.14 fansi 0.5.0
farver 2.1.0 fastmap 1.1.0 fontawesome 0.2.2
forcats 0.5.1 foreach 1.5.1 foreign 0.8-81
forge 0.2.0 fs 1.5.0 future 1.23.0
future.apply 1.8.1 漱口 1.2.0 泛型 0.1.1
格特 1.4.3 ggplot2 3.3.5 gh 1.3.0
gitcreds 0.1.1 glmnet 4.1-3 globals 0.14.0
glue 1.5.0 googledrive 2.0.0 googlesheets4 1.0.0
gower 0.2.2 graphics 4.1.2 grDevices 4.1.2
grid 4.1.2 gridExtra 2.3 gsubfn 0.7
gtable 0.3.0 避風港 2.4.3 highr 0.9
hms 1.1.1 htmltools 0.5.2 htmlwidgets 1.5.4
httpuv 1.6.3 httr 1.4.2 hwriter 1.3.2
hwriterPlus 1.0-3 ids 1.0.1 ini 0.3.1
ipred 0.9-12 isoband 0.2.5 iterators 1.0.13
jquerylib 0.1.4 jsonlite 1.7.2 KernSmooth 2.23-20
針織機 1.36 labeling 0.4.2 later 1.3.0
lattice 0.20-45 Lava 1.6.10 生命週期 1.0.1
listenv 0.8.0 lubridate 1.8.0 magrittr 2.0.1
markdown 1.1 MASS 7.3-54 矩陣 1.3-4
備忘 2.0.1 方法 4.1.2 mgcv 1.8-38
mime 0.12 ModelMetrics 1.2.2.2 modelr 0.1.8
蒙塞爾 0.5.0 nlme 3.1-152 nnet 7.3-16
numDeriv 2016.8-1.1 openssl 1.4.5 parallel 4.1.2
parallelly 1.29.0 pillar 1.6.4 pkgbuild 1.2.0
pkgconfig 2.0.3 pkgload 1.2.3 plogr 0.2.0
plyr 1.8.6 讚美 1.0.0 prettyunits 1.1.1
pROC 1.18.0 processx 3.5.2 prodlim 2019.11.13
進度 1.2.2 progressr 0.9.0 promises 1.2.0.1
proto 1.0.0 proxy 0.4-26 ps 1.6.0
purrr 0.3.4 r2d3 0.2.5 R6 2.5.1
randomForest 4.6-14 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-2 Rcpp 1.0.7 RcppEigen 0.3.3.9.1
readr 2.1.0 readxl 1.3.1 recipes 0.1.17
rematch 1.0.1 rematch2 2.1.2 remotes 2.4.1
reprex 2.0.1 reshape2 1.4.4 rlang 0.4.12
rmarkdown 2.11 RODBC 1.3-19 roxygen2 7.1.2
rpart 4.1-15 rprojroot 2.0.2 Rserve 1.8-10
RSQLite 2.2.8 rstudioapi 0.13 rversions 2.1.1
rvest 1.0.2 sass 0.4.0 scales 1.1.1
selectr 0.4-2 sessioninfo 1.2.1 shape 1.4.6
shiny 1.7.1 sourcetools 0.1.7 sparklyr 1.7.2
SparkR 3.2.0 spatial 7.3-11 splines 4.1.2
sqldf 0.4-11 SQUAREM 2021.1 stats 4.1.2
stats4 4.1.2 stringi 1.7.6 stringr 1.4.0
survival 3.2-13 sys 3.4 tcltk 4.1.2
TeachingDemos 2.10 testthat 3.1.0 tibble 3.1.6
tidyr 1.1.4 tidyselect 1.1.1 tidyverse 1.3.1
timeDate 3043.102 tinytex 0.35 tools 4.1.2
tzdb 0.2.0 usethis 2.1.3 utf8 1.2.2
utils 4.1.2 uuid 1.0-3 vctrs 0.3.8
viridisLite 0.4.0 vroom 1.5.6 waldo 0.3.1
晶須 0.4 withr 2.4.2 xfun 0.28
xml2 1.3.2 xopen 1.0.0 xtable 1.8-4
yaml 2.2.1 zip 2.2.0

已安裝的 Java 和 Scala 連結庫 （Scala 2.12 叢集版本）

群組識別碼 成品標識碼 版本
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.11.655
com.amazonaws aws-java-sdk-cloudformation 1.11.655
com.amazonaws aws-java-sdk-cloudfront 1.11.655
com.amazonaws aws-java-sdk-cloudhsm 1.11.655
com.amazonaws aws-java-sdk-cloudsearch 1.11.655
com.amazonaws aws-java-sdk-cloudtrail 1.11.655
com.amazonaws aws-java-sdk-cloudwatch 1.11.655
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.655
com.amazonaws aws-java-sdk-codedeploy 1.11.655
com.amazonaws aws-java-sdk-cognitoidentity 1.11.655
com.amazonaws aws-java-sdk-cognitosync 1.11.655
com.amazonaws aws-java-sdk-config 1.11.655
com.amazonaws aws-java-sdk-core 1.11.655
com.amazonaws aws-java-sdk-datapipeline 1.11.655
com.amazonaws aws-java-sdk-directconnect 1.11.655
com.amazonaws aws-java-sdk-directory 1.11.655
com.amazonaws aws-java-sdk-dynamodb 1.11.655
com.amazonaws aws-java-sdk-ec2 1.11.655
com.amazonaws aws-java-sdk-ecs 1.11.655
com.amazonaws aws-java-sdk-efs 1.11.655
com.amazonaws aws-java-sdk-elasticache 1.11.655
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.655
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.655
com.amazonaws aws-java-sdk-elastictranscoder 1.11.655
com.amazonaws aws-java-sdk-emr 1.11.655
com.amazonaws aws-java-sdk-glacier 1.11.655
com.amazonaws aws-java-sdk-glue 1.11.655
com.amazonaws aws-java-sdk-iam 1.11.655
com.amazonaws aws-java-sdk-importexport 1.11.655
com.amazonaws aws-java-sdk-kinesis 1.11.655
com.amazonaws aws-java-sdk-kms 1.11.655
com.amazonaws aws-java-sdk-lambda 1.11.655
com.amazonaws aws-java-sdk-logs 1.11.655
com.amazonaws aws-java-sdk-machinelearning 1.11.655
com.amazonaws aws-java-sdk-opsworks 1.11.655
com.amazonaws aws-java-sdk-rds 1.11.655
com.amazonaws aws-java-sdk-redshift 1.11.655
com.amazonaws aws-java-sdk-route53 1.11.655
com.amazonaws aws-java-sdk-s3 1.11.655
com.amazonaws aws-java-sdk-ses 1.11.655
com.amazonaws aws-java-sdk-simpledb 1.11.655
com.amazonaws aws-java-sdk-simpleworkflow 1.11.655
com.amazonaws aws-java-sdk-sns 1.11.655
com.amazonaws aws-java-sdk-sqs 1.11.655
com.amazonaws aws-java-sdk-ssm 1.11.655
com.amazonaws aws-java-sdk-storagegateway 1.11.655
com.amazonaws aws-java-sdk-sts 1.11.655
com.amazonaws aws-java-sdk-support 1.11.655
com.amazonaws aws-java-sdk-js-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.655
com.amazonaws jmespath-java 1.11.655
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics stream 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo-shaded 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml 同學 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.12.3
com.fasterxml.jackson.core jackson-core 2.12.3
com.fasterxml.jackson.core jackson-databind 2.12.3
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.12.3
com.fasterxml.jackson.datatype jackson-datatype-joda 2.12.3
com.fasterxml.jackson.module jackson-module-paranamer 2.12.3
com.fasterxml.jackson.module jackson-module-scala_2.12 2.12.3
com.github.ben-manes.咖啡因 咖啡因 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib 核心 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.luben zstd-jni 1.5.0-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.6
com.google.crypto.tink 小 叮噹 1.6.0
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava 番 石榴 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 1.4.195
com.helger 分析器 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 9.2.1.jre8
com.ning compress-lzf 1.0.3
com.sun.istack istack-commons-runtime 3.0.8
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.2
commons-codec commons-codec 1.15
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.8.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 1.3.2
dev.ludovic.netlib blas 1.3.2
dev.ludovic.netlib lapack 1.3.2
hive-2.3__hadoop-3.2 jets3t-0.7 liball_deps_2.12
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.21
io.delta delta-sharing-spark_2.12 0.2.0
io.dropwizard.metrics metrics-core 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics metrics-healthchecks 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics metrics-servlet 4.1.1
io.netty netty-all 4.1.68.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx 收藏家 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation 啟用 1.1.1
javax.annotation javax.annotation-api 1.3.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction Jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.10
Log4j apache-log4j-extras 1.2.17
Log4j Log4j 1.2.17
maven-trees hive-2.3__hadoop-3.2 liball_deps_2.12
net.java.dev.jna jna 5.8.0
net.razorvine pyolite 4.30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.3
net.snowflake spark-snowflake_2.12 2.9.0-spark_3.1
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow arrow-format 2.0.0
org.apache.arrow arrow-memory-core 2.0.0
org.apache.arrow arrow-memory-netty 2.0.0
org.apache.arrow arrow-vector 2.0.0
org.apache.avro avro 1.10.2
org.apache.avro avro-ipc 1.10.2
org.apache.avro avro-mapred 1.10.2
org.apache.commons commons-compress 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.4.1
org.apache.commons commons-text 1.6
org.apache.curator curator-client 2.13.0
org.apache.curator curator-framework 2.13.0
org.apache.curator 策展人-食譜 2.13.0
org.apache.derby Derby 10.14.2.0
org.apache.hadoop hadoop-client-api 3.3.1-databricks
org.apache.hadoop hadoop-client-runtime 3.3.1
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.htrace htrace-core4 4.1.0-incubating
org.apache.httpcomponents httpclient 4.5.13
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy 常春藤 2.5.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.6.12
org.apache.orc orc-mapreduce 1.6.12
org.apache.orc orc-shims 1.6.12
org.apache.parquet parquet-column 1.12.0-databricks-0003
org.apache.parquet parquet-common 1.12.0-databricks-0003
org.apache.parquet parquet-encoding 1.12.0-databricks-0003
org.apache.parquet parquet-format-structure 1.12.0-databricks-0003
org.apache.parquet parquet-hadoop 1.12.0-databricks-0003
org.apache.parquet parquet-jackson 1.12.0-databricks-0003
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-shaded 4.20
org.apache.yetus audience-annotations 0.5.0
org.apache.zookeeper zookeeper 3.6.2
org.apache.zookeeper zookeeper-jute 3.6.2
org.checkerframework checker-qual 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.43.v20210629
org.eclipse.jetty jetty-continuation 9.4.43.v20210629
org.eclipse.jetty jetty-http 9.4.43.v20210629
org.eclipse.jetty jetty-io 9.4.43.v20210629
org.eclipse.jetty jetty-jndi 9.4.43.v20210629
org.eclipse.jetty jetty-plus 9.4.43.v20210629
org.eclipse.jetty jetty-proxy 9.4.43.v20210629
org.eclipse.jetty jetty-security 9.4.43.v20210629
org.eclipse.jetty jetty-server 9.4.43.v20210629
org.eclipse.jetty jetty-servlet 9.4.43.v20210629
org.eclipse.jetty jetty-servlets 9.4.43.v20210629
org.eclipse.jetty jetty-util 9.4.43.v20210629
org.eclipse.jetty jetty-util-ajax 9.4.43.v20210629
org.eclipse.jetty jetty-webapp 9.4.43.v20210629
org.eclipse.jetty jetty-xml 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-api 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-client 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-common 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-server 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-servlet 9.4.43.v20210629
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jaxb jaxb-runtime 2.3.2
org.glassfish.jersey.containers jersey-container-servlet 2.34
org.glassfish.jersey.containers jersey-container-servlet-core 2.34
org.glassfish.jersey.core jersey-client 2.34
org.glassfish.jersey.core 澤西-通用 2.34
org.glassfish.jersey.core jersey-server 2.34
org.glassfish.jersey.inject jersey-hk2 2.34
org.hibernate.validator hibernate-validator 6.1.0.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains annotations 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-client 2.2.5
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.2.19
org.roaringbitmap RoaringBitmap 0.9.14
org.roaringbitmap 墊片 0.9.14
org.rocksdb rocksdbjni 6.20.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.14
org.scala-lang scala-library_2.12 2.12.14
org.scala-lang scala-reflect_2.12 2.12.14
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1.2
org.scalanlp breeze_2.12 1.2
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark 閑置 1.0.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.threeten threeten-extra 1.5.0
org.tukaani xz 1.8
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml 蛇形 1.24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1