通过


Databricks Runtime 18.1 (Beta)

以下发行说明提供有关 Databricks Runtime 18.1(Beta 版)的信息。

此版本包含所有以前 Databricks Runtime 版本中的所有功能、改进和 bug 修复。 Databricks 于 2026 年 2 月发布了此版本。

重要

Databricks Runtime 18.1 处于 Beta 阶段。 在 Beta 版期间,支持的环境的内容可能会更改。 更改可能包括包列表或已安装包的版本。

新功能和改进

自动加载程序在可用时默认使用文件事件

从启用了文件事件的外部位置加载时,自动加载器默认使用文件事件,这相比目录列表减少了列表操作和成本。 请参阅 Auto Loader 文件事件概述。 如果流代码设置 useIncrementalListinguseNotifications,文件事件将不会被使用。 若要改用目录列表,请设置为 useManagedFileEventsfalse

针对使用 CRTAS 创建的已分区 Unity 目录表的优化写入

优化写入适用于以 CREATE OR REPLACE TABLE ... AS SELECT(CRTAS)创建的已分区 Unity Catalog 表,从而生成更少且更大的文件。 默认情况下,此行为处于启用状态。 若要禁用,请设置为 spark.databricks.delta.optimizeWrite.UCTableCRTAS.enabledfalse.

MICROSOFT Azure Synapse 的 DATETIMEOFFSET 数据类型支持

支持 DATETIMEOFFSET 数据类型用于 Microsoft Azure Synapse 连接。

Google BigQuery 表注释

Google BigQuery 表描述被解析并显示为表注释。

使用 INSERT 语句的架构演变

WITH SCHEMA EVOLUTION 子句与 SQL INSERT 语句结合使用,在插入作期间自动改进目标表的架构。 支持INSERT INTOINSERT OVERWRITEINSERT INTO ... REPLACE表单的子句。 例如:

INSERT WITH SCHEMA EVOLUTION INTO students TABLE visiting_students_with_additional_id;

目标 Delta Lake 表的架构已更新,以适应源中的其他列或扩展类型。 有关详细信息,请参阅 架构演变INSERT 语句语法

在INSERT操作中保留了NULL结构体的值

INSERT 在源表和目标表的结构字段顺序不同的情况下,包含架构演变或隐式类型转换的操作会保留 NULL 结构值。

Delta Sharing 多语句事务支持

使用预签名 URL 或云令牌共享模式的 Delta Sharing 表支持多语句事务。 在事务中首次访问时,表版本会被锁定,并在该事务的所有后续读取中重用。

Limitations:

  • 不支持时间旅行、变更数据流以及流式处理。
  • 没有历史记录的共享表不支持多语句事务处理。
  • 不受信任的计算环境不允许共享视图和外来实体。

卷路径中的数据帧检查点

DataFrame 检查点支持 Unity 目录卷路径。 使用 SparkContext.setCheckpointDir 在专用计算上配置检查点路径,或在标准计算上使用 spark.checkpoint.dir 配置。

调用缓存时,SQL 命令不再重新运行()

调用 .cache() 结果数据帧时,不再重新运行 SQL 命令。 这包括命令,如 SHOW TABLESSHOW NAMESPACES

parse_timestamp SQL 函数

parse_timestamp SQL 函数针对多个模式分析时间戳字符串。 它被光子化,以便通过各种格式的时间戳更快速地进行评估。 有关日期时间模式格式的信息,请参阅< c0>日期时间模式。

复合语句中的 SQL 游标支持

SQL 脚本 复合语句现在支持游标处理。 使用 DECLARE CURSOR 定义游标,然后使用 OPEN 语句FETCH 语句CLOSE 语句 来运行查询,并逐行处理。 游标可以使用参数标记和条件处理器,例如 NOT FOUND,用于逐行处理。

近似 top-k 概略函数

新功能支持构建和组合用于分布式 top-K 聚合的近似 top-K 草图。

有关详细信息,请参阅 approx_top_k 聚合函数内置函数

元组草图函数

元组草图的新聚合和标量函数支持通过键摘要对进行不同的计数和聚合。

聚合函数:

标量函数:

  • tuple_sketch_estimate
  • tuple_sketch_summary
  • tuple_sketch_theta
  • tuple_union
  • tuple_intersection
  • tuple_difference

请参阅 内置函数

行为变更

MEASURE 聚合函数的 FILTER 子句

MEASURE 聚合函数现在支持 FILTER 子句。 以前,筛选器会被默默忽略。

关于Unity Catalog中CRTAS操作的优化写入

CREATE OR REPLACE TABLE AS SELECT(CRTAS)操作现在默认地将优化的写入应用于分区的 Unity Catalog 表。 若要禁用,请设置为 spark.databricks.delta.optimizeWrite.UCTableCRTAS.enabledfalse.

DataFrame缓存刷新以支持精细访问控制表

写入专用计算上的 精细访问控制 表后,依赖表的缓存数据帧会被刷新。

时间戳分区值使用会话时区

时间戳分区值使用 Spark 会话时区而不是 JVM 时区。 如果在 Databricks Runtime 18.0 之前写入了时间戳分区,请在写入新数据之前运行 SHOW PARTITIONS 以验证分区元数据。

DESCRIBE FLOW 保留关键字

DESCRIBE FLOW 命令现已可用。 如果有一个名为flow的表,使用DESCRIBE schema.flowDESCRIBE TABLE flowDESCRIBE `flow` 反引号。

地理空间操作性能改进

地理空间布尔集操作使用一种具有改进性能的新实现。 小精度差异可能会在第 15 位小数点之后发生。

SQLSTATE 的异常类型

将更新异常类型 以支持 SQLSTATE。 如果代码按字符串匹配分析异常或捕获特定异常类型,请更新错误处理逻辑。

自动流类型拓宽

Delta 表上的流式读取会自动处理列类型扩展。 若要要求手动确认,请设置为 spark.databricks.delta.typeWidening.enableStreamingSchemaTrackingtrue

图书馆升级

此版本中未升级任何库。

Apache Spark

Databricks Runtime 18.1 包括 Apache Spark 4.1.0。 此版本包括 Databricks Runtime 18.0 中包含的所有 Spark 修复和改进,以及以下对 Spark 进行的其他 bug 修复和改进:

  • SPARK-55350 修复从包含 0 列的 pandas 创建数据帧时的行数丢失问题
  • SPARK-55364 使 SupportsIAdd 和 SupportsOrdering 协议更加合理
  • SPARK-53656 重构 MemoryStream 以使用 SparkSession 而不是 SQLContext
  • SPARK-55472从 pandas 3 中删除的方法引发AttributeError
  • SPARK-55224 在 Pandas-Arrow 序列化中使用 Spark DataType 作为参照标准
  • SPARK-55402 将 streamingSourceIdentifyingName 从 CatalogTable 移动到 DataSource
  • SPARK-55459 修复适用于大型组的 applyInPandas 中的 3 倍性能回归
  • SPARK-55317 添加 SequentialUnion 逻辑计划节点和规划规则
  • SPARK-55424convert_numpy中显式传递系列名称
  • SPARK-55175 从序列化程序中提取 to_pandas 转换器
  • SPARK-55304 在 Python 数据源中引入对准入控制和 Trigger.AvailableNow 的支持——流式读取器
  • SPARK-55382Executor 记录到 Running Spark version
  • SPARK-55408 使用 pandas 3 处理与日期时间相关的意外关键字参数错误
  • SPARK-55345 不要通过单元并关闭到 Timedelta for pandas 3
  • SPARK-54759 在游标引入后正确保护脚本变量管理器中的逻辑
  • SPARK-55409 使用 pandas 3 处理 read_excel 函数中的意外关键字参数错误
  • SPARK-55403 修复 no attribute 'draw' pandas 3 绘图测试中的错误
  • SPARK-55256 还原“[SC-218596][SQL] 支持 array_agg 和 collect_list 的忽略 NULLS / 尊重 NULLS”
  • SPARK-55256 支持对array_agg和collect_list忽略 NULLS/尊重 NULLS
  • SPARK-55395 禁用 RDD 缓存 DataFrame.zipWithIndex
  • SPARK-55131 引入一种新的 RocksDB 合并运算符,将其分隔符设置为空字符串,以便在合并时不使用分隔符进行连接
  • SPARK-55376 使 groupby 函数中的 numeric_only 参数在 pandas 3 中仅接受布尔值
  • SPARK-55334convert_numpy中启用TimestampTypeTimestampNTZType
  • SPARK-55281 将 ipykernel 和 IPython 添加到 mypy 可选包列表
  • SPARK-55336 让 createDF 使用create_batch逻辑进行分离
  • SPARK-55366从 Python UDF 中删除errorOnDuplicatedFieldNames
  • SPARK-54759 SQL 脚本游标支持
  • SPARK-55302 修复自定义指标(如果出现这种情况) KeyGroupedPartitioning
  • SPARK-55228 在 Scala API 中实现 Dataset.zipWithIndex
  • SPARK-55373 改进 noHandlerFoundForExtension 错误消息
  • SPARK-55356 支持 PIVOT 子句的别名
  • SPARK-55359 提升 TaskResourceRequestStable
  • SPARK-55365 泛化箭头数组转换的工具
  • SPARK-55106 为 TransformWithState 运算符添加分区整合测试
  • SPARK-55086 将 DataSourceReader.pushFilters 添加到 Python 数据源 API 文档
  • SPARK-46165 添加对 DataFrame.all 轴=None 的支持
  • SPARK-55289 还原“[SC-218749][SQL] 通过禁用广播连接来修复不稳定测试 in-set-operations.sql”
  • SPARK-55297 基于原始 dtype 还原 timedelta dtype
  • SPARK-55291 在客户端拦截器构造时预处理元数据标头
  • SPARK-55155 重新应用“[SC-218401][SQL] 支持在 SET CATALOG 语句中可折叠表达式”
  • SPARK-55318 vector_avg/vector_sum的性能优化
  • SPARK-55295 扩展ST_GeomFromWKB函数以采用可选的 SRID 值
  • SPARK-55280 添加 GetStatus proto 以支持执行状态监视
  • SPARK-54969 实现新的 arrow-pandas> 转换
  • SPARK-55176 将转换器拆分为 ArrowArrayToPandasConversion
  • SPARK-55111 还原“[SC-217817][SC-210791][SS] 在查询重启时检测出未完成的重新分区”
  • SPARK-55252 改进 HttpSecurityFilter 以添加 Content-Security-Policy 标头
  • SPARK-55111 查询重启时未完成的重新分区检测
  • SPARK-55105 添加 Join 运算符的集成测试
  • SPARK-55260 实现对地理类型的 Parquet 写入支持
  • SPARK-54523 修复变体下推期间的默认分辨率
  • SPARK-55328 在 GroupedPythonArrowInput 中重复使用 PythonArrowInput.codec
  • SPARK-55246 为 Pyspark TWS 和 TWSInPandas 添加测试并修复 StatePartitionAllColumnFamiliesWriter 的缺陷
  • SPARK-55289 通过禁用广播加入来修复异常测试in-set-operations.sql
  • SPARK-55040 对 TaskContext 和相关 worker 协议进行重构,并用 pyspark 引擎进行修复。
  • SPARK-47996 支持 pandas API 中的交叉合并
  • SPARK-55031 添加向量 avg/sum 聚合函数表达式
  • SPARK-54410 修复对变体逻辑类型批注的读取支持
  • SPARK-54776 还原“[SC-216482][SQL] 改进了有关 SQL UDF 的 lambda 函数的日志消息”
  • SPARK-55123 添加 SequentialUnionOffset 以跟踪顺序源处理
  • SPARK-54972 改进包含不可为 null 列的 NOT IN 子查询
  • SPARK-54776 改进了有关使用 SQL UDF 的 lambda 函数的日志消息
  • SPARK-53807 修复 unlockreleaseAllLocksForTaskBlockInfoManager 中的条件争用问题
  • SPARK-51831 撤销“[SC-207389][SQL] 对 Datasource V2 使用 existsJoin 进行的列修剪操作”
  • SPARK-54881 改进 BooleanSimplification 以处理一个通道中的结合和解构的否定
  • SPARK-54696 在 Connect 中清理 Arrow 缓冲区
  • SPARK-55009 从构造函数中删除不必要的内存副本 LevelDBTypeInfo/RocksDBTypeInfo.Index
  • SPARK-54877 使 UI 错误页上的显示堆栈跟踪可配置
  • SPARK-51831 在 Datasource V2 中通过 existsJoin 实现列修剪
  • SPARK-55285 修复初始化 PythonArrowInput
  • SPARK-53960 让approx_top_k_accumulate/combine/estimate处理NULL值
  • SPARK-49110 简化 SubqueryAlias.metadataOutput 以始终传播元数据列
  • SPARK-55155 还原“[SC-218401][SQL] 支持语句中的 SET CATALOG 可折叠表达式”
  • SPARK-55155 支持语句中的 SET CATALOG 可折叠表达式
  • SPARK-49110 还原“[SC-218594][SQL] 简化 SubqueryAlias.metadataOutput 以始终传播元数据列”
  • SPARK-54399 在 Scala 和 PySpark 中实现 st_setsrid 函数
  • SPARK-49110 简化 SubqueryAlias.metadataOutput 以始终传播元数据列
  • SPARK-55133 修复 IsolatedSessionState 生命周期管理中的竞争条件
  • SPARK-55262 阻止所有文件数据源中除 Parquet 以外的地理信息类型
  • SPARK-54202 允许从 GeometryType(srid)强制转换为 GeometryType(ANY)
  • SPARK-54142 在 Scala 和 PySpark 中实现 st_srid 函数
  • SPARK-54887 始终在 spark connect 客户端中设置 sql 状态
  • SPARK-55237 查找不存在的 DB 时禁止显示令人恼火的消息
  • SPARK-55040 还原“[SC-217628][PYTHON] 重构 TaskContext 和相关辅助角色协议”
  • SPARK-55243 允许通过 Scala Connect 客户端中的 -bin 后缀设置二进制标头
  • SPARK-55259 实现地理类型的 Parquet 架构转换
  • SPARK-55282 避免在驱动程序端使用worker_util
  • SPARK-54151 介绍在 PySpark 中添加 ST 函数的框架
  • SPARK-55194 通过将平展逻辑移动到映射器来删除 GroupArrowUDFSerializer
  • SPARK-55020 执行 gRPC 命令时禁用 gc
  • SPARK-55053 重构数据源/udtf 分析辅助角色,使其具有统一条目
  • SPARK-55040 重构 TaskContext 和相关工作器协议
  • SPARK-55244 将 np.nan 用作 pandas 字符串类型的默认值
  • SPARK-55225 还原为 Datetime 的原始数据类型
  • SPARK-55154 删除 pandas 3 中 pd.Series 的 fastpath
  • SPARK-55030 添加矢量规范/规范化函数表达式支持
  • SPARK-55202 修复了使用参数标记时出现的UNEXPECTED_USE_OF_PARAMETER_MARKER错误。
  • SPARK-54201 允许将 GeographyType(srid)转换为 GeographyType(ANY)
  • SPARK-54244 引入对 GEOMETRY 数据类型的类型强制支持
  • SPARK-54160 在 SQL 中实现ST_SetSrid表达式
  • SPARK-55046 PySpark 添加 udf 处理时间指标
  • SPARK-54101 介绍在 Scala 中添加 ST 函数的框架
  • SPARK-54683 统一地理和时间类型阻塞
  • SPARK-55249 使 DataFrame.toJSON 能够返回数据帧
  • SPARK-54521 添加转换至和从 WKB 的几何类型
  • SPARK-54162 允许从 GeographyType 类型转换为 GeometryType
  • SPARK-55146 重新评估 PySpark 的状态分区重组 API
  • SPARK-55140 不要将内置函数映射到 pandas 3 的 numpy 版本
  • SPARK-54243 引入对 GEOGRAPHY 数据类型的类型强制支持
  • SPARK-55058 对不一致的检查点元数据抛出错误
  • SPARK-55108 使用最新的 pandas-stubs 进行类型检查
  • SPARK-54091 在 SQL 中实现ST_Srid表达式
  • SPARK-55104 添加对 DataStreamReader.name() 的 Spark Connect 支持
  • SPARK-54996 报告 LowLatencyMemoryStream 记录的到达时间
  • SPARK-55118 替换 ASM Opcodes 的通配符导入
  • SPARK-54365 为聚合、去重、FMGWS 和 SessionWindow 运算符添加重新分区集成测试
  • SPARK-55119 修复 Continue Handler:防止INTERNAL_ERROR和不正确的条件语句中断
  • SPARK-54104 禁止将地理空间类型转换为其他数据类型或从其他数据类型转换成地理空间类型
  • SPARK-55240 重构 LazyTry stacktrace 的处理方式,改用包装器而非抑制异常
  • SPARK-55238将地理 SRS 映射逻辑从main/scala移到main/java
  • SPARK-55179 跳过在df.col_name中的即时列名验证
  • SPARK-55055 支持适用于 PySpark 经典版的 SparkSession.Builder.create
  • SPARK-55186 使ArrowArrayToPandasConversion.convert_legacy能够返回pd.DataFrame
  • SPARK-54079 介绍在 Catalyst 中添加 ST 表达式的框架
  • SPARK-54096 支持 PySpark 中的空间引用系统映射
  • SPARK-54801 将一些新的 4.1 配置标记为内部配置
  • SPARK-55146 还原“[SC-217936][SC-210779][SS] State Repartition API for PySpark”
  • SPARK-54559 使用 runnerConf 传递探查器选项
  • SPARK-55205 修复假定字符串类型将转换为对象的测试
  • SPARK-55171 修复迭代 UDF 上的内存分析器
  • SPARK-55226 使用 [ns] 以外的单位识别日期/时间
  • SPARK-55027 将 writeConf 移动到 PythonWorkerUtils
  • SPARK-55197 提取 _write_stream_start 帮助程序以删除重复数据START_ARROW_STREAM信号逻辑
  • SPARK-54179 添加对 Apache Tuple Sketches 的原生支持(#190848) (#191111)
  • SPARK-55151 修复 RocksDBSuite testWithStateStoreCheckpointIds
  • SPARK-55146 适用于 PySpark 的状态重新分区 API
  • SPARK-54232 为地理和几何图形类型启用箭头序列化
  • SPARK-53957 支持 SpatialReferenceSystemMapper 中的 GEOGRAPHY 和 GEOMETRY
  • SPARK-55169 在 ArrowStreamArrowUDTFSerializer 中使用ArrowBatchTransformer.flatten_struct
  • SPARK-55134 修正 BasicExecutorFeatureStep 以在执行程序 CPU 配置错误时抛出 IllegalArgumentException
  • SPARK-54166 在 PySpark 中为地理空间类型引入类型编码器
  • SPARK-55138 修复 convertToMapData 引发 NullPointerException
  • SPARK-55168 在 GroupArrowUDFSerializer 中使用ArrowBatchTransformer.flatten_struct
  • SPARK-55032 在 workers.py 中重构性能分析器
  • SPARK-54990 修复了 session.py 中的 classproperty 实现问题
  • SPARK-55076 修复 ml/mllib 中的类型提示问题并添加 scipy 要求
  • SPARK-55162 从 ArrowStreamUDFSerializer 中提取转换器
  • SPARK-55121 将 DataStreamReader.name() 添加到经典 PySpark
  • SPARK-54887 将可选的 sqlstate 添加到 sparkthrowables
  • SPARK-54169 在箭头编写器中引入地理和几何图形类型
  • SPARK-51658 引入几何和地理的内存中包装格式
  • SPARK-54110 介绍地理和几何类型的类型编码器
  • SPARK-54956 统一不确定随机重试解决方案
  • SPARK-55137 重构 GroupingAnalyticsTransformerAnalyzer 代码
  • SPARK-54103 引入客户端地理和几何类
  • SPARK-55160 将输入架构直接传递给序列化程序
  • SPARK-55170 从序列化程序中提取分组流读取模式
  • SPARK-55125 删除箭头序列化程序中的冗余 __init__ 方法
  • SPARK-55126 从 ArrowStreamArrowUDFSerializer 中删除未使用的时区和assign_cols_by_name
  • SPARK-54980 将 JDBC 隔离级别转换为字符串
  • SPARK-55051 字节字符串接受 KiB、MiB、GiB、TiB、PiB
  • SPARK-55025 使用列表解析提高 pandas 的性能
  • SPARK-46165 添加对 pandas 的支持。DataFrame.all 轴=1
  • SPARK-55037 在不使用 QueryExecutionListener 的情况下重新实现观察
  • SPARK-54965 分解旧版 pa。数组 -> pd。系列转换器
  • SPARK-55016 使 SQLConf 成为 SparkSession 的直接属性,以防止堆栈溢出
  • SPARK-55091 减少 DROP TABLE 命令的 Hive RPC 调用
  • SPARK-55097 修复重新添加缓存的项目会以无提示方式删除块的问题
  • SPARK-55026 优化 BestEffortLazyVal。
  • SPARK-55091 还原“[SC-217410][SQL] 减少命令的 DROP TABLE Hive RPC 调用”
  • SPARK-54590 支持检查点 V2 用于状态重写器和重新分区
  • SPARK-55016 使 SQLConf 成为 SparkSession 的直接属性,以防止堆栈溢出
  • SPARK-55091 减少 DROP TABLE 命令的 Hive RPC 调用
  • SPARK-55016 还原“[SC-217401][SQL] 使 SQLConf 成为 SparkSession 的直接属性,以防止堆栈溢出”
  • SPARK-55016 使 SQLConf 成为 SparkSession 的直接属性,以防止堆栈溢出
  • SPARK-55098 矢量化 UDF 的输出批大小控制导致失败和内存泄漏
  • SPARK-54824 添加对 MultiGet 和 deleteRange for Rocksdb State Store 的支持
  • SPARK-55054 添加对流式表值函数的 IDENTIFIED BY 支持
  • SPARK-55029 通过解析管道传播数据流源标识名称
  • SPARK-55071 使 spark.addArtifact 适用于 Windows 路径
  • SPARK-54103 撤销「[SC-210400][Geo][SQL] 引入客户端 Geography 和 Geometry 类」
  • SPARK-54103 引入客户端 Geography 和 Geometry 类
  • SPARK-54033 引入 Catalyst 服务器端地理空间执行类
  • SPARK-54176 将地理和几何数据类型引入 PySpark Connect
  • SPARK-55089 更正 toJSON 的输出架构
  • SPARK-55035 在子执行中执行随机清除
  • SPARK-55036 添加 ArrowTimestampConversion 箭头时区处理
  • SPARK-55090在 Python 客户端中实现DataFrame.toJSON
  • SPARK-54873 简化 V2TableReference 解析,因为只有临时视图才可能包含它
  • SPARK-52828 对排序规则字符串进行哈希处理,使其不受具体排序规则的影响
  • SPARK-54175 将 Geography 和 Geometry 类型添加到 Spark Connect 协议
  • SPARK-54961 介绍 GroupingAnalyticsTransformer
  • SPARK-55088 将元数据保留在 to/from_arrow_type/schema 中
  • SPARK-55070 允许数据帧列解析中的隐藏列
  • SPARK-55044 将元数据保留在ArrowSchema/fromArrowSchema 中
  • SPARK-55043 修复包含表引用的子查询的时间回溯
  • SPARK-54987 将prefer_timestamp_ntz的默认值更改为 True from_arrow_type/from_arrow_schema
  • SPARK-54866 重构 Drop/RefreshFunction 以避免目录查找
  • SPARK-55024 对会话目录命名空间验证使用REQUIRES_SINGLE_PART_NAMESPACE错误
  • SPARK-54992 将强制转换替换为运行时检查make_timestamp
  • SPARK-55024 还原“[SC-216987][SQL] 对会话目录命名空间验证使用REQUIRES_SINGLE_PART_NAMESPACE错误”
  • SPARK-54866 还原“[SC-216753][SQL] 重构 Drop/RefreshFunction 以避免目录查找”
  • SPARK-55024 在会话目录命名空间验证中使用REQUIRES_SINGLE_PART_NAMESPACE错误
  • SPARK-54866 重构 Drop/RefreshFunction 以避免目录查找
  • SPARK-54991 修正 streaming/listener.py 的类型提示
  • SPARK-54925 添加用于 pyspark 的线程转储功能
  • SPARK-54803 支持使用名称 INSERT ... 替换 WHERE
  • SPARK-54785 在 KLL 中添加对二进制草图聚合的支持 (#188370) (#188860)
  • SPARK-54949 将 pyproject.toml 移动到存储库根目录
  • SPARK-54954 修复 util.py 中的远程相关类型提示
  • SPARK-54922 统一将参数传递给 Python 辅助角色的方式
  • SPARK-54870 对 char/varchar 和 CTAS/RTAS 的排序规则提供支持
  • SPARK-54762 修复 _create_convertercovert 重载签名
  • SPARK-55019 允许 DROP TABLE 删除 VIEW
  • SPARK-53103 如果在查询启动时状态目录不为空,则引发错误
  • SPARK-54995 为 foreachPartition 创建快速路径
  • SPARK-54634 为空 IN 谓词添加明确的错误消息
  • SPARK-54984 状态重新分区执行并与状态重写器集成
  • SPARK-54443 在重新分区读取器中集成 PartitionKeyExtractor
  • SPARK-54907 介绍用于流式处理源演变的 NameStreamingSources 分析器规则
  • SPARK-54609 更新 TIME 类型配置以符合 OSS 的配置
  • SPARK-54988 简化 ObservationManager.tryComplete 的实现
  • SPARK-54959 启用基于推送的混排时禁用随机校验和不匹配完全重试
  • SPARK-54940 为 pa.scalar 类型推理添加测试
  • SPARK-54634 还原“[SC-216478][SQL] 为空 IN 谓词添加明确的错误消息”
  • SPARK-54337 向 Pyspark 添加对 PyCapsule 的支持
  • SPARK-54634 为空 IN 谓词添加明确的错误消息
  • SPARK-53785 RTM 的内存源
  • SPARK-54883 清理 CLI 的错误消息并添加新错误模式 DEBUG
  • SPARK-54713 添加矢量相似性/距离函数表达式支持
  • SPARK-54962 修复 Pandas UDF 中的可空整数处理问题
  • SPARK-54864 将 rCTE 节点添加到 NormalizePlan
  • SPARK-53847 为实时模式测试添加 ContinuousMemorySink
  • SPARK-54865 将 foreachWithSubqueriesAndPruning 方法添加到 QueryPlan
  • SPARK-54930 删除 worker.py 中的冗余_accumulatorRegistry.clear() 调用
  • SPARK-54929 修复在循环中重置taskContext._resources导致只能保留最后一个资源的问题。
  • SPARK-54963使createDataFrame遵循prefer_timestamp_ntzinfer_pandas_dict_as_map
  • SPARK-54920 将分组分析提取逻辑移动到通用 GroupingAnalyticsExtractor
  • SPARK-54924 状态重写器用于读取状态、对其进行转换并写入新状态
  • SPARK-54872 在 v1 和 v2 命令之间统一列默认值处理
  • SPARK-54905 简化 QueryPlan 中的 foreachWithSubqueries 实现
  • SPARK-54682 支持在 DESCRIBE PROCEDURE 中显示参数
  • SPARK-54933避免在中反复提取配置
  • SPARK-54872 还原“[SC-216260][SQL] 在 v1 和 v2 命令之间统一列默认值处理”
  • SPARK-51936 ReplaceTableAsSelect 应覆盖新表而不是追加
  • SPARK-54771 从 RuleIdCollection 中删除 ResolveUserSpecifiedColumns 规则
  • SPARK-54872 在 v1 和 v2 命令之间统一列默认值处理
  • SPARK-54313 添加用于配置分层的 --extra-properties-file 选项
  • SPARK-54468 添加缺少的错误类
  • SPARK-46741 当计划表达式子查询中包含 CTE 时,带有 CTE 的缓存表可以工作
  • SPARK-46741 使用 CTE 的缓存表不起作用
  • SPARK-54615 始终将 runner_conf 传递给 Python 工作者
  • SPARK-53737 添加实时模式触发器
  • SPARK-54541 重命名_LEGACY_ERROR_TEMP_1007并添加 sqlState
  • SPARK-54718 在 CTE newInstance 期间保留属性名称()
  • SPARK-54621 合并到更新集 * 如果启用 coerceNestedTypes 则保留嵌套字段
  • SPARK-54595 保留现有行为,不带MERGE INTO EVOLUTION 子句SCHEMA
  • SPARK-54903 使to_arrow_schema/to_arrow_type能够设置时区
  • SPARK-52326 添加与 ExternalCatalogEvent 相关的分区,并在相应的操作中发布它们。
  • SPARK-54541 还原“[SC-215212][SQL] 重命名_LEGACY_ERROR_TEMP_1007并添加 sqlState”
  • SPARK-54578 执行代码清理 AssignmentUtils
  • SPARK-54830 默认启用基于校验和的不确定性洗牌重试
  • SPARK-54525在配置下禁用嵌套结构强制MERGE INTO
  • SPARK-53784 支持 RTM 执行所需的其他源 API
  • SPARK-54496 修复数据帧 API 合并到架构演变
  • SPARK-54835 避免在嵌套命令执行过程中出现不必要的临时 QueryExecution
  • SPARK-54541 重命名_LEGACY_ERROR_TEMP_1007并添加 sqlState
  • SPARK-54289 允许 MERGE INTO 在源结构的嵌套字段少于目标结构时,保留现有的结构字段UPDATESET。
  • SPARK-54720 使用架构添加 SparkSession.emptyDataFrame
  • SPARK-54800 更改了 isObjectNotFoundException 的默认实现
  • SPARK-54686 放宽临时视图中的 DSv2 表检查,以便支持新的顶级列
  • SPARK-54619 为配置参数添加健全性检查
  • SPARK-54726 提高 InsertAdaptiveSparkPlan 的一点性能
  • SPARK-51966 将 select.select() 替换为在 POSIX os 上运行时的 select.poll()
  • SPARK-54749 修复 OneRowRelationExec 中的错误 numOutputRows 指标
  • SPARK-54411 介绍支持多 CF 的重新分区编写器
  • SPARK-54835 还原“[SC-215823][SQL] 避免在嵌套命令执行中产生不必要的临时 QueryExecution”
  • SPARK-54867 在分析过程中引入用于源标识的 NamedStreamingRelation 包装器
  • SPARK-54835 避免在嵌套命令执行时产生不必要的临时 QueryExecution
  • SPARK-54491 修复了在 DSv2 表上插入临时视图失败的问题
  • SPARK-54871 在处理分组分析之前,从分组和聚合表达式中剪裁别名
  • SPARK-51920 修复 transfromWithState 的 namedTuple 的类型处理
  • SPARK-54526 重命名_LEGACY_ERROR_TEMP_1133并添加 sqlState
  • SPARK-54424 在重新缓存过程中发生的失败不应导致操作失败
  • SPARK-54894 修复传入的参数 to_arrow_type
  • SPARK-53448 将具有 Variant 列的 pyspark DataFrame 转换为 pandas 失败,并出现错误
  • SPARK-54882 删除旧版PYARROW_IGNORE_TIMEZONE
  • SPARK-54504 修复 DSv2 表中包含子查询的版本刷新问题
  • SPARK-54444 放宽 DSv2 表检查以恢复到之前的行为状态
  • SPARK-54859 默认情况下,Arrow PySpark UDF API 参考文档
  • SPARK-54387 还原“[ES-1688666] 还原“[SC-212394][SQL] 修复 DSv2 表的重新缓存””
  • SPARK-54753 修复 ArtifactManager 的内存泄漏
  • SPARK-54387 撤销“[SC-212394][SQL] 修复 DSv2 表的重新缓存”
  • SPARK-54436 修复了不兼容表元数据检查的错误格式设置
  • SPARK-54849 将最低版本 pyarrow 升级到 18.0.0
  • SPARK-54022 使 DSv2 表解析能够识别缓存的表
  • SPARK-54387 修复 DSv2 表的重新缓存问题
  • SPARK-53924 在访问视图时,重新加载使用计划创建的 DSv2 表
  • SPARK-54561 支持断点() run-tests.py
  • SPARK-54157 修复在 Dataset 中刷新 DSv2 表的问题
  • SPARK-54830 还原“[CORE] 默认启用基于校验和的不确定随机重试”
  • SPARK-54861 在任务完成时将任务线程名称重置为IDLE_TASK_THREAD_NAME
  • SPARK-54834 添加新接口 SimpleProcedure 和 SimpleFunction
  • SPARK-54760 将 DelegatingCatalogExtension 作为会话目录,使其支持 V1 和 V2 函数
  • SPARK-54685 删除冗余观察到的指标响应
  • SPARK-54853始终在 Spark 端检查hive.exec.max.dynamic.partitions
  • SPARK-54840 OrcList 预分配
  • SPARK-54830 默认启用基于校验和的不确定性洗牌重试
  • SPARK-54850改进extractShuffleIds以在计划树中的任意位置查找AdaptiveSparkPlanExec
  • SPARK-54843 Try_to_number表达式不适用于空字符串输入
  • SPARK-54556 当检测到数据洗牌校验和不匹配时,回滚后续的洗牌映射阶段
  • SPARK-54760 还原“[SC-215670][SQL] 使用 DelegatingCatalogExtension 作为会话目录以支持 V1 和 V2 函数”
  • SPARK-54760 将 DelegatingCatalogExtension 作为会话目录扩展以支持 V1 和 V2 函数
  • SPARK-54818 任务内存管理器分配失败时应记录错误栈,以帮助检查内存使用情况。
  • SPARK-54827 添加帮助程序函数 TreeNode.containsTag
  • SPARK-54777 还原“[SC-215740][SQL] 在 JDBCTableCatalog.dropTable(...)中更改了 dropTable 错误处理”
  • SPARK-54777 在 JDBCTableCatalog.dropTable 中更改了 dropTable 错误处理(...)
  • SPARK-54817 将解析逻辑重构 UnpivotUnpivotTransformer
  • SPARK-54820 使 pandas_on_spark_type 与 numpy 2.4.0 兼容
  • SPARK-54799 重构 UnpivotCoercion
  • SPARK-54754 OrcSerializer 不应在每次进行序列化时都分析架构
  • SPARK-54226 将箭头压缩扩展到 Pandas UDF
  • SPARK-54787 在 pandas 中使用列表推导式代替“for”循环
  • SPARK-54690 使 Frame.__repr__ 对箭头优化不敏感
  • SPARK-46166 实现 pandas.DataFrame.any 且 axis=None
  • SPARK-54696 清除 Arrow 缓冲区 - 后续操作
  • SPARK-54769 删除 conversion.py 中的死代码
  • SPARK-54787 在 pandas _bool_column_labels中使用列表理解
  • SPARK-54794 取消详细 FsHistoryProvider.checkForLogs 扫描日志
  • SPARK-54745 修复 Windows 上缺少 UnixStreamServer 导致的 PySpark 导入错误
  • SPARK-54782 更正配置版本
  • SPARK-54781 以 JSON 格式返回模型缓存信息
  • SPARK-54419 离线重新分区状态读取器支持多列族
  • SPARK-54722 为 SQL 使用注册 Pandas 分组迭代聚合 UDF
  • SPARK-54762 还原“[SC-215422][PYTHON] 修复 _create_convertercovert 重载签名”
  • SPARK-54652 撤销“[SC-215452][SQL] 的完整转换IDENTIFIER操作”
  • SPARK-54762 修复 _create_convertercovert 重载签名
  • SPARK-52819 使 KryoSerializationCodec 可序列化,以修复各种用例中的 java.io.NotSerializableException 错误
  • SPARK-54711 为守护程序创建的工作进程连接添加超时
  • SPARK-54738 添加对 Pandas 分组迭代聚合 UDF 的探查器支持
  • SPARK-54652 完成转化 IDENTIFIER()
  • SPARK-54581 将 Postgres 连接器的 fetchsize 选项设为不区分大小写
  • SPARK-54589 将 ArrowStreamAggPandasIterUDFSerializer 合并到 ArrowStreamAggPandasUDFSerializer
  • SPARK-41916 Torch 分发器:如果 task.gpu.amount > 1,则每个任务支持多个 torchrun 进程
  • SPARK-54707 将解析的主要逻辑重构到 PivotTransformer
  • SPARK-54706 使 DistributedLDAModel 适用于本地文件系统
  • SPARK-53616 为 pandas 分组聚合 UDF 引入迭代器 API
  • SPARK-54116 为 LongHashedRelation 添加堆外模式支持
  • SPARK-54656 将 SupportsPushDownVariants 重构为 ScanBuilder 混合
  • SPARK-54687 使用生成器解析边缘事例添加黄金文件
  • SPARK-54708 通过延迟目录创建策略优化 ML 缓存清理
  • SPARK-54116 回退“[SC-213108][SQL] 为 LongHashedRelation 添加非堆内存模式支持”
  • SPARK-54116 为 LongHashedRelation 添加堆外模式支持
  • SPARK-54443 所有流式处理有状态运算符的分区键提取
  • SPARK-54687 还原“[SC-214791][SQL] 添加包含生成器解析边缘事例的黄金文件”
  • SPARK-54116 还原“[SC-213108][SQL] 添加 LongHashedRelation 的 off-heap 模式支持”
  • SPARK-54687 添加包含生成器解析边界情况的黄金文件
  • SPARK-54116 为 LongHashedRelation 添加堆外模式支持
  • SPARK-54420 引入用于单列族的脱机重新分区 StatePartitionWriter
  • SPARK-54689org.apache.spark.sql.pipelines 设置为内部包并将 EstimatorUtils 设置为私有
  • SPARK-54673 重构 SQL 管道语法分析代码以共享和重复使用
  • SPARK-54668 在多子运算符中添加 CTE 测试
  • SPARK-54669 删除 rCTE 中的冗余强制转换
  • SPARK-54587 合并所有runner_conf相关代码
  • SPARK-54628 删除所有不必要的显式 super() 参数
  • SPARK-54675 为 StateStore 维护线程池添加可配置的强制关闭超时
  • SPARK-54639 避免在箭头序列化程序中创建不必要的表
  • SPARK-49635 删除 CAST 错误消息中的 ANSI 配置建议
  • SPARK-54664 清理与listenerCache相关的代码,从connect.StreamingQueryManager中移除这些代码
  • SPARK-54640 将 select.select 替换为 UNIX 上的 select.poll
  • SPARK-54662dev/requirements.txt 添加 viztracerdebugpy
  • SPARK-54632 添加用于 lint 的 ruff 的选项
  • SPARK-54585 修复线程处于中断状态时的状态存储回滚
  • SPARK-54172 合并到架构演变中应仅添加引用的列
  • SPARK-54438 将 ArrowStreamAggArrowIterUDFSerializer 合并到 ArrowStreamAggArrowUDFSerializer
  • SPARK-54627 删除序列化程序中的冗余初始化
  • SPARK-54631 添加对箭头分组迭代器聚合 UDF 的探查器支持
  • SPARK-54316 重新应用 [SC-213971][CORE][PYTHON][SQL] 合并 GroupPandasIterUDFSerializerGroupPandasUDFSerializer
  • SPARK-54392 优化 TWS 初始状态的 JVM-Python 通信
  • SPARK-54617 为 SQL 启用 Arrow 分组迭代聚合 UDF 注册
  • SPARK-54544 启用 flake8 F811 检查
  • SPARK-54650_create_converter_from_pandas 中实现 int 到十进制的转换
  • SPARK-54316 还原“[SC-213971][CORE][PYTHON][SQL] 合并 GroupPandasIterUDFSerializerGroupPandasUDFSerializer
  • SPARK-53687 在 SQL 语句中引入WATERMARK 子句
  • SPARK-54316 合并 GroupPandasIterUDFSerializerGroupPandasUDFSerializer
  • SPARK-54598 提取逻辑以读取 UDF
  • SPARK-54622RequiresDistributionAndOrdering 和其所需的接口晋升为 Evolving
  • SPARK-54624 确保历史记录页面中的用户名被转义
  • SPARK-54580 考虑在 HiveVersionSuite 和 HiveClientImpl 中使用 Hive 4.1
  • SPARK-54068 修复对 PyArrow 22.0.0 的支持to_feather
  • SPARK-54618 提升 LocalScanStable
  • SPARK-54616SupportsPushDownVariants 标记为 Experimental
  • SPARK-54607 删除toStringHelper中的未使用方法AbstractFetchShuffleBlocks.java
  • SPARK-53615 为箭头分组聚合 UDF 引入迭代器 API
  • SPARK-54608 避免在 UDTF 中重复缓存类型转换器
  • SPARK-54600 不要使用 pickle 来保存/加载模型
  • SPARK-54592 设为 estimatedSize 专用
  • SPARK-54388 介绍用于扫描单个 ColFamily 的原始字节的 StatePartitionReader
  • SPARK-54570 在 Spark Connect 中正确传递错误类别
  • SPARK-54577 优化架构推理中的 Py4J 调用
  • SPARK-54568 避免在从 ndarray 创建数据帧时进行不必要的 pandas 转换
  • SPARK-54576 为基于 Datasketches 的新聚合函数添加文档
  • SPARK-54574 在连接时重新启用 FPGrowth
  • SPARK-54557 使 CSV/JSON/XmlOptions 和 CSV/JSON/XmlInferSchema 可比
  • SPARK-52798 添加函数approx_top_k_combine
  • SPARK-54446 FPGrowth 支持使用箭头文件格式的本地文件系统
  • SPARK-54547将变量重命名hostPorthostTaskSchedulerImpl.(executorLost|logExecutorLoss)方法
  • SPARK-54558 修复未使用 BEGIN/END 的异常处理程序时的内部异常
  • SPARK-52923 允许洗牌管理器在洗牌注册期间控制推送合并
  • SPARK-54474 丢弃预期失败测试的 XML 报告
  • SPARK-54473 添加对 TIME 类型的 Avro 读取和写入支持
  • SPARK-54472 添加对 TIME 类型的 ORC 读取和写入支持
  • SPARK-54463 为 TIME 类型添加 CSV 序列化和反序列化支持
  • SPARK-52588 Approx_top_k:聚合和估算
  • SPARK-54461 为 TIME 类型添加 XML 序列化和反序列化支持
  • SPARK-54451 为 TIME 类型添加 JSON 序列化和反序列化支持
  • SPARK-54537 修复缺少命名空间能力的目录上的 SparkConnectDatabaseMetaData getSchemas/getTables
  • SPARK-54442 为 TIME 类型添加数值转换函数
  • SPARK-54451 还原“[SC-212861][SQL] 为 TIME 类型添加 JSON 序列化和反序列化支持”
  • SPARK-54492 重命名_LEGACY_ERROR_TEMP_1201并添加 sqlState
  • SPARK-54531 介绍 ArrowStreamAggPandasUDFSerializer
  • SPARK-54223 将任务上下文和数据指标添加到 Python 运行程序日志
  • SPARK-54272 为 SortAggregateExec 添加 aggTime
  • SPARK-53469 在 Thrift 服务器中清理随机功能
  • SPARK-54219 支持 spark.cleaner.referenceTracking.blocking.timeout 配置
  • SPARK-54475 添加 master-server、branch-4.0-client、Python 3.11
  • SPARK-54451 为 TIME 类型添加 JSON 序列化和反序列化支持
  • SPARK-54285 缓存时区信息以避免昂贵的时间戳转换
  • SPARK-49133 将成员 MemoryConsumer#used 设为原子性,以避免用户代码引发死锁
  • SPARK-46166 实现 pandas.DataFrame.any 方法(axis=1)
  • SPARK-54532 添加对 PySparkException sqlstate 的支持
  • SPARK-54435 spark-pipelines init 应避免覆盖现有目录
  • SPARK-54247 为util._load_from_socket明确地关闭套接字

Databricks ODBC/JDBC 驱动程序支持

Databricks 支持过去 2 年发布的 ODBC/JDBC 驱动程序。 请下载最近发布的驱动程序并升级(下载 ODBC下载 JDBC)。

系统环境

  • 操作系统:Ubuntu 24.04.3 LTS
  • Java:Zulu21.42+19-CA
  • Scala:2.13.16
  • Python:3.12.3
  • R:4.5.1
  • Delta Lake:4.0.1

已安装的 Python 库

图书馆 版本 图书馆 版本 图书馆 版本
aiohappyeyeballs 2.4.4 aiohttp 3.11.10 aiosignal 1.2.0
标注文档 0.0.4 注释类型 0.7.0 anyio 4.7.0
argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0 arro3-core 0.6.5
箭头 1.3.0 asttokens 3.0.0 astunparse 1.6.3
async-lru 2.0.4 属性 24.3.0 自动命令 2.2.2
azure-common 1.1.28 azure-core 1.37.0 Azure 身份识别 1.20.0
azure-mgmt-core 1.6.0 azure-mgmt-web 8.0.0 azure-storage-blob 12.28.0
azure-storage-file-datalake (Azure 存储文件数据湖) 12.22.0 巴别塔 2.16.0 backports.tarfile 1.2.0
beautifulsoup4 4.12.3 黑色 24.10.0 漂白剂 6.2.0
闪烁器 1.7.0 boto3 1.40.45 botocore 1.40.45
cachetools (缓存工具) 5.5.1 certifi 2025.4.26 cffi 1.17.1
chardet 4.0.0 charset-normalizer (字符集正常化工具) 3.3.2 单击 8.1.8
cloudpickle 3.0.0 通讯 0.2.1 contourpy 1.3.1
加密 44.0.1 骑行者 0.11.0 Cython 3.1.5
databricks代理 1.9.1 Databricks软件开发工具包 (databricks-sdk) 0.67.0 dataclasses-json 0.6.7
dbus-python 1.3.2 debugpy 1.8.11 修饰器 5.1.1
defusedxml 0.7.1 deltalake 1.1.4 已弃用 1.2.18
distlib 0.3.9 docstring-to-markdown 0.11 执行 1.2.0
各个方面概述 1.1.1 fastapi 0.128.0 fastjsonschema 2.21.1
文件锁 (filelock) 3.17.0 fonttools(字体工具) 4.55.3 fqdn 1.5.1
frozenlist 1.5.0 fsspec 2023.5.0 gitdb (Git数据库) 4.0.11
GitPython 3.1.43 google-api-core (谷歌 API 核心库) 2.28.1 google-auth (谷歌身份验证) 2.47.0
google-cloud-core (Google云核心) 2.5.0 Google 云存储 (Google Cloud Storage) 3.7.0 google-crc32c 1.8.0
google-resumable-media (谷歌可恢复媒体) 2.8.0 googleapis-common-protos 1.65.0 grpcio 1.67.0
grpcio-status 1.67.0 h11 0.16.0 hf-xet 1.2.0
httpcore 1.0.9 httplib2 0.20.4 httpx 0.28.1
huggingface_hub 1.2.4 idna 3.7 importlib_metadata 8.5.0
inflect 7.3.1 iniconfig 1.1.1 ipyflow-core 0.0.209
ipykernel 6.29.5 ipython 8.30.0 ipython-genutils(IPython通用工具) 0.2.0
ipywidgets 7.8.1 isodate 0.7.2 isoduration 20.11.0
jaraco.collections 5.1.0 jaraco.context 5.3.0 jaraco.functools 4.0.1
jaraco.text 3.12.1 jedi 0.19.2 Jinja2 3.1.6
jiter 0.12.0 jmespath 1.0.1 joblib 1.4.2
json5 0.9.25 JSON补丁 1.33 jsonpointer 3.0.0
jsonschema 4.23.0 JSON模式规范 2023年7月1日 jupyter-events 0.12.0
jupyter-lsp 2.2.5 jupyter_client(Jupyter 客户端) 8.6.3 jupyter_core(Jupyter核心) 5.7.2
Jupyter服务器 2.15.0 Jupyter服务器终端 0.5.3 jupyterlab 4.3.4
jupyterlab_pygments 0.3.0 jupyterlab_server (JupyterLab 服务器) 2.27.3 jupyterlab_widgets 1.1.11
kiwisolver 1.4.8 langchain-core 1.2.6 langchain-openai 1.1.6
langsmith 0.6.1 launchpadlib 1.11.0 lazr.restfulclient 0.14.6
lazr.uri 1.0.6 litellm 1.75.9 markdown-it-py 2.2.0
MarkupSafe 3.0.2 棉花糖 3.26.2 matplotlib 3.10.0
matplotlib-inline 0.1.7 麦卡贝 0.7.0 mdurl 0.1.0
mistune 3.1.2 mlflow-skinny 3.8.1 mmh3 5.2.0
more-itertools 10.3.0 MSAL 1.34.0 msal-extensions 1.3.1
multidict 6.1.0 mypy-extensions 1.0.0 nbclient 0.10.2
nbconvert 7.16.6 nbformat 5.10.4 nest-asyncio 1.6.0
nodeenv 1.10.0 笔记本 7.3.2 notebook_shim 0.2.4
numpy 2.1.3 oauthlib 3.2.2 openai 2.14.0
OpenTelemetry API 1.39.1 opentelemetry-proto 1.39.1 opentelemetry-sdk(开源遥测软件开发工具包) 1.39.1
opentelemetry-semantic-conventions 0.60b1 orjson 3.11.5 overrides 7.4.0
包装 24.2 熊猫 2.2.3 pandocfilters 1.5.0
帕尔索 0.8.4 pathspec 0.10.3 替罪羊 1.0.1
pexpect 4.8.0 枕头 11.1.0 pip 25.0.1
platformdirs 4.3.7 plotly 5.24.1 Pluggy (Python库) 1.5.0
prometheus_client 0.21.1 prompt-toolkit(提示工具包) 3.0.43 propcache 0.3.1
proto-plus 1.27.0 protobuf 5.29.4 psutil 5.9.0
psycopg2 2.9.11 ptyprocess 0.7.0 pure-eval 0.2.2
pyarrow 21.0.0 pyasn1 0.4.8 pyasn1-modules 0.2.8
pyccolo 0.0.71 Python代码解析器 2.21 pydantic (Python 数据验证库) 2.10.6
pydantic_core 2.27.2 pyflakes 3.2.0 Pygments 2.19.1
PyGObject 3.48.2 pyiceberg 0.10.0 PyJWT 2.10.1
pyodbc 5.2.0 pyparsing 3.2.0 pyright 1.1.394
火化 1.0.3 pytest(Python 测试框架) 8.3.5 python-dateutil 2.9.0.post0
python-dotenv 1.2.1 python-json-logger 3.2.1 python-lsp-jsonrpc 1.1.2
python-lsp-server 1.12.2 pytoolconfig 1.2.6 pytz 2024.1
PyYAML 6.0.2 pyzmq 26.2.0 引用 0.30.2
regex 2024.11.6 请求 2.32.3 requests-toolbelt 1.0.0
rfc3339-validator 0.1.4 rfc3986验证器 0.1.1 rich 13.9.4
绳子 1.13.0 rpds-py 0.22.3 RSA加密算法 4.9.1
s3transfer 0.14.0 scikit-learn 1.6.1 scipy 1.15.3
seaborn 0.13.2 Send2Trash 1.8.2 setuptools 78.1.1
谢灵汉姆 1.5.4 6 1.17.0 smmap 5.0.0
sniffio 1.3.0 排序容器 2.4.0 soupsieve 2.5
sqlparse 0.5.5 ssh-import-id 5.11 堆栈数据 0.6.3
starlette 0.50.0 strictyaml 1.7.3 毅力 9.0.0
terminado 0.17.1 threadpoolctl 3.5.0 tiktoken 0.12.0
tinycss2 1.4.0 tokenize_rt 6.1.0 分词器 0.22.2
tomli 2.0.1 龙卷风 6.5.1 tqdm 4.67.1
Traitlets 5.14.3 typeguard 4.3.0 typer-slim 0.21.1
types-python-dateutil 2.9.0.20251115 typing-inspect 0.9.0 输入扩展 (typing_extensions) 4.12.2
tzdata 2024.1 ujson 5.10.0 unattended-upgrades 0.1
URI 模板 1.3.0 urllib3 2.3.0 uuid_utils 0.12.0
uvicorn 0.40.0 virtualenv 20.29.3 wadllib 1.3.6
wcwidth 0.2.5 webcolors 25.10.0 Web编码 0.5.1
WebSocket客户端 1.8.0 whatthepatch 1.0.2 wheel 0.45.1
每当 0.7.3 widgetsnbextension 3.6.6 封装 1.17.0
yapf 0.40.2 yarl 1.18.0 齐普 3.21.0
zstandard 0.23.0

已安装的 R 库

R 库是从 2025-11-20 的 Posit 包管理器 CRAN 快照安装的。

图书馆 版本 图书馆 版本 图书馆 版本
箭头 22.0.0 askpass 1.2.1 断言 0.2.1
backports 1.5.0 基础映像 4.5.1 base64enc 0.1-3
bigD 0.3.1 比特 4.6.0 bit64 4.6.0-1
bitops 1.0-9 blob 1.2.4 启动 1.3-30
brew 1.0-10 活力 1.1.5 扫帚 1.0.10
bslib 0.9.0 卡齐姆 1.1.0 调用方 3.7.6
caret 7.0-1 cellranger (细胞测序工具) 1.1.0 If "chron" is a standalone term with no additional context indicating its specific function or meaning, we may keep it as "Chron" unless context dictates a different interpretation. 2.3-62
7.3-22 命令行界面 (CLI) 3.6.5 剪辑器 0.8.0
clock 0.7.3 群集 2.1.6 codetools 0.2-20
通用标记 (commonmark) 2.0.0 编译器 4.5.1 config 0.3.2
感到矛盾 1.2.0 cpp11 0.5.2 蜡笔 1.5.3
凭据 2.0.3 curl 7.0.0 数据表 (data.table) 1.17.8
数据集 4.5.1 DBI 1.2.3 dbplyr 2.5.1
desc 1.4.3 devtools 2.4.6 示意图 1.6.5
diffobj 0.3.6 摘要 0.6.39 向下照明 0.4.5
dplyr 1.1.4 dtplyr 1.3.2 e1071 1.7-16
省略号 0.3.2 评估 1.0.5 fansi 1.0.7
颜色 2.1.2 快速映射 1.2.0 fontawesome 0.5.3
forcats 1.0.1 foreach 1.5.2 国外 0.8-86
fs 1.6.6 未来 1.68.0 future.apply 1.20.0
漱口 1.6.0 泛型 0.1.4 格尔特 2.2.0
ggplot2 4.0.1 gh 1.5.0 git2r 0.36.2
gitcreds 0.1.2 glmnet 4.1-10 全局变量 0.18.0
胶水 1.8.0 googledrive 2.1.2 googlesheets4 1.1.2
gower 1.0.2 图形 4.5.1 grDevices 4.5.1
网格 4.5.1 gridExtra 2.3 gsubfn 0.7
gt 1.1.0 gtable 0.3.6 安全帽 1.4.2
避风港 2.5.5 highr 0.11 赫姆斯 1.1.4
HTML工具 0.5.8.1 HTML小插件 1.6.4 httpuv 1.6.16
httr 1.4.7 httr2 1.2.1 ids 1.0.1
ini 0.3.1 ipred 0.9-15 isoband 0.2.7
迭代器 1.0.14 jquerylib 0.1.4 jsonlite 2.0.0
JuicyJuice 0.1.0 KernSmooth 2.23-22 knitr 1.50
标记 0.4.3 稍后 1.4.4 晶格 0.22-5
熔岩 1.8.2 生命周期 1.0.4 listenv 0.10.0
litedown 0.8 lubridate 1.9.4 magrittr 2.0.4
markdown 2.0 质量 7.3-60.0.1 矩阵 1.6-5
记忆化 2.0.1 方法 4.5.1 mgcv 1.9-1
默剧 0.13 迷你用户界面 0.1.2 mlflow 3.6.0
ModelMetrics 1.2.2.2 modelr 0.1.11 nlme 3.1-164
nnet 7.3-19 numDeriv 2016年8月至1月1日 openssl(开放SSL) 2.3.4
伊卡诺 0.2.0 平行 4.5.1 并行地 1.45.1
柱子 1.11.1 pkgbuild (软件包构建工具) 1.4.8 pkgconfig 2.0.3
pkgdown 2.2.0 pkgload 1.4.1 普洛格 0.2.0
普莱尔 1.8.9 赞美 1.0.0 prettyunits 1.2.0
pROC 1.19.0.1 processx 3.8.6 prodlim 2025.04.28
profvis 0.4.0 进展 1.2.3 progressr 0.18.0
promises 1.5.0 原型 (proto) 1.0.0 代理 0.4-27
附注 (ps) 1.9.1 purrr 1.2.0 R6 2.6.1
ragg 1.5.0 随机森林 (randomForest) 4.7-1.2 rappdirs 0.3.3
rcmdcheck 1.4.0 RColorBrewer 1.1-3 Rcpp 1.1.0
RcppEigen 0.3.4.0.2 reactable 0.4.4 reactR 0.6.1
readr(阅读器) 2.1.6 readxl 1.4.5 食谱 1.3.1
重赛 2.0.0 rematch2 2.1.2 remotes 2.5.0
可复制的示例 2.1.1 reshape2 1.4.5 rlang 1.1.6
rmarkdown(R语言动态文档生成工具) 2.30 RODBC 1.3-26 roxygen2 7.3.3
rpart 4.1.23 rprojroot 2.1.1 Rserve 1.8-15
RSQLite 2.4.4 rstudioapi 0.17.1 rversions 3.0.0
rvest 1.0.5 S7 0.2.1 Sass 0.4.10
磅秤 1.4.0 selectr 0.4-2 会话信息 1.2.3
形状 1.4.6.1 光亮 1.11.1 sourcetools 0.1.7-1
sparklyr 1.9.3 SparkR 4.1.0 sparsevctrs 0.3.4
空间 7.3-17 splines 4.5.1 sqldf(R环境中的数据库操作软件包) 0.4-11
SQUAREM 2021年1月 统计数据 4.5.1 统计数据4 4.5.1
stringi 1.8.7 stringr 1.6.0 生存 3.5-8
自信 5.17.14.1 sys 3.4.3 systemfonts 1.3.1
Tcl/Tk 编程语言 4.5.1 testthat 3.3.0 文字排版 1.0.4
tibble 3.3.0 tidyr 1.3.1 tidyselect 1.2.1
tidyverse(数据分析工具包) 2.0.0 时间变化 0.3.0 时间日期 4051.111
tinytex 0.58 工具 4.5.1 tzdb 0.5.0
URL检查器 1.0.1 usethis 3.2.1 utf8 1.2.6
utils 4.5.1 UUID(通用唯一识别码) 1.2-1 V8 8.0.1
vctrs 0.6.5 viridisLite 0.4.2 vroom 1.6.6
瓦尔多 0.6.2 晶 须 0.4.1 withr 3.0.2
xfun 0.54 xml2 1.5.0 xopen 1.0.1
xtable 1.8-4 YAML 2.3.10 zeallot 0.2.0
压缩包 2.3.3

已安装的 Java 和 Scala 库(Scala 2.13 群集版本)

群组标识符 工件编号 版本
antlr antlr 2.7.7
com.amazonaws Amazon Kinesis 客户端 1.15.3
com.amazonaws AWS Java SDK 自动扩展 1.12.681
com.amazonaws aws-java-sdk-cloudformation 1.12.681
com.amazonaws AWS Java SDK CloudFront 1.12.681
com.amazonaws AWS-Java-SDK-云HSM 1.12.681
com.amazonaws AWS Java SDK 云搜索 1.12.681
com.amazonaws aws-java-sdk-cloudtrail 1.12.681
com.amazonaws aws-java-sdk-cloudwatch 1.12.681
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.681
com.amazonaws AWS Java SDK CodeDeploy(AWS Java 软件开发工具包 CodeDeploy) 1.12.681
com.amazonaws aws-java-sdk-cognitoidentity 1.12.681
com.amazonaws aws-java-sdk-cognitosync 1.12.681
com.amazonaws aws-java-sdk-config(AWS Java SDK 配置) 1.12.681
com.amazonaws aws-java-sdk-core (AWS Java软件开发工具包核心) 1.12.681
com.amazonaws aws-java-sdk-datapipeline(AWS Java SDK 数据流水线) 1.12.681
com.amazonaws AWS Java SDK Direct Connect(直连) 1.12.681
com.amazonaws aws-java-sdk-directory 1.12.681
com.amazonaws aws-java-sdk-dynamodb 1.12.681
com.amazonaws aws-java-sdk-ec2 1.12.681
com.amazonaws aws-java-sdk-ecs 1.12.681
com.amazonaws aws-java-sdk-efs 1.12.681
com.amazonaws aws-java-sdk-elasticache 1.12.681
com.amazonaws aws-java-sdk-elasticbeanstalk(AWS Java 开发工具包 - Elastic Beanstalk) 1.12.681
com.amazonaws aws-java-sdk-弹性负载均衡 1.12.681
com.amazonaws aws-java-sdk-elastictranscoder(AWS Java SDK弹性转码器) 1.12.681
com.amazonaws aws-java-sdk-emr 1.12.681
com.amazonaws AWS Java SDK Glacier 1.12.681
com.amazonaws AWS Java SDK Glue 1.12.681
com.amazonaws aws-java-sdk-iam 1.12.681
com.amazonaws AWS Java SDK 导入导出 (aws-java-sdk-importexport) 1.12.681
com.amazonaws aws-java-sdk-kinesis 1.12.681
com.amazonaws AWS Java 软件开发工具包 - KMS 1.12.681
com.amazonaws aws-java-sdk-lambda 1.12.681
com.amazonaws aws-java-sdk-logs(AWS Java开发包日志) 1.12.681
com.amazonaws AWS-Java-SDK-机器学习 1.12.681
com.amazonaws aws-java-sdk-opsworks 1.12.681
com.amazonaws aws-java-sdk-rds 1.12.681
com.amazonaws aws-java-sdk-redshift 1.12.681
com.amazonaws aws-java-sdk-route53 1.12.681
com.amazonaws aws-java-sdk-s3 1.12.681
com.amazonaws aws-java-sdk-ses 1.12.681
com.amazonaws aws-java-sdk-simpledb 1.12.681
com.amazonaws aws-java-sdk-simpleworkflow 1.12.681
com.amazonaws aws-java-sdk-sns 1.12.681
com.amazonaws aws-java-sdk-sqs 1.12.681
com.amazonaws aws-java-sdk-ssm 1.12.681
com.amazonaws AWS Java SDK 存储网关 1.12.681
com.amazonaws aws-java-sdk-sts 1.12.681
com.amazonaws AWS Java SDK支持 1.12.681
com.amazonaws aws-java-sdk-workspaces 1.12.681
com.amazonaws jmespath-java 1.12.681
com.clearspring.analytics 数据流 2.9.8
com.databricks Rserve 1.8-3
com.databricks databricks-sdk-java 0.53.0
com.databricks jets3t 0.7.1-0
com.databricks.scalapb scalapb-runtime_2.13 0.4.15-11
com.esotericsoftware kryo-shaded 4.0.3
com.esotericsoftware minlog 1.3.0
com.fasterxml classmate 1.5.1
com.fasterxml.jackson.core Jackson注解 2.18.2
com.fasterxml.jackson.core jackson-core 2.18.2
com.fasterxml.jackson.core jackson-databind 2.18.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.18.2
com.fasterxml.jackson.dataformat Jackson 数据格式 YAML 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-joda(杰克逊数据类型-Joda) 2.18.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.18.3
com.fasterxml.jackson.module jackson-module-paranamer 2.18.2
com.fasterxml.jackson.module jackson-module-scala_2.13 2.18.2
com.github.ben-manes.caffeine 咖啡因 2.9.3
com.github.blemale scaffeine_2.13 4.1.0
com.github.fommil jniloader 1.1
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java 1.1-原住民
com.github.fommil.netlib 原生系统-Java 1.1
com.github.fommil.netlib 原生系统-Java 1.1-原住民
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1-原住民
com.github.fommil.netlib netlib-本地系统-linux-x86_64 1.1-原住民
com.github.luben zstd-jni 1.5.7-6
com.github.virtuald curvesapi 1.08
com.github.wendykierp JTransforms 3.1
com.google.api.grpc proto-google-common-protos 2.5.1
com.google.auth google-auth-library-credentials 1.20.0
com.google.auth google-auth-library-oauth2-http 1.20.0
com.google.auto.value auto-value-annotations 1.10.4
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.11.0
com.google.crypto.tink 丁克 1.16.0
com.google.errorprone 易出错的注释 2.36.0
com.google.flatbuffers flatbuffers-java 25.2.10
com.google.guava 访问失败 1.0.3
com.google.guava guava 33.4.8-jre
com.google.http-client google-http-client 1.43.3
com.google.http-client google-http-client-gson 1.43.3
com.google.j2objc j2objc-annotations 3.0.0
com.google.protobuf protobuf-java 3.25.5
com.google.protobuf protobuf-java-util 3.25.5
com.helger 探查器 1.1.1
com.ibm.icu icu4j 75.1
com.jcraft jsch 0.1.55
com.lihaoyi sourcecode_2.13 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.10
com.microsoft.sqlserver mssql-jdbc 12.8.0.jre11
com.microsoft.sqlserver mssql-jdbc 12.8.0.jre8
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses 镜头_2.13 0.4.13
com.twitter chill-java 0.10.0
com.twitter 冷静_2.13 0.10.0
com.twitter util-app_2.13 19.8.1
com.twitter util-core_2.13 19.8.1
com.twitter util-function_2.13 19.8.1
com.twitter util-jvm_2.13 19.8.1
com.twitter util-lint_2.13 19.8.1
com.twitter util-registry_2.13 19.8.1
com.twitter util-stats_2.13 19.8.1
com.typesafe config 1.4.3
com.typesafe.scala-logging scala-logging_2.13 3.9.2
com.uber h3 3.7.3
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
com.zaxxer 稀疏比特集合 1.3
commons-cli commons-cli 1.10.0
commons-codec(公共编解码器) commons-codec(公共编解码器) 1.19.0
commons-collections (通用集合库) commons-collections (通用集合库) 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.6.0
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.21.0
commons-lang(公共程序语言库) commons-lang(公共程序语言库) 2.6
commons-logging(日志库) commons-logging(日志库) 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 3.0.4
dev.ludovic.netlib blas 3.0.4
dev.ludovic.netlib lapack(线性代数软件包) 3.0.4
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift 空气压缩机 2.0.2
io.delta delta-sharing-client_2.13 1.3.9
io.dropwizard.metrics 指标注释 4.2.37
io.dropwizard.metrics 指标核心 4.2.37
io.dropwizard.metrics metrics-graphite 4.2.37
io.dropwizard.metrics 指标-健康检查 4.2.37
io.dropwizard.metrics metrics-jetty10 4.2.37
io.dropwizard.metrics metrics-jmx 4.2.37
io.dropwizard.metrics metrics-json 4.2.37
io.dropwizard.metrics 指标-JVM 4.2.37
io.dropwizard.metrics 指标-Servlets 4.2.37
io.github.java-diff-utils java-diff-utils 4.15
io.netty netty-all 4.2.7.Final
io.netty netty-buffer(Netty缓存) 4.2.7.Final
io.netty netty-codec 4.2.7.Final
io.netty netty-codec-base 4.2.7.Final
io.netty netty-codec-classes-quic 4.2.7.Final
io.netty Netty编解码压缩 4.2.7.Final
io.netty Netty HTTP 编解码器 4.2.7.Final
io.netty netty-codec-http2 4.2.7.Final
io.netty netty-codec-http3 4.2.7.Final
io.netty netty-codec-marshalling 4.2.7.Final
io.netty netty-codec-native-quic 4.2.7.Final-linux-aarch_64
io.netty netty-codec-native-quic 4.2.7.Final-linux-x86_64
io.netty netty-codec-native-quic 4.2.7.Final-osx-aarch_64
io.netty netty-codec-native-quic 4.2.7.Final-osx-x86_64
io.netty netty-codec-native-quic 4.2.7.Final-windows-x86_64
io.netty netty-codec-protobuf 4.2.7.Final
io.netty netty-codec-socks 4.2.7.Final
io.netty Netty-Common(网络通用组件) 4.2.7.Final
io.netty netty-handler 4.2.7.Final
io.netty netty-handler-proxy(Netty 处理器代理) 4.2.7.Final
io.netty netty-resolver (Netty 解析器) 4.2.7.Final
io.netty netty-tcnative-boringssl-static(Netty高性能计算库) 2.0.74.Final-db-r0-linux-aarch_64
io.netty netty-tcnative-boringssl-static(Netty高性能计算库) 2.0.74.Final-db-r0-linux-x86_64
io.netty netty-tcnative-boringssl-static(Netty高性能计算库) 2.0.74.Final-db-r0-osx-aarch_64
io.netty netty-tcnative-boringssl-static(Netty高性能计算库) 2.0.74.Final-db-r0-osx-x86_64
io.netty netty-tcnative-boringssl-static(Netty高性能计算库) 2.0.74.Final-db-r0-windows-x86_64
io.netty Netty TcNative 类 2.0.74.Final
io.netty netty-transport 4.2.7.Final
io.netty netty-transport-classes-epoll 4.2.7.Final
io.netty netty-transport-classes-io_uring 4.2.7.Final
io.netty netty-transport-classes-kqueue 4.2.7.Final
io.netty netty-transport-native-epoll 4.2.7.Final
io.netty netty-transport-native-epoll 4.2.7.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.2.7.Final-linux-riscv64
io.netty netty-transport-native-epoll 4.2.7.Final-linux-x86_64
io.netty netty-transport-native-io_uring 4.2.7.Final-linux-aarch_64
io.netty netty-transport-native-io_uring 4.2.7.Final-linux-riscv64
io.netty netty-transport-native-io_uring 4.2.7.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.2.7.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.2.7.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.2.7.Final
io.opencensus opencensus-api 0.31.1
io.opencensus opencensus-contrib-http-util 0.31.1
io.prometheus simpleclient 0.16.1-databricks
io.prometheus 简单客户端通用 0.16.1-databricks
io.prometheus simpleclient_dropwizard 0.16.1-databricks
io.prometheus simpleclient_pushgateway (简单客户端推送网关) 0.16.1-databricks
io.prometheus simpleclient_servlet 0.16.1-databricks
io.prometheus simpleclient_服务_通用 0.16.1-databricks
io.prometheus simpleclient_tracer_common 0.16.1-databricks
io.prometheus simpleclient_tracer_otel 0.16.1-databricks
io.prometheus simpleclient跟踪器_otel代理 0.16.1-databricks
io.prometheus.jmx 收集器 0.18.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation 激活 1.1.1
javax.annotation javax.annotation-api (Java中的注解API) 1.3.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.media jai_core jai_core_dummy
javax.transaction jta 1.1
javax.transaction 交易接口 (transaction-api) 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.14.0
net.java.dev.jna jna 5.8.0
net.razorvine pickle 1.5
net.sf.jpam 杰潘 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake Snowflake 数据导入 SDK 0.9.6
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc(远程调用协议库) 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.13.1
org.antlr stringtemplate (字符串模板) 3.2.1
org.apache.ant 蚂蚁 1.10.11
org.apache.ant ant-jsch(Java的SSH库) 1.10.11
org.apache.ant ant-launcher 1.10.11
org.apache.arrow 箭头压缩 18.3.0
org.apache.arrow 箭头格式 18.3.0
org.apache.arrow 箭头-内存-核心 18.3.0
org.apache.arrow 箭头内存网状系统 18.3.0
org.apache.arrow 箭头内存-Netty-缓冲区-补丁 18.3.0
org.apache.arrow 箭头向量 18.3.0
org.apache.avro avro 1.12.1
org.apache.avro avro-ipc 1.12.1
org.apache.avro avro-mapred 1.12.1
org.apache.commons commons-collections4(通用集合库) 4.5.0
org.apache.commons commons-compress(公共压缩库) 1.28.0
org.apache.commons commons-configuration2 2.11.0
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.19.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text (通用文本库) 1.14.0
org.apache.curator curator-client 5.9.0
org.apache.curator Curator-Framework(策展框架) 5.9.0
org.apache.curator curator-recipes 5.9.0
org.apache.datasketches datasketches-java 6.2.0
org.apache.datasketches 数据素描-内存 3.0.2
org.apache.derby 德比 10.14.2.0
org.apache.hadoop Hadoop 客户端运行时 3.4.2
org.apache.hive hive-beeline 2.3.10
org.apache.hive hive-cli 2.3.10
org.apache.hive hive-jdbc 2.3.10
org.apache.hive hive-llap-client 2.3.10
org.apache.hive hive-llap-common 2.3.10
org.apache.hive hive-serde 2.3.10
org.apache.hive 海蜂垫片 2.3.10
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.10
org.apache.hive.shims hive-shims-common 2.3.10
org.apache.hive.shims hive-shims-scheduler 2.3.10
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy ivy 2.5.3
org.apache.logging.log4j log4j-1.2-api 2.24.3
org.apache.logging.log4j log4j-api 2.24.3
org.apache.logging.log4j log4j-core 2.24.3
org.apache.logging.log4j log4j-layout-template-json(日志4j布局模板JSON) 2.24.3
org.apache.logging.log4j log4j-slf4j2-impl 2.24.3
\ org.apache.orc orc-core 2.2.0-shaded-protobuf
\ org.apache.orc orc格式 1.1.1-shaded-protobuf
\ org.apache.orc orc-mapreduce 2.2.0-shaded-protobuf
\ org.apache.orc orc-shims 2.2.0
org.apache.poi poi 5.4.1
org.apache.poi poi-ooxml 5.4.1
org.apache.poi poi-ooxml-full 5.4.1
org.apache.poi poi-ooxml-lite 5.4.1
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.16.0
org.apache.ws.xmlschema xmlschema-core 2.3.1
org.apache.xbean xbean-asm9-shaded 4.28
org.apache.xmlbeans xmlbeans 5.3.0
org.apache.yetus audience-annotations 0.13.0
org.apache.zookeeper 动物园管理员 3.9.4
org.apache.zookeeper zookeeper-jute 3.9.4
org.checkerframework checker-qual 3.43.0
org.codehaus.janino commons-compiler(通用编译器) 3.0.16
org.codehaus.janino 雅尼诺 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-alpn-client 10.0.26
org.eclipse.jetty jetty-client 10.0.26
org.eclipse.jetty Jetty-HTTP 10.0.26
org.eclipse.jetty jetty-io 10.0.26
org.eclipse.jetty jetty-jndi 10.0.26
org.eclipse.jetty jetty-plus 10.0.26
org.eclipse.jetty jetty-proxy 10.0.26
org.eclipse.jetty 码头安全 10.0.26
org.eclipse.jetty jetty-server(Jetty服务器) 10.0.26
org.eclipse.jetty jetty-servlet 10.0.26
org.eclipse.jetty jetty-servlets 10.0.26
org.eclipse.jetty jetty-util 10.0.26
org.eclipse.jetty Jetty 网页应用 10.0.26
org.eclipse.jetty jetty-xml 10.0.26
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-定位器 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator (OSGi 资源定位器) 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.41
org.glassfish.jersey.containers jersey-container-servlet-core 2.41
org.glassfish.jersey.core jersey-client(Jersey客户端工具) 2.41
org.glassfish.jersey.core jersey-common 2.41
org.glassfish.jersey.core jersey-server 2.41
org.glassfish.jersey.inject jersey-hk2 2.41
org.hibernate.validator hibernate-validator 6.2.5.Final
org.ini4j ini4j 0.5.4
org.javassist javassist 3.29.2-GA
org.jboss.logging jboss 日志 3.4.1.Final
org.jdbi jdbi 2.63.1
org.jline jline 3.27.1-jdk8
org.joda joda-convert 1.7
org.json4s json4s-ast_2.13 4.0.7
org.json4s json4s-core_2.13 4.0.7
org.json4s json4s-jackson-core_2.13 4.0.7
org.json4s json4s-jackson_2.13 4.0.7
org.json4s json4s-scalap_2.13 4.0.7
org.locationtech.jts jts-core 1.20.0
org.lz4 lz4-java 1.8.0-databricks-1
org.mlflow mlflow-spark_2.13 2.22.1
org.objenesis objenesis 3.4
org.postgresql postgresql 42.6.1
org.roaringbitmap RoaringBitmap 1.2.1
.rocksdb rocksdbjni 9.8.4
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.13 2.13.16
org.scala-lang scala-library_2.13 2.13.16
org.scala-lang scala-reflect_2.13 2.13.16
org.scala-lang.modules scala-collection-compat_2.13 2.11.0
org.scala-lang.modules scala-java8-compat_2.13 0.9.1
org.scala-lang.modules scala-parallel-collections_2.13 1.2.0
org.scala-lang.modules scala-parser-combinators_2.13 2.4.0
org.scala-lang.modules scala-xml_2.13 2.4.0
org.scala-sbt 测试界面 1.0
org.scalacheck scalacheck_2.13 1.18.0
org.scalactic scalactic_2.13 3.2.19
org.scalanlp breeze-macros_2.13 2.1.0
org.scalanlp breeze_2.13 2.1.0
org.scalatest 与Scalatest兼容 3.2.19
org.scalatest scalatest-core_2.13 3.2.19
org.scalatest scalatest-diagrams_2.13 3.2.19
org.scalatest scalatest-featurespec_2.13 3.2.19
org.scalatest scalatest-flatspec_2.13 3.2.19
org.scalatest scalatest-freespec_2.13 3.2.19
org.scalatest scalatest-funspec_2.13 3.2.19
org.scalatest scalatest-funsuite_2.13 3.2.19
org.scalatest scalatest-matchers-core_2.13 3.2.19
org.scalatest scalatest-mustmatchers_2.13 3.2.19
org.scalatest scalatest-propspec_2.13 3.2.19
org.scalatest scalatest-refspec_2.13 3.2.19
org.scalatest scalatest-shouldmatchers_2.13 3.2.19
org.scalatest scalatest-wordspec_2.13 3.2.19
org.scalatest scalatest_2.13 3.2.19
org.slf4j jcl-over-slf4j 2.0.16
org.slf4j jul-to-slf4j 2.0.16
org.slf4j slf4j-api 2.0.16
org.slf4j slf4j-simple 1.7.25
org.threeten threeten-extra 1.8.0
org.tukaani xz 1.10
org.typelevel algebra_2.13 2.8.0
org.typelevel cats-kernel_2.13 2.8.0
org.typelevel spire-macros_2.13 0.18.0
org.typelevel spire-平台_2.13 0.18.0
org.typelevel spire-util_2.13 0.18.0
org.typelevel 尖塔_2.13 0.18.0
org.wildfly.openssl WildFly-OpenSSL 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.10.3
org.yaml snakeyaml 2.0
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 2.5.0-linux-x86_64
斯塔克斯 stax-api 1.0.1