Partilhar via

Databricks Runtime 13.2 (sem suporte)

  • Artigo

As notas de versão a seguir fornecem informações sobre o Databricks Runtime 13.2, alimentado pelo Apache Spark 3.4.0.

A Databricks divulgou essas imagens em julho de 2023.

Novos recursos e melhorias

Ponto de verificação do changelog para armazenamento de estado RocksDB

Você pode habilitar o ponto de verificação do changelog para reduzir a duração do ponto de verificação e a latência de ponta a ponta para cargas de trabalho de Streaming Estruturado com monitoração de estado. O Databricks recomenda ativar o ponto de verificação do registo de alterações para todas as consultas com monitorização de estado de Transmissão em Fluxo Estruturada. Consulte Ativar ponto de verificação do changelog.

Confiabilidade aprimorada para VACUUM com clone superficial no Unity Catalog.

Quando você usa tabelas gerenciadas do Unity Catalog para a origem e o destino de uma operação de clone superficial, o Unity Catalog gerencia os arquivos de dados subjacentes para melhorar a confiabilidade da origem e do destino da operação de clone. A execução VACUUM na origem de um clone superficial não quebra a tabela clonada. Consulte clones superficiais do Vacuum e do Unity Catalog.

Suporte para Python UDFs em SQL

Agora você pode declarar funções definidas pelo usuário usando Python dentro de instruções SQL CREATE FUNCTION no Unity Catalog. Consulte Funções definidas pelo usuário (UDFs) no Catálogo Unity.

Delta Lake UniForm for Iceberg está em pré-visualização pública

O Formato Universal Delta Lake (UniForm) permite que você leia tabelas Delta com clientes Iceberg. Consulte Usar UniForm para ler tabelas delta com clientes Iceberg.

O agrupamento de líquidos do Delta Lake está em pré-visualização pública

O cluster líquido Delta Lake substitui o particionamento de tabelas e ZORDER simplifica as decisões de layout de dados e otimiza o desempenho da consulta. Veja Utilizar clustering líquido para tabelas Delta.

Suporte de arquivamento no Azure Databricks

O suporte de arquivamento no Azure Databricks apresenta uma coleção de recursos que permitem que você use políticas de ciclo de vida baseadas em nuvem no armazenamento de objetos em nuvem contendo tabelas Delta para mover arquivos para camadas de armazenamento de arquivamento. Consulte Suporte de arquivamento no Azure Databricks.

Suporte à cláusula IDENTIFIER

Use IDENTIFIER(:mytable) para parametrizar com segurança nomes de tabela, coluna, função e esquema em muitas instruções SQL.

Suporte do Catálogo Unity para Python e Pandas User-Defined Functions (UDFs)

No Databricks Runtime 13.2 e superior, as funções definidas pelo usuário (UDFs) escritas em Python são suportadas em clusters que usam o modo de acesso compartilhado em um espaço de trabalho habilitado para Unity Catalog. Isso inclui Python e Pandas UDFs. Para obter detalhes sobre UDFs do Python, consulte Funções escalares definidas pelo usuário - Python.

Compartilhar esquemas usando o Compartilhamento Delta

O Databricks Runtime 13.2 adiciona a capacidade de usar ALTER SHARE <share-name> ADD SCHEMA <schema-name> para compartilhar um esquema inteiro usando o Compartilhamento Delta, dando ao destinatário acesso a todas as tabelas e exibições no esquema no momento em que você o compartilha, juntamente com quaisquer tabelas e exibições que forem adicionadas ao esquema no futuro. Consulte Adicionar esquemas a um compartilhamento e ALTER SHARE.

Correções de erros

  • Corrigido um bug com o leitor JSON, onde os registros eram analisados no PERMISSIVE modo se failOnUnknownFieldsmode estivesse habilitado. Os registros agora são descartados badRecordsPathno modo ou são gravados no DROPMALFORMEDparser , se qualquer uma dessas opções estiver definida. FAILFAST lança um erro se um tipo de coluna não corresponder.

Atualizações da biblioteca

  • Bibliotecas Python atualizadas:
    • nodeenv de 1.7.0 a 1.8.0
  • Bibliotecas R atualizadas:
  • Bibliotecas Java atualizadas:
    • io.delta.delta-sharing-spark_2.12 de 0.6.7 a 0.7.0

Faísca Apache

O Databricks Runtime 13.2 inclui o Apache Spark 3.4.0. Esta versão inclui todas as correções e melhorias do Spark incluídas no Databricks Runtime 13.1 (sem suporte), bem como as seguintes correções de bugs adicionais e melhorias feitas no Spark:

  • [FAÍSCA-42750] [SC-133452] [DBRRM-273] Suporte Inserir por nome declaração
  • [FAÍSCA-43133] [SC-133728] Suporte a Scala Client DataStreamWriter Foreach
  • [FAÍSCA-43663] [SC-134135] [CONECTAR] [PS] Ativar SeriesParityTests.test_compare
  • [FAÍSCA-43684] [SC-134162] [FAÍSCA-43685] [FAÍSCA-43686] [FAÍSCA-43691] [CONECTAR] [PS] Correção (NullOps|NumOps).(eq|ne) para o Spark Connect.
  • [FAÍSCA-44021] [SC-134109] [SQL] Adicionar spark.sql.files.maxPartitionNum
  • [FAÍSCA-43910] [SC-132936] [SQL] Retirar __auto_generated_subquery_name de ids em erros
  • [FAÍSCA-43976] [SC-133375] [CORE] Manipule o caso em que modifiedConfigs não existe nos logs de eventos
  • [FAÍSCA-32559] [SC-133992] [SQL] Corrigir a lógica de corte não manipulou caracteres de controle ASCII corretamente
  • [FAÍSCA-43421] [SC-132930] [SS] Implementar o ponto de verificação baseado em Changelog para o RocksDB State Store Provider
  • [FAÍSCA-43594] [SC-133851] [SQL] Adicionar LocalDateTime a anyToMicros
  • [FAÍSCA-43884] [SC-133867] Marcadores de parada em DDL
  • [FAÍSCA-43398] [SC-133894] [CORE] O tempo limite do executor deve ser máximo de baralhamento ocioso e tempo limite de rdd
  • [FAÍSCA-43610] [SC-133892] [CONECTAR] [PS] Habilite InternalFrame.attach_distributed_column no Spark Connect.
  • [FAÍSCA-43971] [SC-133826] [CONECTAR] [PYTHON] Suporta createDataFrame do Python de forma de streaming
  • [FAÍSCA-44006] [SC-133652] [CONECTAR] [PYTHON] Suporte a artefatos de cache
  • [FAÍSCA-43790] [SC-133468] [PYTHON] [CONECTAR] [ML] Adicionar copyFromLocalToFs API
  • [FAÍSCA-43921] [SC-133461] [PROTOBUF] Gerar arquivos descritores Protobuf em tempo de compilação
  • [FAÍSCA-43906] [SC-133638] [SC-133404] [PYTHON] [CONECTAR] Implementar o suporte a arquivos em SparkSession.addArtifacts
  • [FAÍSCA-44010] [SC-133744] [PYTHON] [SS] [MENOR] Python StreamingQueryProgress rowsPerSecond correção de tipo
  • [FAÍSCA-43768] [SC-132398] [PYTHON] [CONECTAR] Suporte ao gerenciamento de dependência Python no Python Spark Connect
  • [FAÍSCA-43979] [13.X] Reverter "[SC-133456][SQL] CollectedMetrics deve ser tratado como o mesmo para auto-adesão"
  • [FAÍSCA-42290] [SC-133696] [SQL] Corrigir o erro OOM não pode ser relatado quando AQE em
  • [FAÍSCA-43943] [SC-133648] [SQL] [PYTHON] [CONECTAR] Adicionar funções matemáticas SQL ao Scala e Python
  • [FAÍSCA-43747] [SC-132047] [PYTHON] [CONECTAR] Implementar o suporte pyfile em SparkSession.addArtifacts
  • [FAÍSCA-43700] [SC-133726] [FAÍSCA-43701] [CONECTAR] [PS] Ativar TimedeltaOps.(sub|rsub) com o Spark Connect
  • [FAÍSCA-43712] [SC-133641] [FAÍSCA-43713] [CONECTAR] [PS] Ativar teste de paridade: test_line_plot, test_pie_plot.
  • [FAÍSCA-43867] [SC-132895] [SQL] Melhorar os candidatos sugeridos para o atributo não resolvido
  • [FAÍSCA-43901] [SC-133454] [SQL] Avro para suportar o tipo decimal personalizado apoiado por Long
  • [FAÍSCA-43267] [SC-133024] [JDBC] Manipular postgres coluna desconhecida definida pelo usuário como cadeia de caracteres na matriz
  • [FAÍSCA-43935] [SC-133637] [SQL] [PYTHON] [CONECTAR] Adicionar funções xpath_* ao Scala e Python
  • [FAÍSCA-43916] [SC-133647] [SQL] [PYTHON] [CONECTAR] Adicionar percentil à API Scala e Python
  • [FAÍSCA-43717] [SC-133455] [CONECTAR] Scala client reduce agg cannot handle null partitions for scala primitive inputs
  • [FAÍSCA-43984] [SC-133469] [SQL] [PROTOBUF] Alterar para usar foreach quando map não produzir resultados
  • [FAÍSCA-43612] [SC-132011] [CONECTAR] [PYTHON] Implementar SparkSession.addArtifact(s) no cliente Python
  • [FAÍSCA-44002] [SC-133606] [CONECTAR] Corrigir o manipulador de status de artefato
  • [FAÍSCA-43933] [SC-133470] [SQL] [PYTHON] [CONECTAR] Adicionar funções de agregação de regressão linear ao Scala e Python
  • [FAÍSCA-43920] [SC-133614] [SQL] [CONECTAR] Criar módulo sql/api
  • [FAÍSCA-43979] [SC-133456] [SQL] CollectedMetrics deve ser tratado como o mesmo para auto-adesão
  • [FAÍSCA-43977] [SC-133373] [CONECTAR] Corrigir resultado de verificação inesperada de dev/connect-jvm-client-mima-check
  • [FAÍSCA-43985] [SC-133412] [PROTOBUF] faísca protobuf: corrigir enums como ints bug
  • [FAÍSCA-43930] [SC-133406] [SQL] [PYTHON] [CONECTAR] Adicionar funções unix_* ao Scala e Python
  • [FAÍSCA-43807] [SC-132545] [SQL] Migrar _LEGACY_ERROR_TEMP_1269 para PARTITION_SCHEMA_IS_EMPTY
  • [FAÍSCA-43956] [SC-133123] [SQL] Corrigir o bug não exibe o sql da coluna para Percentile[Cont|Disco]
  • [FAÍSCA-42626] [SC-133248] [CONECTAR] Adicionar iterador destrutivo para SparkResult
  • [FAÍSCA-43333] [SC-132898] [SQL] Permitir que o Avro converta o tipo de união em SQL com o nome do campo estável com o tipo
  • [FAÍSCA-43953] [SC-133134] [CONECTAR] Remover pass
  • [FAÍSCA-43970] [SC-133403] [PYTHON] [CONECTAR] Ocultar métodos de dataframe não suportados do preenchimento automático
  • [FAÍSCA-43973] [SC-133272] [SS] [UI] A interface do usuário do Streaming Estruturado deve exibir consultas com falha corretamente
  • [FAÍSCA-42577] [SC-125445] [CORE] Adicione a limitação máxima de tentativas para estágios para evitar possíveis tentativas infinitas
  • [FAÍSCA-43841] [SC-132699] [SQL] Manipular atributos candidatos sem prefixo StringUtils#orderSuggestedIdentifiersBySimilarity
  • [FAÍSCA-41497] [SC-124795] [CORE] [Acompanhe] Modificar a versão de suporte de configuração spark.rdd.cache.visibilityTracking.enabled para 3.5.0
  • [FAÍSCA-37942] [SC-130983] [CORE] [SQL] Migrar classes de erro
  • [FAÍSCA-43898] [SC-132926] [CORE] Registre-se immutable.ArraySeq$ofRef automaticamente no KryoSerializer Scala 2.13
  • [FAÍSCA-43775] [SC-132891] [SQL] DataSource V2: Permite representar atualizações como exclusões e inserções
  • [FAÍSCA-43817] [SC-132662] [FAÍSCA-43702] [PYTHON] Suporte UserDefinedType em createDataFrame de pandas DataFrame e toPandas
  • [FAÍSCA-43418] [SC-132753] [SC-130685] [CONECTAR] Adicionar SparkSession.Builder.getOrCreate
  • [FAÍSCA-43549] [SC-132383] [SQL] Converta _LEGACY_ERROR_TEMP_0036 em INVALID_SQL_SYNTAX. ANALYZE_TABLE_UNEXPECTED_NOSCAN
  • [FAÍSCA-41497] [SC-124644] [CORE] Corrigindo a subcontagem do acumulador no caso da tarefa de repetição com cache rdd
  • [FAÍSCA-43892] [SC-133006] [PYTHON] Adicionar suporte de preenchimento automático para df[|] in pyspark.sql.dataframe.DataFrame
  • [FAÍSCA-43881] [SC-133140] [SQL] [PYTHON] [CONECTAR] Adicionar padrão opcional para Catalog.listDatabases
  • [FAÍSCA-43205] [SC-132623] Cláusula IDENTIFICADOR
  • [FAÍSCA-43545] [SC-132378] [SQL] [PYTHON] Suporte ao tipo de carimbo de data/hora aninhado
  • [FAÍSCA-43949] [SC-133048] [PYTHON] Atualize o cloudpickle para a versão 2.2.1
  • [FAÍSCA-43760] [SC-132809] [SQL] Anulabilidade dos resultados da subconsulta escalar
  • [FAÍSCA-43696] [SC-132737] [FAÍSCA-43697] [FAÍSCA-43698] [FAÍSCA-43699] [PS] Correção TimedeltaOps para o Spark Connect
  • [FAÍSCA-43895] [SC-132897] [CONECTAR] [GO] Preparar o caminho do pacote go
  • [FAÍSCA-43894] [SC-132892] [PYTHON] Corrigir bug em df.cache()
  • [FAÍSCA-43509] [SC-131625] [CONECTAR] Suporte à criação de várias sessões do Spark Connect
  • [FAÍSCA-43882] [SC-132888] [SQL] Atribuir nome a _LEGACY_ERROR_TEMP_2122
  • [FAÍSCA-43687] [SC-132747] [FAÍSCA-43688] [FAÍSCA-43689] [FAÍSCA-43690] [PS] Correção NumOps para o Spark Connect
  • [FAÍSCA-43604] [SC-132165] [SQL] Refatorar INVALID_SQL_SYNTAX para evitar incorporar o texto do erro no código-fonte
  • [FAÍSCA-43859] [SC-132883] [SQL] Substituir toString em LateralColumnAliasReference
  • [FAÍSCA-43792] [SC-132939] [SQL] [PYTHON] [CONECTAR] Adicionar padrão opcional para Catalog.listCatalogs
  • [FAÍSCA-43353] Reverter "[SC-132734][PYTHON] Migrar erros de sessão restantes para a classe de erro"
  • [FAÍSCA-43375] [SC-130309] [CONECTAR] Melhorar as mensagens de erro para INVALID_CONNECT_URL
  • [FAÍSCA-43863] [SC-132721] [CONECTAR] Remover redundante toSeq do SparkConnectPlanner Scala 2.13
  • [FAÍSCA-43676] [SC-132708] [FAÍSCA-43677] [FAÍSCA-43678] [FAÍSCA-43679] [PS] Correção DatetimeOps para o Spark Connect
  • [FAÍSCA-43666] [SC-132689] [FAÍSCA-43667] [FAÍSCA-43668] [FAÍSCA-43669] [PS] Correção BinaryOps para o Spark Connect
  • [FAÍSCA-43680] [SC-132709] [FAÍSCA-43681] [FAÍSCA-43682] [FAÍSCA-43683] [PS] Correção NullOps para o Spark Connect
  • [FAÍSCA-43782] [SC-132885] [CORE] Suporte à configuração de nível de log com o Spark conf estático
  • [FAÍSCA-43132] [SC-131623] [SS] [CONECTAR] Python Client DataStreamWriter foreach() API
  • [FAÍSCA-43290] [SC-131961] [SQL] Adiciona suporte a AES IV e AAD ao ExpressionImplUtils
  • [FAÍSCA-43795] [SC-132532] [CONECTAR] Remover parâmetros não usados para SparkConnectPlanner
  • [FAÍSCA-42317] [SC-129194] [SQL] Atribua o nome a _LEGACY_ERROR_TEMP_2247: CANNOT_MERGE_SCHEMAS
  • [FAÍSCA-43597] [SC-131960] [SQL] Atribua um nome à classe de erro _LEGACY_ERROR_TEMP_0017
  • [FAÍSCA-43834] [SC-132679] [SQL] Use classes de erro nos erros de compilação de ResolveDefaultColumns
  • [FAÍSCA-43749] [SC-132423] [FAÍSCA-43750] [SQL] Atribuir nomes à classe de erro _LEGACY_ERROR_TEMP_240[4-5]
  • [FAÍSCA-43576] [SC-132533] [CORE] Remover declarações não utilizadas do módulo Core
  • [FAÍSCA-43314] [SC-129970] [CONECTAR] [PYTHON] Migrar erros do cliente Spark Connect para a classe de erro
  • [FAÍSCA-43799] [SC-132715] [PYTHON] Adicionar opção binária do descritor à API do Pyspark Protobuf
  • [FAÍSCA-43837] [SC-132678] [SQL] Atribuir um nome à classe de erro _LEGACY_ERROR_TEMP_103[1-2]
  • [FAÍSCA-43862] [SC-132750] [SQL] Atribua um nome à classe de erro LEGACY_ERROR_TEMP(1254 & 1315)
  • [FAÍSCA-43886] [SC-132808] [PYTHON] Aceite tupla de genéricos como dicas de digitação de Pandas UDF
  • [FAÍSCA-43530] [SC-132653] [PROTOBUF] Ler o ficheiro descritor apenas uma vez
  • [FAÍSCA-43820] [SC-132676] [FAÍSCA-43822] [FAÍSCA-43823] [FAÍSCA-43826] [FAÍSCA-43827] Atribuir nomes à classe de erro _LEGACY_ERROR_TEMP_241[1-7]
  • [FAÍSCA-43671] [SC-132519] [FAÍSCA-43672] [FAÍSCA-43673] [FAÍSCA-43674] [PS] Correção CategoricalOps para o Spark Connect
  • [FAÍSCA-39979] [SC-132685] [SQL] Adicionar opção para usar vetores de largura variável grande para operações UDF de seta
  • [FAÍSCA-43692] [SC-132660] [FAÍSCA-43693] [FAÍSCA-43694] [FAÍSCA-43695] [PS] Correção StringOps para o Spark Connect
  • [FAÍSCA-43353] [SC-132734] [PYTHON] Migrar erros de sessão restantes para a classe de erro
  • [FAÍSCA-43815] [SC-132781] [SQL] Adicionar to_varchar alias para to_char
  • [FAÍSCA-43543] [13.x] [SC-131839] [PYTHON] Corrigir o comportamento MapType aninhado no Pandas UDF
  • [FAÍSCA-43361] [SC-131789] [PROTOBUF] documentação de atualização para erros relacionados à serialização de enum
  • [FAÍSCA-43740] [SC-132035] [PYTHON] [CONECTAR] Ocultar métodos não suportados session do preenchimento automático
  • [FAÍSCA-43022] [SC-131681] [CONECTAR] Suporte protobuf funções para o cliente Scala
  • [FAÍSCA-43304] [13.x] [SC-129969] [CONECTAR] [PYTHON] Migrar NotImplementedError para PySparkNotImplementedError
  • [FAÍSCA-43860] [SC-132713] [SQL] Habilite a recursão de cauda sempre que possível
  • [FAÍSCA-42421] [SC-132695] [CORE] Use os utils para obter o switch para alocação dinâmica usado no ponto de verificação local
  • [FAÍSCA-43590] [SC-132012] [CONECTAR] Faça connect-jvm-client-mima-check para suportar mima check com protobuf módulo
  • [FAÍSCA-43315] [13.x] [CONECTAR] [PYTHON] [SS] Migrar erros restantes de DataFrame(Reader|Writer) em classe de erro
  • [FAÍSCA-43361] [SC-130980] [PROTOBUF] faísca-protobuf: permitir serde com enum como ints
  • [FAÍSCA-43789] [SC-132397] [R] Usa 'spark.sql.execution.arrow.maxRecordsPerBatch' em R createDataFrame com seta por padrão
  • [FAÍSCA-43596] [SC-126994] [SQL] Manipular predicado IsNull em rewriteDomainJoins
  • [FAÍSCA-42249] [SC-122565] [SQL] Refinando link html para documentação em mensagens de erro.
  • [FAÍSCA-43128] [SC-131628] [CONECTAR] [SS] Tornar recentProgress e lastProgress retornar StreamingQueryProgress consistentes com a API Scala nativa
  • [FAÍSCA-43387] [SC-130448] [SQL] Forneça um código de erro legível por humanos para _LEGACY_ERROR_TEMP_1168.
  • [FAÍSCA-43334] [SC-132358] [UI] Corrigir erro ao serializar ExecutorPeakMetricsDistributions na resposta da API
  • [FAÍSCA-42958] [SC-131475] [CONECTAR] Refatorar connect-jvm-client-mima-check para suportar a verificação mima com o módulo avro
  • [FAÍSCA-43591] [SC-131977] [SQL] Atribuir um nome à classe de erro _LEGACY_ERROR_TEMP_0013
  • [FAÍSCA-38464] [SC-132211] [CORE] Usar classes de erro no org.apache.spark.io
  • [FAÍSCA-43759] [SC-132189] [SQL] [PYTHON] Expor TimestampNTZType em pyspark.sql.types
  • [FAÍSCA-43649] [SC-132036] [FAÍSCA-43650] [FAÍSCA-43651] [SQL] Atribuir nomes à classe de erro _LEGACY_ERROR_TEMP_240[1-3]
  • [FAÍSCA-43719] [SC-132016] [WEBUI] Campo de alça missing row.excludedInStages
  • [FAÍSCA-42956] [SC-127257] [CONECTAR] Suporte avro funções para o cliente Scala
  • [FAÍSCA-43487] [SC-131975] [SQL] Corrigir mensagem de erro CTE aninhado
  • [FAÍSCA-43265] [SC-129653] Mover a estrutura de erro para um módulo utils comum
  • [FAÍSCA-40912] [SC-131547] [CORE] Sobrecarga de exceções no KryoDeserializationStream
  • [FAÍSCA-43583] [SC-131976] [CORE] obter MergedBlockedMetaReqHandler do delegado em vez da instância SaslRpcHandler
  • [FAÍSCA-42996] [SC-131997] [CONECTAR] [PS] [ML] Crie e atribua tíquetes JIRA adequados para todos os testes com falha.
  • [FAÍSCA-38469] [SC-131425] [CORE] Usar classe de erro em org.apache.spark.network
  • [FAÍSCA-43718] [SC-132014] [SQL] Definir anulável corretamente para chaves em junções USING
  • [FAÍSCA-43502] [SC-131419] [PYTHON] [CONECTAR] DataFrame.drop deve aceitar coluna vazia
  • [FAÍSCA-43743] [SC-132038] [SQL] Porta HIVE-12188 (DoAs não funciona corretamente em HS2 protegido não-kerberos)
  • [FAÍSCA-43598] [SC-131929] [SQL] Atribua um nome à classe de erro _LEGACY_ERROR_TEMP_2400
  • [FAÍSCA-43138] [SC-131031] [CORE] Corrigir ClassNotFoundException durante a migração
  • [FAÍSCA-43360] [SC-131526] [SS] [CONECTAR] Cliente Scala StreamingQueryManager
  • [FAÍSCA-38467] [SC-131025] [CORE] Usar classes de erro em org.apache.spark.memory
  • [FAÍSCA-43345] [SC-131790] [FAÍSCA-43346] [SQL] Renomeie as classes de erro LEGACY_ERROR_TEMP[0041|1206]
  • [FAÍSCA-42815] [SC-126450] [SQL] Expressão de atalho de suporte à eliminação de subexpressão
  • [FAÍSCA-38462] [SC-130449] [CORE] Adicionar classe de erro INTERNAL_ERROR_EXECUTOR
  • [FAÍSCA-43589] [SC-131798] [SQL] Correção cannotBroadcastTableOverMaxTableBytesError a usar bytesToString
  • [FAÍSCA-43539] [SC-131830] [SQL] Atribuir um nome à classe de erro _LEGACY_ERROR_TEMP_0003
  • [FAÍSCA-43157] [SC-131688] [SQL] Clone InMemoryRelation plano armazenado em cache para impedir que o plano clonado faça referência aos mesmos objetos
  • [FAÍSCA-43309] [SC-129746] [FAÍSCA-38461] [CORE] Estenda INTERNAL_ERROR com categorias e adicione classe de erro INTERNAL_ERROR_BROADCAST
  • [FAÍSCA-43281] [SC-131370] [SQL] Corrigir gravador simultâneo não atualiza métricas de arquivo
  • [FAÍSCA-43383] [SC-130660] [SQL] Adicionar rowCount estatísticas a LocalRelation
  • [FAÍSCA-43574] [SC-131739] [PYTHON] [SQL] Suporte para definir executáveis Python para APIs de função UDF e pandas em trabalhadores durante o tempo de execução
  • [FAÍSCA-43569] [SC-131694] [SQL] Remover solução alternativa para HADOOP-14067
  • [FAÍSCA-43183] [SC-128938] [SS] [13.x] Introduza um novo retorno de chamada "onQueryIdle" para StreamingQueryListener
  • [FAÍSCA-43528] [SC-131531] [SQL] [PYTHON] Suporte a nomes de campos duplicados em createDataFrame com pandas DataFrame
  • [FAÍSCA-43548] [SC-131686] [SS] Remover solução alternativa para HADOOP-16255
  • [FAÍSCA-43494] [SC-131272] [CORE] Apelar replicate() diretamente em HdfsDataOutputStreamBuilder vez de refletir em SparkHadoopUtil#createFile
  • [FAÍSCA-43471] [SC-131063] [CORE] Manipular hadoopProperties e metricsProperties ausentes
  • [FAÍSCA-42899] [SC-126456] [SQL] Corrija DataFrame.to(esquema) para lidar com o caso em que há um campo aninhado não anulável em um campo anulável
  • [FAÍSCA-43302] [SC-129747] [SQL] Tornar Python UDAF uma AggregateFunction
  • [FAÍSCA-43223] [SC-131270] [Conectar] Digitado agg, reduzir funções, RelationalGroupedDataset#as
  • [FAÍSCA-43482] [SC-131375] [SS] Expanda QueryTerminatedEvent para conter a classe de erro se ela existir na exceção
  • [FAÍSCA-43359] [SC-131463] [SQL] Excluir da tabela do Hive deve lançar "UNSUPPORTED_FEATURE. TABLE_OPERATION"
  • [FAÍSCA-43284] [SC-130313] Voltar para cadeias de caracteres codificadas por url
  • [FAÍSCA-43492] [SC-131227] [SQL] Adicione aliases DATE_ADD de função 3-args e DATE_DIFF
  • [FAÍSCA-43473] [SC-131372] [PYTHON] Suporte struct type em createDataFrame de pandas DataFrame
  • [FAÍSCA-43386] [SC-131110] [SQL] Melhorar a lista de colunas/atributos sugeridos na UNRESOLVED_COLUMN.WITH_SUGGESTION classe de erro
  • [FAÍSCA-43443] [SC-131332] [SQL] Adicionar referência para inferência de tipo de carimbo de data/hora ao usar valor inválido
  • [FAÍSCA-43518] [SC-131420] [SQL] Converter _LEGACY_ERROR_TEMP_2029 em INTERNAL_ERROR
  • [FAÍSCA-42604] [SC-130648] [CONECTAR] Implementar functions.typedlit
  • [FAÍSCA-42323] [ES-669513] Reverter "[SC-123479][SQL] Atribuir nome a _LEGACY_ERROR_TEMP_2332"
  • [FAÍSCA-43357] [SC-130649] [SQL] Filtrar data tipo data cotação
  • [FAÍSCA-43410] [SC-130526] [SQL] Melhore o loop vetorizado para skipValues embalados
  • [FAÍSCA-43441] [SC-130995] [CORE] makeDotNode não deve falhar quando DeterministicLevel está ausente
  • [FAÍSCA-43324] [SC-130455] [SQL] Manipular comandos UPDATE para fontes baseadas em delta
  • [FAÍSCA-43272] [SC-131168] [CORE] Ligar createFile diretamente em vez de refletir
  • [FAÍSCA-43296] [13.x] [SC-130627] [CONECTAR] [PYTHON] Migrar erros de sessão do Spark Connect para a classe de erro
  • [FAÍSCA-43405] [SC-130987] [SQL] Remover inútil getRowFormatSQL, inputRowFormatSQL, outputRowFormatSQL método
  • [FAÍSCA-43447] [SC-131017] [R] Suporte R 4.3.0
  • [FAÍSCA-43425] [SC-130981] [SQL] Adicionar TimestampNTZType a ColumnarBatchRow
  • [FAÍSCA-41532] [SC-130523] [CONECTAR] [CLIENTE] Adicionar verificação para operações que envolvem vários quadros de dados
  • [FAÍSCA-43262] [SC-129270] [CONECTAR] [SS] [PYTHON] Migrar erros de streaming estruturado do Spark Connect para a classe de erro
  • [FAÍSCA-42992] [13.x] [SC-129465] [PYTHON] Introduza PySparkRuntimeError
  • [FAÍSCA-43422] [SC-130982] [SQL] Manter tags em LogicalRelation com saída de metadados
  • [FAÍSCA-43390] [SC-130646] [SQL] O DSv2 permite que o CTAS/RTAS reserve a anulabilidade do esquema
  • [FAÍSCA-43430] [SC-130989] [CONECTAR] [PROTO] ExecutePlanRequest suporta opções de solicitação arbitrária.
  • [FAÍSCA-43313] [SC-130254] [SQL] Adicionando valores DEFAULT de coluna ausentes para ações MERGE INSERT
  • [FAÍSCA-42842] [SC-130438] [SQL] Mesclar a classe de erro _LEGACY_ERROR_TEMP_2006 em REGEX_GROUP_INDEX
  • [FAÍSCA-43377] [SC-130405] [SQL] Ativar spark.sql.thriftServer.interruptOnCancel por padrão
  • [FAÍSCA-43292] [SC-130525] [CORE] [CONECTAR] Mudar ExecutorClassLoader para o core módulo e simplificar Executor#addReplClassLoaderIfNeeded
  • [FAÍSCA-43040] [SC-130310] [SQL] Melhorar o suporte ao tipo TimestampNTZ na fonte de dados JDBC
  • [FAÍSCA-43343] [SC-130629] [SS] FileStreamSource deve desativar uma verificação glob de arquivo extra ao criar DataSource
  • [FAÍSCA-43312] [SC-130294] [PROTOBUF] Opção para converter quaisquer campos em JSON
  • [FAÍSCA-43404] [SC-130586] [SS] Ignore a reutilização do arquivo sst para a mesma versão do armazenamento de estado RocksDB para evitar erro de incompatibilidade de id
  • [FAÍSCA-43397] [SC-130614] [CORE] Duração de descomissionamento do executor de log no executorLost método
  • [FAÍSCA-42388] [SC-128568] [SQL] Evite leituras de rodapé de parquet duas vezes no leitor vetorizado
  • [FAÍSCA-43306] [13.x] [SC-130320] [PYTHON] Migrar ValueError de tipos Spark SQL para classe de erro
  • [FAÍSCA-43337] [SC-130353] [UI] [3.4] Os ícones de seta Asc/desc para a coluna de ordenação não são apresentados na coluna da tabela
  • [FAÍSCA-43279] [SC-130351] [CORE] Limpar membros não utilizados de SparkHadoopUtil
  • [FAÍSCA-43250] [SC-130147] [SQL] Substitua a classe _LEGACY_ERROR_TEMP_2014 de erro por um erro interno
  • [FAÍSCA-43363] [SC-130299] [SQL] [PYTHON] Fazer chamada para astype o tipo de categoria somente quando o tipo de seta não é fornecido
  • [FAÍSCA-43261] [SC-130154] [PYTHON] Migrar TypeError de tipos Spark SQL para classe de erro
  • [FAÍSCA-41971] [SC-130230] [SQL] [PYTHON] Adicionar uma configuração para conversão de pandas como lidar com tipos struct
  • [FAÍSCA-43381] [SC-130464] [CONECTAR] Faça o 'transformStatCov' preguiçoso
  • [FAÍSCA-43362] [SC-130481] [SQL] Tratamento especial do tipo JSON para o conector MySQL
  • [FAÍSCA-42843] [SC-130196] [SQL] Atualize a classe de erro _LEGACY_ERROR_TEMP_2007 para REGEX_GROUP_INDEX
  • [FAÍSCA-42585] [SC-129968] [CONECTAR] Transmissão das relações locais
  • [FAÍSCA-43181] [SC-130476] [SQL] Mostrar URL da interface do usuário no spark-sql shell
  • [FAÍSCA-43051] [SC-130194] [CONECTAR] Adicionar opção para emitir valores padrão
  • [FAÍSCA-43204] [SC-129296] [SQL] Alinhar atribuições MERGE com atributos de tabela
  • [FAÍSCA-43348] [SC-130082] [PYTHON] Suporte Python 3.8 em PyPy3
  • [FAÍSCA-42845] [SC-130078] [SQL] Atualize a classe de erro _LEGACY_ERROR_TEMP_2010 para InternalError
  • [FAÍSCA-43211] [SC-128978] [VIH] Remover o suporte a Hadoop2 em IsolatedClientLoader

Ambiente do sistema

  • Sistema Operacional: Ubuntu 22.04.2 LTS
  • Java: Zulu 8.70.0.23-CA-linux64
  • Escala: 2.12.15
  • Píton: 3.10.12
  • R: 4.2.2
  • Lago Delta: 2.4.0

Bibliotecas Python instaladas

Biblioteca Versão Biblioteca Versão Biblioteca Versão
Appdirs 1.4.4 Argônio2-CFFI 21.3.0 argon2-cffi-ligações 21.2.0
AstTokens 2.2.1 ATRs 21.4.0 Backcall 0.2.0
sopa bonita4 4.11.1 preto 22.6.0 lixívia 4.1.0
pisca-pisca 1.4 boto3 1.24.28 botocore 1.27.28
certifi 2022.9.14 cffi 1.15.1 chardet 4.0.0
Normalizador de Charset 2.0.4 clicar 8.0.4 criptografia 37.0.1
cycler 0.11.0 Quisto 0.29.32 Databricks-SDK 0.1.6
dbus-python 1.2.18 depuração 1.5.1 decorador 5.1.1
DeUsedXML 0.7.1 Distlib 0.3.6 docstring-para-markdown 0,12
pontos de entrada 0.4 execução 1.2.0 facetas-visão geral 1.0.3
fastjsonschema 2.16.3 filelock 3.12.0 Fonttools 4.25.0
googleapis-comuns-protos 1.56.4 Grpcio 1.48.1 grpcio-status 1.48.1
httplib2 0.20.2 idna 3.3 importlib-metadados 4.6.4
Ipykernel 6.17.1 ipython 8.10.0 ipython-genutils 0.2.0
ipywidgets 7.7.2 Jedi 0.18.1 Jeepney 0.7.1
Jinja2 2.11.3 jmespath 0.10.0 Joblib 1.2.0
jsonschema 4.16.0 jupyter-cliente 7.3.4 jupyter_core 4.11.2
Jupyterlab-Pygments 0.1.2 jupyterlab-widgets 1.0.0 porta-chaves 23.5.0
Kiwisolver 1.4.2 launchpadlib 1.10.16 lazr.restfulclient 0.14.4
lazr.uri 1.0.6 MarkupSafe 2.0.1 matplotlib 3.5.2
matplotlib-em linha 0.1.6 Mccabe 0.7.0 Mistune 0.8.4
mais-itertools 8.10.0 mypy-extensões 0.4.3 nbclient 0.5.13
nbconvert 6.4.4 nbformat 5.5.0 Ninho-Asyncio 1.5.5
nodeenv 1.8.0 bloco de notas 6.4.12 numpy 1.21.5
OAuthlib 3.2.0 embalagem 21,3 pandas 1.4.4
PandocFilters 1.5.0 Parso 0.8.3 PathSpec 0.9.0
patsy 0.5.2 pexpect 4.8.0 pickleshare 0.7.5
Travesseiro 9.2.0 pip 22.2.2 plataformadirs 2.5.2
enredo 5.9.0 pluggy 1.0.0 Prometheus-cliente 0.14.1
prompt-toolkit 3.0.36 protobuf 3.19.4 PSUTIL 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 puro-eval 0.2.2
pyarrow 8.0.0 pycparser 2.21 Pidântico 1.10.6
Pyflakes 3.0.1 Pygments 2.11.2 PyGObject 3.42.1
PyJWT 2.3.0 Pyodbc 4.0.32 pyparsing 3.0.9
Pyright 1.1.294 pirsistent 0.18.0 python-dateutil 2.8.2
python-lsp-jsonrpc 1.0.0 python-lsp-servidor 1.7.1 pytoolconfig 1.2.2
pytz 2022.1 Pyzmq 23.2.0 pedidos 2.28.1
corda 1.7.0 s3transferir 0.6.0 scikit-learn 1.1.1
scipy 1.9.1 seaborn 0.11.2 Armazenamento Secreto 3.3.1
Enviar2Lixo 1.8.0 setuptools 63.4.1 seis 1.16.0
Soupsieve 2.3.1 ssh-import-id 5.11 dados de pilha 0.6.2
statsmodels 0.13.2 tenacidade 8.1.0 terminado 0.13.1
caminho de teste 0.6.0 ThreadPoolCtl 2.2.0 tokenize-rt 4.2.1
Tomli 2.0.1 tornado 6.1 traços 5.1.1
typing_extensions 4.3.0 Ujson 5.4.0 Upgrades autônomos 0.1
urllib3 1.26.11 virtualenv 20.16.3 wadllib 1.3.6
largura de wc 0.2.5 WebEncodings 0.5.1 whatthepatch 1.0.2
roda 0.37.1 widgetsnbextension 3.6.1 Yapf 0.31.0
zipp | 1.0.0

Bibliotecas R instaladas

As bibliotecas R são instaladas a partir do instantâneo da CRAN da Microsoft em 2023-02-10.

Biblioteca Versão Biblioteca Versão Biblioteca Versão
seta 10.0.1 AskPass 1.1 asserçãoat 0.2.1
backports 1.4.1 base 4.2.2 base64enc 0.1-3
bit 4.0.5 bit64 4.0.5 blob 1.2.3
arranque 1.3-28 brew 1.0-8 Brio 1.1.3
vassoura 1.0.3 BSLIB 0.4.2 cachem 1.0.6
Chamador 3.7.3 acento circunflexo 6.0-93 Cellranger 1.1.0
crono 2.3-59 classe 7.3-21 cli 3.6.0
Clipr 0.8.0 relógio 0.6.1 cluster 2.1.4
codetools 0.2-19 espaço em cores 2.1-0 marca comum 1.8.1
compilador 4.2.2 configuração 0.3.1 CPP11 0.4.3
lápis de cor 1.5.2 credenciais 1.3.2 curl 5.0.0
data.table 1.14.6 conjuntos de dados 4.2.2 DBI 1.1.3
DBPlyr 2.3.0 desc 1.4.2 devtools 2.4.5
diffobj 0.3.5 resumo 0.6.31 Iluminação reduzida 0.4.2
dplyr 1.1.0 DTPlyr 1.2.2 E1071 1.7-13
ellipsis 0.3.2 evaluate 0.20 Fãsi 1.0.4
Farver 2.1.1 mapa rápido 1.1.0 fontawesome 0.5.0
FORCATS 1.0.0 foreach 1.5.2 externa 0.8-82
forjar 0.2.0 FS 1.6.1 Futuro 1.31.0
future.apply 1.10.0 gargarejo 1.3.0 Genéricos 0.1.3
Gert 1.9.2 ggplot2 3.4.0 GH 1.3.1
gitcreds 0.1.2 glmnet 4.1-6 Globais 0.16.2
colar 1.6.2 GoogleDrive 2.0.0 googlesheets4 1.0.1
gower 1.0.1 gráficos 4.2.2 grDevices 4.2.2
grelha 4.2.2 gridExtra 2.3 gsubfn 0.7
gtable 0.3.1 capacete 1.2.0 Refúgio 2.5.1
mais alto 0.10 HMS 1.1.2 htmltools 0.5.4
htmlwidgets 1.6.1 httpuv 1.6.8 httr 1.4.4
IDs 1.0.1 ini 0.3.1 ipred 0.9-13
Isoband 0.2.7 iteradores 1.0.14 jquerylib 0.1.4
jsonlite 1.8.4 KernSmooth 2.23-20 Knitr 1.42
etiquetagem 0.4.2 mais tarde 1.3.0 lattice 0.20-45
lava 1.7.1 ciclo de vida 1.0.3 ouvirv 0.9.0
lubridate 1.9.1 magrittr 2.0.3 Marcação 1.5
MASSA 7.3-58.2 Matriz 1.5-1 memoise 2.0.1
métodos 4.2.2 mgcv 1.8-41 mime 0,12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 Modelador 0.1.10
munsell 0.5.0 nlme 3.1-162 nnet 7.3-18
numDeriv 2016.8-1.1 openssl 2.0.5 paralelo 4.2.2
Paralelamente 1.34.0 pilar 1.8.1 pkgbuild 1.4.0
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.2
plogr 0.2.0 plyr 1.8.8 elogiar 1.0.0
unidades bonitas 1.1.1 pROC 1.18.0 processx 3.8.0
prodlim 2019.11.13 Profvis 0.3.7 Progresso 1.2.2
progressor 0.13.0 promessas 1.2.0.1 proto 1.0.0
procuração 0.4-27 PS 1.7.2 purrr 1.0.1
r2d3 0.2.6 R6 2.5.1 RAGG 1.2.5
randomForest 4.7-1.1 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.10 RcppEigen 0.3.3.9.3
Leitor 2.1.3 ReadXL 1.4.2 receitas 1.0.4
revanche 1.0.1 revanche2 2.1.2 Controles remotos 2.4.2
Reprex 2.0.2 remodelar2 1.4.4 rlang 1.0.6
rmarkdown 2,20 RODBC 1.3-20 roxygen2 7.2.3
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-12
RSQLite 2.2.20 rstudioapi 0.14 rversões 2.1.2
Rvest 1.0.3 Sass 0.4.5 escalas 1.2.1
seletor 0.4-2 sessioninfo 1.2.2 forma 1.4.6
brilhante 1.7.4 ferramentas de origem 0.1.7-1 sparklyr 1.7.9
SparkR 3.4.0 espacial 7.3-15 splines 4.2.2
sqldf 0.4-11 QUADRADO 2021.1 estatísticas 4.2.2
stats4 4.2.2 stringi 1.7.12 stringr 1.5.0
sobrevivência 3.5-3 sys 3.4.1 fontes do sistema 1.0.4
tcltk 4.2.2 testeatat 3.1.6 formatação de texto 0.3.6
tibble 3.1.8 tidyr 1.3.0 tidyselect 1.2.0
Tidyverse 1.3.2 mudança de hora 0.2.0 timeDate 4022.108
Tinytex 0.44 ferramentas 4.2.2 TZDB 0.3.0
urlchecker 1.0.1 usethis 2.1.6 UTF8 1.2.3
utilitários 4.2.2 uuid 1.1-0 VCTRS 0.5.2
viridisLite 0.4.1 vroom 1.6.1 Waldo 0.4.0
whisker 0.4.1 withr 2.5.0 xfun 0,37
xml2 1.3.3 xopen 1.0.0 xtable 1.8-4
yaml 2.3.7 zip 2.2.2

Bibliotecas Java e Scala instaladas (versão de cluster Scala 2.12)

ID do Grupo ID do Artefacto Versão
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.390
com.amazonaws aws-java-sdk-cloudformation 1.12.390
com.amazonaws aws-java-sdk-cloudfront 1.12.390
com.amazonaws aws-java-sdk-cloudhsm 1.12.390
com.amazonaws aws-java-sdk-cloudsearch 1.12.390
com.amazonaws aws-java-sdk-cloudtrail 1.12.390
com.amazonaws aws-java-sdk-cloudwatch 1.12.390
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.390
com.amazonaws aws-java-sdk-codedeploy 1.12.390
com.amazonaws aws-java-sdk-cognitoidentity 1.12.390
com.amazonaws aws-java-sdk-cognitosync 1.12.390
com.amazonaws aws-java-sdk-config 1.12.390
com.amazonaws aws-java-sdk-core 1.12.390
com.amazonaws aws-java-sdk-datapipeline 1.12.390
com.amazonaws aws-java-sdk-directconnect 1.12.390
com.amazonaws aws-java-sdk-directory 1.12.390
com.amazonaws aws-java-sdk-dynamodb 1.12.390
com.amazonaws aws-java-sdk-ec2 1.12.390
com.amazonaws aws-java-sdk-ecs 1.12.390
com.amazonaws aws-java-sdk-efs 1.12.390
com.amazonaws aws-java-sdk-elasticache 1.12.390
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.390
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.390
com.amazonaws aws-java-sdk-elastictranscoder 1.12.390
com.amazonaws aws-java-sdk-emr 1.12.390
com.amazonaws aws-java-sdk-glacier 1.12.390
com.amazonaws aws-java-sdk-glue 1.12.390
com.amazonaws aws-java-sdk-iam 1.12.390
com.amazonaws aws-java-sdk-importexport 1.12.390
com.amazonaws aws-java-sdk-kinesis 1.12.390
com.amazonaws aws-java-sdk-kms 1.12.390
com.amazonaws aws-java-sdk-lambda 1.12.390
com.amazonaws aws-java-sdk-logs 1.12.390
com.amazonaws aws-java-sdk-machinelearning 1.12.390
com.amazonaws aws-java-sdk-opsworks 1.12.390
com.amazonaws aws-java-sdk-rds 1.12.390
com.amazonaws aws-java-sdk-redshift 1.12.390
com.amazonaws aws-java-sdk-route53 1.12.390
com.amazonaws aws-java-sdk-s3 1.12.390
com.amazonaws aws-java-sdk-ses 1.12.390
com.amazonaws aws-java-sdk-simpledb 1.12.390
com.amazonaws aws-java-sdk-simpleworkflow 1.12.390
com.amazonaws aws-java-sdk-sns 1.12.390
com.amazonaws aws-java-sdk-sqs 1.12.390
com.amazonaws aws-java-sdk-ssm 1.12.390
com.amazonaws aws-java-sdk-storagegateway 1.12.390
com.amazonaws aws-java-sdk-sts 1.12.390
com.amazonaws aws-java-sdk-support 1.12.390
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.390
com.amazonaws jmespath-java 1.12.390
com.clearspring.analytics transmissão em fluxo 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2,12 0.4.15-10
com.esotericsoftware sombreado de kryo 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml colega de turma 1.3.4
com.fasterxml.jackson.core jackson-anotações 2.14.2
com.fasterxml.jackson.core jackson-core 2.14.2
com.fasterxml.jackson.core jackson-databind 2.14.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.14.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.14.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.13.4
com.fasterxml.jackson.module jackson-module-paranamer 2.14.2
com.fasterxml.jackson.module jackson-módulo-scala_2.12 2.14.2
com.github.ben-manes.cafeína cafeína 2.9.3
com.github.fommil jniloader 1.1
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java 1.1-Nativos
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java 1.1-Nativos
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1-Nativos
com.github.fommil.netlib netlib-native_system-linux-x86_64 1.1-Nativos
com.github.luben ZSTD-JNI 1.5.2-5
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.9
com.google.crypto.tink Tink 1.7.0
com.google.errorprone error_prone_annotations 2.10.0
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.1.214
com.helger criador de perfil 1.1.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 11.2.2.jre8
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind JAXB-CORE 2.2.11
com.sun.xml.bind JAXB-IMPL 2.2.11
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe configuração 1.2.1
com.typesafe.scala-logging Escala-logging_2.12 3.7.2
com.uber h3 3.7.0
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1,15
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.11.0
commons-lang commons-lang 2.6
registo de comuns registo de comuns 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib ARPACK 3.0.3
dev.ludovic.netlib Blas 3.0.3
dev.ludovic.netlib Lapack | 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.ponte aérea compressor de ar 0.21
IO.Delta delta-compartilhamento-spark_2.12 0.7.0
io.dropwizard.metrics metrics-core 4.2.10
io.dropwizard.metrics metrics-graphite 4.2.10
io.dropwizard.metrics metrics-healthchecks 4.2.10
io.dropwizard.metrics metrics-jetty9 4.2.10
io.dropwizard.metrics métricas-jmx 4.2.10
io.dropwizard.metrics metrics-json 4.2.10
io.dropwizard.metrics metrics-jvm 4.2.10
io.dropwizard.metrics metrics-servlets 4.2.10
io.netty netty-all 4.1.87.Final
io.netty netty-buffer 4.1.87.Final
io.netty netty-codec 4.1.87.Final
io.netty netty-codec-http 4.1.87.Final
io.netty netty-codec-http2 4.1.87.Final
io.netty netty-codec-meias 4.1.87.Final
io.netty netty-comum 4.1.87.Final
io.netty netty-manipulador 4.1.87.Final
io.netty netty-handler-proxy 4.1.87.Final
io.netty netty-resolver 4.1.87.Final
io.netty transporte de rede 4.1.87.Final
io.netty netty-transport-classes-epoll 4.1.87.Final
io.netty netty-transport-classes-kqueue 4.1.87.Final
io.netty netty-transport-native-epoll 4.1.87.Final
io.netty netty-transport-native-epoll 4.1.87.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.87.Final-linux-x86_64
io.netty netty-transport-nativo-kqueue 4.1.87.Final-osx-aarch_64
io.netty netty-transport-nativo-kqueue 4.1.87.Final-osx-x86_64
io.netty netty-transport-nativo-unix-comum 4.1.87.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx recoletor 0.12.0
jacarta.anotação Jacarta.Anotação-API 1.3.5
jacarta.servlet jacarta.servlet-api 4.0.3
jacarta.validação Jacarta.validation-api 2.0.2
jakarta.ws.rs Jacarta.ws.rs-api 2.1.6
javax.activation ativação 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction API de transação 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
ml.combust.mleap mleap-databricks-runtime_2.12 v0.20.0-db2
net.java.dev.jna JNA 5.8.0
net.razorvine picles 1.3
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.floco de neve flocos de neve-ingestão-sdk 0.9.6
net.floco de neve Flocos de Neve-JDBC 3.13.29
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea Remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr stringtemplate 3.2.1
org.apache.ant formiga 1.9.16
org.apache.ant ant-jsch 1.9.16
org.apache.ant ant-launcher 1.9.16
org.apache.arrow formato de seta 11.0.0
org.apache.arrow seta-memória-núcleo 11.0.0
org.apache.arrow seta-memória-netty 11.0.0
org.apache.arrow vetor de seta 11.0.0
org.apache.avro avro 1.11.1
org.apache.avro avro-ipc 1.11.1
org.apache.avro avro-mapeado 1.11.1
org.apache.commons colecções-commons4 4.4
org.apache.commons commons-compress 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-texto 1.10.0
org.apache.curator curador-cliente 2.13.0
org.apache.curator curador-framework 2.13.0
org.apache.curator curador-receitas 2.13.0
org.apache.datasketches Datasketches-Java 3.1.0
org.apache.datasketches datasketches-memória 2.0.0
org.apache.derby derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.4
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-cliente 2.3.9
org.apache.hive colmeia-lamp-comum 2.3.9
org.apache.hive Colmeia-Serde 2.3.9
org.apache.hive colmeias-calços 2.3.9
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims colmeia-calços-0,23 2.3.9
org.apache.hive.shims colmeia-calços-comum 2.3.9
org.apache.hive.shims colmeia-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy hera 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.19.0
org.apache.logging.log4j log4j-api 2.19.0
org.apache.logging.log4j log4j-core 2.19.0
org.apache.logging.log4j log4j-slf4j2-impl 2.19.0
org.apache.mesos mesos 1.11.0-protobuf sombreado
org.apache.orc orc-núcleo 1.8.3-protobuf sombreado
org.apache.orc orc-mapreduce 1.8.3-protobuf sombreado
org.apache.orc Orc-calços 1.8.3
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-sombreado 4.22
org.apache.yetus anotações de audiência 0.13.0
org.apache.zookeeper zookeeper 3.6.3
org.apache.zookeeper zookeeper-juta 3.6.3
org.checkerframework verificador-qual 3.19.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.50.v20221201
org.eclipse.jetty jetty-continuation 9.4.50.v20221201
org.eclipse.jetty jetty-http 9.4.50.v20221201
org.eclipse.jetty jetty-io 9.4.50.v20221201
org.eclipse.jetty jetty-jndi 9.4.50.v20221201
org.eclipse.jetty jetty-plus 9.4.50.v20221201
org.eclipse.jetty jetty-proxy 9.4.50.v20221201
org.eclipse.jetty jetty-security 9.4.50.v20221201
org.eclipse.jetty jetty-server 9.4.50.v20221201
org.eclipse.jetty jetty-servlet 9.4.50.v20221201
org.eclipse.jetty jetty-servlets 9.4.50.v20221201
org.eclipse.jetty jetty-util 9.4.50.v20221201
org.eclipse.jetty cais-util-ajax 9.4.50.v20221201
org.eclipse.jetty jetty-webapp 9.4.50.v20221201
org.eclipse.jetty jetty-xml 9.4.50.v20221201
org.eclipse.jetty.websocket API WebSocket 9.4.50.v20221201
org.eclipse.jetty.websocket Websocket-cliente 9.4.50.v20221201
org.eclipse.jetty.websocket Websocket-Comum 9.4.50.v20221201
org.eclipse.jetty.websocket servidor websocket 9.4.50.v20221201
org.eclipse.jetty.websocket Websocket-servlet 9.4.50.v20221201
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 localizador hk2 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jacarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.36
org.glassfish.jersey.containers jersey-container-servlet-core 2.36
org.glassfish.jersey.core jersey-client 2.36
org.glassfish.jersey.core jersey-common 2.36
org.glassfish.jersey.core servidor de jersey 2.36
org.glassfish.jersey.inject Jersey-HK2 2.36
org.hibernate.validator hibernate-validator 6.1.7.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains anotações 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s JSON4S-ast_2.12 3.7.0-M11
org.json4s JSON4S-core_2.12 3.7.0-M11
org.json4s JSON4S-jackson_2,12 3.7.0-M11
org.json4s JSON4S-scalap_2.12 3.7.0-M11
org.lz4 LZ4-Java 1.8.0
org.mariadb.jdbc mariadb-java-client 2.7.4
org.mlflow MLFLOW-Faísca 2.2.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.3.8
org.roaringbitmap RoaringBitmap 0.9.39
org.roaringbitmap calços 0.9.39
org.rocksdb rocksdbjni 7.8.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang Escala-compiler_2.12 2.12.15
org.scala-lang Escala-library_2.12 2.12.15
org.scala-lang Escala-reflect_2,12 2.12.15
org.scala-lang.modules scala-coleção-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules Escala-xml_2.12 1.2.0
org.scala-sbt interface de teste 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.2.15
org.scalanlp Brisa-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest compatível com scalatest 3.2.15
org.scalatest scalatest-core_2.12 3.2.15
org.scalatest scalatest-diagrams_2.12 3.2.15
org.scalatest scalatest-featurespec_2.12 3.2.15
org.scalatest scalatest-flatspec_2.12 3.2.15
org.scalatest scalatest-freespec_2.12 3.2.15
org.scalatest scalatest-funspec_2.12 3.2.15
org.scalatest scalatest-funsuite_2.12 3.2.15
org.scalatest scalatest-matchers-core_2.12 3.2.15
org.scalatest scalatest-mustmatchers_2.12 3.2.15
org.scalatest scalatest-propspec_2.12 3.2.15
org.scalatest scalatest-refspec_2.12 3.2.15
org.scalatest scalatest-shouldmatchers_2.12 3.2.15
org.scalatest scalatest-wordspec_2.12 3.2.15
org.scalatest scalatest_2.12 3.2.15
org.slf4j jcl-over-slf4j 2.0.6
org.slf4j jul-to-slf4j 2.0.6
org.slf4j slf4j-api 2.0.6
org.threeten trêsdez-extra 1.7.1
org.tukaani xz 1.9
org.typelevel algebra_2.12 2.0.1
org.typelevel gatos-kernel_2.12 2.1.1
org.typelevel torre-macros_2.12 0.17.0
org.typelevel torre-platform_2.12 0.17.0
org.typelevel torre-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl mosca-selvagem-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1.33
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1