Febrero de 2024

Estas características y mejoras de la plataforma Azure Databricks se publicaron en febrero de 2024.

Nota:

Las versiones se publican por fases. Es posible que su cuenta de Azure Databricks no se actualice hasta una semana o más después de la fecha de lanzamiento inicial.

Uso de Delta Live Tables en la ingeniería de características (versión preliminar pública)

29 de febrero de 2024

Ya puede usar cualquier Delta Live Table del catálogo de Unity con una clave principal como tabla de características para el entrenamiento o la inferencia de modelos. Unity Catalog proporciona detección de características, gobernanza, linaje y acceso entre áreas de trabajo. Para obtener más información, consulte Creación de una tabla de características en el catálogo de Unity.

29 de febrero de 2024

La dirección IPv4 de origen para las conexiones PrivateLink de front-end ahora se capturan en source_ip_address en los registros de auditoría. Consulte Referencia del registro de diagnósticos y Configuración de la conectividad privada con Azure Databricks.

Restricción del cambio de un propietario de trabajo y la ejecución como configuración

29 de febrero de 2024

Los administradores de un área de trabajo pueden cambiar un propietario de trabajo a cualquier usuario o entidad de servicio de su área de trabajo de forma predeterminada, y el trabajo se ejecutará como configuración para cualquier usuario de su área de trabajo o entidad de servicio en las que tenga el rol de Usuario de la entidad de servicio.

Los administradores de cuentas ya pueden restringir a los administradores del área de trabajo para que solo cambien a sí mismos un propietario de trabajo y el trabajo se ejecute como configuración para las entidades de servicio que tienen el rol de Usuario de entidad de servicio o para ellos mismos. Puede automatizar la habilitación de esta configuración después de la creación del área de trabajo. Consulte Restringir administradores de áreas de trabajo.

Compatibilidad con entidades de servicio administradas de Databricks

28 de febrero de 2024

Ahora puede crear y administrar entidades de servicio directamente en Azure Databricks. Anteriormente, todas las entidades de servicio tenían que estar vinculadas a una entidad de servicio de Microsoft Entra ID existente. Consulte Entidades de servicio Databricks y Microsoft Entra ID (anteriormente Azure Active Directory).

Habilitación de la actualización automática del clúster (versión preliminar pública)

27 de febrero de 2024

La actualización automática del clúster garantiza que todos los clústeres de un área de trabajo se actualicen periódicamente con la imagen del sistema operativo host y las actualizaciones de seguridad más recientes. La ventana de mantenimiento es configurable. Consulte Actualización automática del clúster. Al habilitar esta característica en un área de trabajo, se agrega automáticamente el complemento Seguridad y cumplimiento mejorado. Consulte la página de precios.

Los administradores pueden habilitar características de seguridad y cumplimiento mejorado (versión preliminar pública)

27 de febrero de 2024

Los administradores ya pueden habilitar las características de la Configuración de seguridad y cumplimiento mejorados: el perfil de seguridad de cumplimiento, la supervisión de seguridad mejorada y la actualización automática de clústeres. Use Azure Portal o una plantilla de ARM. El uso de estas características agrega automáticamente el complemento Seguridad y cumplimiento mejorado. Consulte la página de precios.

La característica de actualización automática del clúster y la capacidad de habilitar las características de Seguridad y cumplimiento mejorado por su cuenta se encuentran en versión preliminar pública. Sin embargo, el propio perfil de seguridad de cumplimiento subyacente y la supervisión de seguridad mejorada están disponibles con carácter general (GA).

Compatibilidad con el almacenamiento de Cloudflare R2 para evitar tarifas de salida entre regiones (versión preliminar pública)

26 de febrero de 2024

Ahora puede usar Cloudflare R2 como almacenamiento en la nube para los datos registrados en Unity Catalog. Cloudflare R2 está pensado principalmente para los casos de uso compartido de Delta en los que desea evitar las tarifas de salida de datos que cobran los proveedores de nube cuando los datos cruzan regiones. El almacenamiento de R2 admite todos los recursos de inteligencia artificial y datos de Databricks compatibles con AWS S3, Azure Data Lake Storage Gen2 y Google Cloud Storage. La compatibilidad con R2 requiere Databricks Runtime 14.3 o SQL Warehouse 2024.15. Consulte Uso de réplicas de Cloudflare R2 o migración de almacenamiento a R2 y Creación de una credencial de almacenamiento para conectarse a Cloudflare R2.

La interfaz de usuario de adición de datos admite el formato de archivo XML

23 de febrero de 2024

La interfaz de usuario de agregar datos ahora admite la carga y la ingesta de archivos XML desde el almacenamiento de objetos en la nube. Consulte Carga de datos mediante la interfaz de usuario para agregar datos.

Usar funciones de IA para invocar un modelo de IA generativo de las API de Foundation Model

22 de febrero de 2024

Ahora puede usar funciones de IA para invocar un modelo de inteligencia artificial generativa de última generación de las API de modelo de Databricks Foundation para realizar tareas de IA como análisis de sentimiento y clasificación.

Consulte Funciones de IA con las API de modelo de Databricks Foundation para ver las funciones disponibles.

Los volúmenes de Unity Catalog están en fase de disponibilidad general

22 de febrero de 2024

Los volúmenes de Unity Catalog ahora están disponibles con carácter general en Databricks Runtime 14.3 LTS y versiones posteriores. Databricks recomienda usar volúmenes para administrar el acceso de lectura y escritura a datos no tabulares en el almacenamiento de objetos en la nube. Consulte Crear y trabajar con volúmenes.

16-22 de febrero de 2024

La búsqueda de Azure Databricks ahora aprovecha DatabricksIQ para proporcionar una experiencia de búsqueda más inteligente con tecnología IA. La nueva experiencia de búsqueda a página completa ofrece más espacio para ver los resultados, más metadatos para los objetos y más filtros para acotar los resultados.

Consulte Búsqueda de objetos del área de trabajo.

Ejecución de trabajos de cuadernos de SQL en una instancia de SQL Warehouse

8 de febrero de 2024

Ahora puede programar y ejecutar trabajos de cuaderno mediante SQL Warehouse como recurso de proceso. Consulte Uso de un cuaderno con una instancia de SQL Warehouse.

Los desencadenadores de llegada de archivos de los flujos de trabajo de Azure Databricks están disponibles con carácter general

7 de febrero de 2024

Los desencadenadores de llegada de archivos ahora están disponibles con carácter general en todos los proveedores de nube. Con esta versión, puede usar desencadenadores de llegada de archivos para ejecutar un trabajo de Azure Databricks cuando lleguen nuevos archivos a un volumen de Unity Catalog, además de la compatibilidad existente con ubicaciones externas de Unity Catalog. Consulte Desencadenar trabajos cuando llegan nuevos archivos.

Esta versión también elimina una limitación con el uso de desencadenadores de llegada de archivos con un firewall de Azure.

7 de febrero de 2024

Ahora puede buscar modelos de aprendizaje automático en Unity Catalog mediante la barra de búsqueda global de la interfaz de usuario del área de trabajo de Databricks. Consulte Administración del ciclo de vida de los modelos en Unity Catalog y Búsqueda de objetos del área de trabajo.

El proxy de servidor Git de Databricks está disponible con carácter general

6 de febrero de 2024

Puede usar el proxy de servidor Git de Databricks para configurar el acceso seguro desde los repositorios de Databricks al servidor Git local. Consulte Configuración de la conectividad de Git privada para carpetas de Git (Repos) de Databricks.

El proxy de servidor Git de Databricks ya no requiere permisos de CAN_ATTACH_TO

6 de febrero de 2024

La versión de disponibilidad general del proxy de servidor Git de Databricks ha eliminado la necesidad de proporcionar a todos los usuarios permisos CAN_ATTACH_TO.

Si configuró previamente el proxy de servidor Git de Databricks con privilegios CAN_ATTACH_TO, consulte Eliminación de permisos globales CAN_ATTACH_TO.

La compatibilidad con archivos del área de trabajo para las tareas de archivo dbt y SQL está disponible con carácter general

1 de febrero de 2024

La compatibilidad con el uso de proyectos de dbt y archivos SQL almacenados en carpetas del área de trabajo de Azure Databricks ahora está disponible con carácter general, lo que se agrega a la compatibilidad existente con el uso de archivos almacenados en un repositorio Git remoto. Consulte Creación y ejecución de trabajos de Azure Databricks y Uso de transformaciones de dbt en un trabajo de Azure Databricks.

Databricks Connect está disponible con carácter general para Scala

1 de febrero de 2024

A partir de Databricks Runtime 14.3 LTS, Databricks Connect ya está disponible con carácter general para Scala.

Creación de tablas a partir de archivos en volúmenes

1 de febrero de 2024

Ahora puede usar la interfaz de usuario para crear tablas administradas de Unity Catalog a partir de archivos de datos almacenados en volúmenes de Unity Catalog. Consulte Creación tablas a partir de volúmenes.

Databricks Runtime 14.3 LTS está disponible con carácter general

1 de febrero de 2024

Databricks Runtime 14.3 LTS y Databricks Runtime 14.3 LTS ML ahora están disponibles con carácter general.

Consulte Databricks Runtime 14.3 LTS y Databricks Runtime 14.3 LTS para Machine Learning.

Delta Sharing admite tablas que usan vectores de eliminación (versión preliminar pública)

1 de febrero de 2024

Delta Sharing ahora admite el uso compartido de tablas que usan vectores de eliminación, que son una característica de optimización de almacenamiento que puede habilitar en tablas Delta. Los destinatarios pueden leer tablas que usan vectores de eliminación mediante una instancia de SQL Warehouse, un clúster que ejecuta Databricks Runtime 14.1 o superior o un proceso que ejecuta delta-sharing-spark de código abierto 3.1 o superior. Se implementará la compatibilidad gradualmente durante el próximo mes.

Consulte Agregar tablas con vectores de eliminación o asignación de columnas a un recurso compartido, Tablas de lectura con vectores de eliminación o asignación de columnas habilitadasy Lectura de tablas con vectores de eliminación o asignación de columna habilitadas.