abril de 2023
Las siguientes características y mejoras de la plataforma de Azure Databricks se publicaron en abril de 2023.
Nota:
Las versiones se publican por fases. Es posible que su cuenta de Azure Databricks no se actualice hasta una semana o más después de la fecha de lanzamiento inicial.
Databricks Marketplace (versión preliminar pública): un marketplace abierto para datos, análisis e inteligencia artificial
27 de abril 27 de 2023
Ahora puede usar Databricks Marketplace para detectar, acceder e implementar cientos de productos de datos en los flujos de trabajo de inteligencia artificial y análisis. Databricks Marketplace aprovecha el uso compartido de Delta para proporcionar un uso compartido seguro y sin problemas de productos de datos gratuitos y comerciales en cualquier nube o región. Consulte Qué es Marketplace de Databricks.
Configuración del formateador de Python
25 de abril de 2023
Para archivos y cuadernos en Repos de Databricks, ahora puede configurar el formateador de Python en función de la especificación de Black. Consulte Formato de celdas de Python.
Los archivos del área de trabajo tienen disponibilidad general
Abril de 24 de 2023
Ahora puede trabajar con archivos que no son de cuadernos en Azure Databricks. Los archivos de áreas de trabajo están habilitados de forma predeterminada en todas las áreas de trabajo. Consulte ¿Qué son los archivos del área de trabajo?
Los scripts de inicialización con ámbito de clúster ahora se pueden almacenar en archivos del área de trabajo
Abril de 24 de 2023
Ahora puede almacenar scripts de inicialización con ámbito de clúster en archivos del área de trabajo, independientemente de la versión de Databricks Runtime usada por el proceso. Databricks recomienda almacenar todos los scripts de inicialización con ámbito de clúster en los archivos del área de trabajo. Consulte Almacenar scripts de inicialización en archivos del área de trabajo.
Creación de un ámbito de secreto respaldado por Azure Key Vault con una entidad de servicio
Abril de 19 de 2023
Ahora puede crear un ámbito de secreto con respaldo de Azure Key Vault mediante una entidad de servicio. Vea Creación de un ámbito de secreto compatible con Azure Key Vault
Los nuevos privilegios de Delta Sharing permiten delegar tareas de recursos compartidos, destinatarios y administración de proveedores
Abril de 18 de 2023
Los nuevos privilegios USE SHARE, USE RECIPIENT, USE PROVIDERy SET SHARE PERMISSION habilitan la delegación de tareas de administración de recursos compartidos, destinatarios y proveedores que, de lo contrario, requerirían el rol de administrador de metastore o la propiedad del objeto. Estos privilegios permiten limitar el número de usuarios que tienen el eficaz rol de administrador de metastore. Consulte Tipos de privilegios que se aplican solo a Delta Sharing o Databricks Marketplace.
Databricks Connect V2 (versión preliminar pública)
Abril de 17 de 2023
A partir de Databricks Runtime 13.0, Databricks Connect se basa en Spark Connect, lo que permite a los desarrolladores usar la eficacia de Databricks y su IDE de elección para desarrollar y depurar de forma interactiva su código en cualquier área de trabajo de Azure Databricks.
Nueva interfaz de usuario de métricas de clúster
Abril de 14 de 2023
Los clústeres que usan Databricks Runtime 13.0 y versiones posteriores tienen acceso a la nueva interfaz de usuario de métricas de clúster. Esta característica reemplaza a Ganglia como herramienta de supervisión de métricas de clúster. La nueva interfaz de usuario de métricas de clúster incluye una vista dinámica del rendimiento del clúster y vistas históricas personalizadas de minutos a minuto. Para obtener más información, consulte Visualización de métricas de proceso.
Databricks Runtime 13.0 tiene disponibilidad general
Abril de 14 de 2023
Databricks Runtime 13.0 y Databricks Runtime 13.0 ML ahora están disponibles con carácter general.
Consulte Databricks Runtime 13.0 (sin soporte técnico) y Databricks Runtime 13.0 para Machine Learning (sin soporte técnico).
Controlar el acceso a la consola de la cuenta por intervalos de direcciones IP (versión preliminar pública)
Abril de 17 de 2023
La consola de la cuenta de Azure Databricks ahora admite listas de acceso IP para controlar el acceso a la consola de la cuenta por intervalos de direcciones IP, de forma similar a la compatibilidad existente con listas de acceso IP para áreas de trabajo. Use una interfaz de usuario de consola de cuenta o una API REST para administrar el acceso. Consulte Listas de acceso de IP para la consola de la cuenta.
Cuando Azure Databricks bloquea una solicitud, Azure Databricks genera un nuevo evento en los registros de auditoría de nivel de cuenta con el servicio accounts y el evento accountIpAclsValidationFailed. Consulte Referencia del registro de diagnóstico.
El proveedor de Terraform de Databricks se ha actualizado a la versión 1.14.3
Abril de 14 de 2023
La versión 1.14.3 agrega compatibilidad con exportadores para databricks_sql_alert, agrega compatibilidad con notificaciones en databricks_pipeline y mucho más. Para más información, consulte el registro de cambios de la versión 1.14.3.
Entradas de registro de diagnóstico para la configuración de administrador modificada para el área de trabajo
Abril de 14 de 2023
Ahora hay eventos de registro de auditoría para los cambios en algunas configuraciones de administrador en los registros de diagnóstico del área de trabajo. Dentro del accounts servicio, los nuevos nombres de acción de evento son deleteSetting y setSetting. Consulte Referencia del registro de diagnóstico. No todas las configuraciones generan eventos auditables.
Para la clave administrada por el cliente inicial para discos administrados, Azure Databricks finaliza ahora los recursos de proceso
Abril de 10 de 2023
Anteriormente, al agregar inicialmente una clave administrada por el cliente para discos administrados, se reinician todos los recursos de proceso en ejecución (clústeres, grupos). Los recursos de proceso ahora no se reinician, lo que significa que debe iniciarlos manualmente una vez completada la actualización. Azure Databricks impide clústeres ejecutar o comenzar cuando se está añadiendo una clave. Planee el tiempo de inactividad y finalice todos los recursos de proceso antes de agregar la clave para evitar la finalización automática, lo que puede causar problemas para algunos tipos de cargas de trabajo.
En el caso de un área de trabajo que ya tiene una clave administrada por el cliente para discos administrados, puede rotar la clave sin terminar los recursos de proceso.
Proveedor de Terraform de Databricks actualizado a las versiones 1.14.1 y 1.14.2
Abril de 4-6 de 2023
La versión 1.14.1 excluye los roles de las llamadas de lista de LA API de SCIM para reducir la carga en el servicio SCIM de Databricks, etc. La versión 1.14.2 agrega una tarea de archivo SQL al databricks_job recurso, corrige varios errores, etc. Para más información, consulte el registro de cambios de la versión 1.14.1 y 1.14.2.
Configuración de usuario de SQL combinada y configuración de usuario general
Abril de 3-5 de 2023
La configuración de usuario de SQL se ha combinado con la configuración general del usuario del área de trabajo para crear una experiencia unificada para los usuarios del área de trabajo. Ahora se accede a toda la configuración de usuario de SQL desde Configuración:
- La pestaña Contraseña es ahora la pestaña Cuenta y Contraseña.
- La pestaña Fragmentos de código de consulta es visible para los usuarios con el derecho de SQL.
Visualizaciones de cuadernos heredados en desuso
Abril de 4 de 2023
La creación y edición de visualizaciones heredadas de cuadernos está en desuso y se quitará pronto del producto. Las visualizaciones heredadas existentes se seguirán representando. Los detalles aparecerán en las notificaciones del producto.
La página Crear o modificar tabla a partir de la carga de archivos admite cargas de archivos JSON
3 de abril de 2023
La página Crear o modificar tabla a partir de la carga de archivos ahora admite cargas de archivos JSON. Para obtener más información, consulte Crear o modificar una tabla mediante la carga de archivos.