Junio de 2023
Estas características y mejoras de la plataforma Azure Databricks se publicaron en junio de 2023.
Nota:
Las versiones se publican por fases. Es posible que su área de trabajo de Azure Databricks no se actualice hasta una semana o más después de la fecha de lanzamiento inicial.
El proveedor de Terraform de Databricks se ha actualizado a la versión 1.20.0
29 de junio de 2023
La versión 1.20.0 del proveedor de Terraform de Databricks agrega compatibilidad con el recurso de Catálogo de Unitydatabricks_catalog_workspace_binding, mejora la exportación de usuarios y grupos en el nivel de cuenta, etc. Para información más detallada, consulte los registros de cambios para la versión 1.20.0.
CLI de Databricks actualizada a la versión 0.200.1 (versión preliminar pública)
28 de junio de 2023
La versión 0.200.1 de la CLI de Databricks actualiza los comandos fs ls y fs cp, admite archivos locales como valor predeterminado para los comandos fs, agrega detección de proveedores al comando repos create, etc. Para información más detallada, consulte los registros de cambios para la versión 0.200.1.
SDK de Databricks para Go actualizado a la versión 0.12.0 (beta)
28 de junio de 2023
El SDK de Databricks para Go versión 0.12.0 agrega compatibilidad con parámetros de nivel de trabajo y definiciones de parámetros, ejecución condicional de tareas de trabajo y varias correcciones de errores para otros servicios. Para información más detallada, consulte los registros de cambios para la versión 0.12.0.
SDK de Databricks para Go actualizado a la versión 0.11.0 (beta)
28 de junio de 2023
El SDK de Databricks para Go versión 0.11.0 presenta varios cambios importantes en las API de Go, incluidas docenas de adiciones, cambios de nombre y consolidación. Para información más detallada, consulte los registros de cambios para la versión 0.11.0.
SDK de Databricks para Python (Beta)
28 de junio de 2023
El SDK de Databricks para Python ahora está disponible como beta. El SDK de Databricks para Python permite automatizar cuentas, áreas de trabajo y recursos de Azure Databricks mediante la ejecución de código de Python.
El SDK de Databricks para Python.
SDK de Databricks para Go (Beta)
28 de junio de 2023
El SDK de Databricks para Go ahora está disponible como beta. Aprenda a usar el SDK de Databricks para Go para automatizar cuentas, áreas de trabajo y recursos de Azure Databricks mediante la ejecución de código de Go.
Ver SDK de Databricks para Go.
Acceso al registro de auditoría, el uso facturable y las tablas del sistema de linaje (versión preliminar pública)
28 de junio de 2023
Los administradores de cuentas ahora pueden habilitar el acceso a las tablas del sistema en cuentas de Azure Databricks. Las tablas del sistema son un almacén analítico alojado en Azure Databricks de los datos operativos de tu cuenta. Las tablas del sistema proporcionan datos de fácil acceso para que puedas observar lo que ocurre en toda la cuenta.
Para obtener más información, consulte Supervisar el uso con tablas del sistema.
Modelos en Unity Catalog (versión preliminar pública)
28 de junio de 2023
Ahora puede actualizar los flujos de trabajo del Registro de modelos de MLflow para controlar los modelos a través del Catálogo de Unity. El Catálogo de Unity proporciona control de acceso centralizado, auditoría, linaje, uso compartido de modelos entre áreas de trabajo y mejores flujos de trabajo de implementación de MLOps. Databricks recomienda usar Modelos en el Catálogo de Unity en lugar del registro de modelos de área de trabajo existente, que quedará en desuso en el futuro. Para más información, consulte Administración del ciclo de vida del modelo en el Catálogo de Unity.
Databricks Marketplace ahora tiene disponibilidad general
27 de junio de 2023
Ya puede usar Databricks Marketplace para detectar, acceder e implementar cientos de productos y cuadernos de datos de proveedores principales en los flujos de trabajo de inteligencia artificial y análisis. Los aspectos destacados desde el inicio de la versión preliminar pública incluyen nuevos proveedores, como Dun y Bradstreet, LexisNexis, Refinitiv (London Stock Exchange Group), YipitData y ZoomInfo. Además, se han agregado intercambios privados y la administración simplificada de permisos de consumidor mediante el privilegio USE_MARKETPLACE_ASSETS.
Consulte Qué es Marketplace de Databricks.
Databricks Runtime 13.2 (versión beta)
26 de junio de 2023
Databricks Runtime 13.2 y Databricks Runtime 13.2 ML ahora están disponibles como versiones Beta.
Consulte Databricks Runtime 13.2 (sin soporte técnico) y Databricks Runtime 13.2 para Machine Learning (sin soporte técnico).
Extensión de Databricks para Visual Studio Code (disponibilidad general)
26 de junio de 2023
La extensión de Databricks para Visual Studio Code ahora está disponible con carácter general. Conéctese al lago de datos, realice la depuración interactiva y ejecute cuadernos de Jupyter Notebook, todo ello sin salir del IDE. Use la navegación de código del IDE, la refactorización, la finalización y la identificación de errores.
Consulte Extensión de Databricks para Visual Studio Code.
Habilitar claves administradas por el cliente mediante la CLI de Azure y PowerShell sin una plantilla
23 de junio de 2023
Ahora puede habilitar claves administradas por el cliente para servicios administrados y discos administrados mediante la CLI de Azure y PowerShell sin usar una plantilla. Esto ya estaba disponible para las claves administradas por el cliente para DBFS. Consulte Habilitación de claves administradas por el cliente para servicios administrados, Configuración de claves administradas por el cliente para discos administrados de Azure y Claves administradas por el cliente para la raíz de DBFS.
Los almacenes SQL sin servidor funcionan con el back-end Azure Private Link habilitado
22 de junio de 2023
La habilitación del back-end Azure Private Link ya no impide que se inicien almacenes de SQL sin servidor. Los recursos de proceso sin servidor no usan la conexión de back-end Azure Private Link si está habilitada. Consulte Habilitar almacenes de SQL sin servidor y Habilitación de las conexiones back-end y front-end de Azure Private Link.
Consulte información general visual sobre las ejecuciones de trabajos completadas en la interfaz de usuario de trabajos de Azure Databricks
22 de junio de 2023
Una interfaz de usuario mejorada de trabajos de Azure Databricks proporciona información general visual de las ejecuciones de trabajos completadas, filtrables por estado y hora de ejecución, y una lista de los errores de trabajo más comunes. El filtro de hora predeterminado cubre las 48 horas anteriores. Consulte Visualización de ejecuciones de trabajos recientes.
CLI de Databricks (versión preliminar pública)
21 de junio de 2023
La interfaz de la línea de comandos de Databricks (CLI de Databricks) ha sufrido una revisión importante. La nueva CLI cubre todas las operaciones de la API de REST de Databricks y admite todos los tipos de autenticación de Azure Databricks. Los usuarios de macOS y Linux pueden instalar la nueva CLI con Homebrew. También se admite Windows.
Paginación mejorada de los resultados de las solicitudes de API List all jobs y List job runs
14 de junio de 2023
Ahora puede usar el parámetro page_token para paginar los resultados devueltos desde las solicitudes API de JOBS GET /api/2.1/jobs/list y GET /api/2.1/jobs/runs/list. Esta paginación basada en tokens reemplaza los parámetros offset y limit en desuso y mejora la escalabilidad del servicio para estas solicitudes.
El explorador del área de trabajo de página completa incluye Repos
14 de junio de 2023
La experiencia del explorador del área de trabajo de página completa ahora se extiende a Repos. Puede examinar el contenido en Repos de Databricks junto con objetos del área de trabajo si hace clic en Área de trabajo en la barra lateral. También puede examinar el contenido desde un cuaderno mediante un explorador contextual. Para obtener más información sobre el explorador del área de trabajo de página completa, consulte Navegar por el área de trabajo y Explorador del área de trabajo.
El proveedor de Terraform de Databricks se ha actualizado a la versión 1.19.0
14 de junio de 2023
El proveedor 1.19.0 de Databricks Terraform agrega run_as y run_as_user_name a databricks_job, agrega más atributos a databricks_cluster_policy, agrega force_destroy a databricks_external_location y mucho más. Para más información, consulte el registro de cambios de la versión 1.19.0.
Ejecutar trabajos como una entidad de servicio (versión preliminar pública)
13 de junio de 2023
También puede conceder permisos a usuarios, entidades de servicio y grupos de Azure Databricks para usar entidades de servicio. Esto permite a los usuarios ejecutar trabajos como la entidad de servicio, en lugar de ejecutarse como identidad del propietario del trabajo, para evitar que se produzcan errores en los trabajos si un usuario abandona la organización o se modifica un grupo.
Consulte Roles para administrar entidades de servicio y Ejecutar un trabajo como entidad de servicio.
La nueva interfaz de usuario de la entidad de servicio proporciona una mejor experiencia de administración
13 de junio de 2023
Ahora puede usar la nueva interfaz de usuario de la entidad de servicio para administrar entidades de servicio en el área de trabajo. La interfaz de usuario de la entidad de servicio le permite agregar entidades de servicio al área de trabajo, configurar derechos y administrar permisos de entidad de servicio. Consulte: Administración de entidades de servicio.
Carpetas principales restauradas cuando los usuarios se vuelven a agregar a las áreas de trabajo
9 de junio de 2023
A partir de ahora, cuando un administrador quite a un usuario de un área de trabajo y vuelva a agregarlo, la carpeta principal del usuario se restaurará. Anteriormente, al volver a agregarse al área de trabajo, el usuario recibía una nueva carpeta principal vacía. Su antigua carpeta principal se conservaba como copia de seguridad. Para obtener más información sobre las carpetas del área de trabajo, consulte Organizar objetos del área de trabajo en carpetas.
Marketplace de Databricks: los intercambios privados ya están disponibles
7 de junio de 2023
Los intercambios privados permiten a los proveedores de datos compartir productos de datos con un grupo seleccionado de consumidores invitados. Las listas privadas aparecen en la página principal de Marketplace de los consumidores invitados, pero no aparecen en el Marketplace público. Consulte Creación y administración de intercambios privados en Databricks Marketplace.
Marketplace de Databricks: los consumidores pueden desinstalar productos de datos mediante la interfaz de usuario
5 de junio de 2023
Los consumidores de datos ahora pueden desinstalar cualquier producto de datos mediante la interfaz Mis solicitudes de Marketplace. Consulte Eliminar productos de datos instalados.
Marketplace de Databricks: los proveedores pueden crear sus propios perfiles
5 de junio de 2023
Los proveedores de datos ahora pueden crear y actualizar sus propios perfiles, una vez aprobada su aplicación de proveedor. Consulte Creación de un perfil de proveedor de Marketplace.
Databricks Connect V2 está disponible con carácter general para Python
2 de junio de 2023
A partir de Databricks Runtime 13.1, Databricks Connect "v2" ya está disponible con carácter general para Python. Esta versión agrega compatibilidad con los flujos estructurados, todas las características delta y Pandas en Spark. También incluye compatibilidad con OAuth (experimental), al utilizar el SDK de Databricks incluido para Python.
El proveedor de Terraform de Databricks se ha actualizado a la versión 1.18.0
2 de junio de 2023
El proveedor 1.18.0 de Databricks Terraform agrega un recurso databricks_volume, compatibilidad de databricks_model_servingcon databricks_permissions, etc. Para más información, consulte el registro de cambios de la versión 1.18.0.
Nuevos proveedores de Marketplace de Databricks
1 de junio de 2023
Ocho nuevos proveedores han publicado listados en Databricks Marketplace en el último mes. Entre ellas se incluyen las siguientes:
- IQVIA: Datos de ciencias sanitarias y biológicas.
- Morningstar: datos de inversión e información de investigación, como datos de clasificación de riesgos ESG.
- Vaisala: datos meteorológicos y de entorno.
- Sucali: métricas de rendimiento inmobiliario para fondos de cobertura e inversores.
- Veritas Data Research: índice completo de datos de mortalidad de los EE. UU. de 2010 a hoy.
- Collectors Data Store: datos de tarjetas deportivas y de coleccionistas para anunciantes y consumidores.
- Tego Cyber: datos de inteligencia sobre amenazas y ciberseguridad
- Ribbon Health: datos de proveedores de atención sanitaria.
Si tiene preguntas sobre estos proveedores o Marketplace, póngase en contacto con dataconsumers@databricks.com. Consulte ¿Qué es Marketplace de Databricks?
Databricks Runtime 13.1 está disponible de forma general
1 de junio de 2023
Databricks Runtime 13.1 y Databricks Runtime 13.1 ML ahora están disponibles con carácter general.
Consulte Databricks Runtime 13.1 (sin soporte técnico) y Databricks Runtime 13.1 para Machine Learning (sin soporte técnico).
Visualización de datos de cuadernos, editor de SQL y Catalog Explorer con el explorador de esquema unificado (versión preliminar pública)
1 de junio de 2023
El nuevo explorador de esquema unificado le permite ver todos los datos en el metastore del Catálogo de Unity sin salir de un cuaderno o el editor de SQL. Puede seleccionar Para usted para limitar la vista a solo los datos activos que usa y a sus favoritos.
Para obtener más información sobre Catalog Explorer, vea Catalog Explorer.
Para obtener información sobre cómo acceder a Catalog Explorer desde un cuaderno, vea Examen de datos.