Junio de 2024

Estas características y mejoras en la plataforma de Azure Databricks se publicaron en junio de 2024.

Nota:

Las versiones se lanzan en fases. Es posible que su cuenta de Azure Databricks no se actualice hasta una semana o más después de la fecha de lanzamiento inicial.

Cuadernos: resaltado de sintaxis desordenada

16 de junio de 2024

El resaltado de errores de sintaxis de Python en los cuadernos ahora advierte a los usuarios cuando se usan variables antes de que se declaren y sugieren una corrección.

El Asistente para los "Notebooks" diagnostica automáticamente los errores

16 de junio de 2024

El Asistente de Databricks ahora diagnostica automáticamente errores de código en cuadernos. Este usa IA generativa para analizar el código y el mensaje de error para sugerir una corrección directamente en el cuaderno. Para más información, consulte Habilitación e prueba de Databricks Assistant.

Mejoras en el Explorador de catálogos

28 de junio de 2024

Se han realizado las siguientes mejoras en el Explorador de catálogos:

• Se ha agregado una sección de acceso rápido que muestra los objetos recientes del catálogo de Unity, los objetos favoritos del catálogo de Unity y los catálogos y esquemas para la exploración.

• Se ha quitado la barra superior y la estructura de acordeón, y se han movido los puntos de entrada para lo siguiente a un menú con el icono de engranaje en la barra lateral con el explorador de esquemas para una navegación más sencilla:

  • Selección del proceso
  • Uso compartido delta
  • Credenciales de almacenamiento
  • Ubicaciones externas
  • Conexiones
  • Examinar DBFS

  También puede acceder a Delta Sharing y datos externos en la parte superior del Explorador de catálogos, encima de la sección Acceso rápido.

Servicio de varios modelos externos desde un único modelo de puntos de conexión de servicio

27 de junio de 2024

Mosaic AI Model Serving ahora admite el servicio de varios modelos externos por modelo de puntos de conexión de servicio. Consulte Implementar múltiples modelos externos en un endpoint.

Databricks Assistant ahora está disponible con carácter general

27 de junio de 2024

Databricks Assistant se ha publicado con carácter general. Entre las funcionalidades del asistente se incluyen:

• Generar, depurar, optimizar y explicar el código.
• Crear visualizaciones a partir de los datos. Consulte Creación de visualizaciones con Databricks Assistant.
• Depuración de trabajos (característica en vista previa).
• Codificar y editar consultas SQL.
• Encontrará información pertinente en la base de conocimiento y la documentación de Azure Databricks.

Para obtener más información, consulte ¿Qué es Databricks Assistant?.

Databricks Assistant ahora proporciona títulos a subprocesos

27 de junio de 2024

Para navegar más fácilmente por los subprocesos de ayuda, Databricks Assistant proporciona títulos a los subprocesos en función del contexto de la indicación.

Consulte Habilitar e probar Databricks Assistant.

Administrador de entornos de cuadernos sin servidor

27 de junio de 2024

Ahora puede instalar dependencias de Python para cuadernos sin servidor mediante el panel lateral Entorno , que proporciona un único lugar para editar, ver y exportar los requisitos de biblioteca de un cuaderno. Consulte Configuración del entorno sin servidor.

Consola de depuración de cuadernos

27 de junio de 2024

Con la consola de depuración del cuaderno, ahora puede inspeccionar los valores de las variables dinámicas y ejecutar fragmentos de código durante una sesión de depuración de cuadernos.

Incorporación rápida de una programación periódica a un flujo de trabajo de Azure Databricks

28 de junio de 2024

Ahora puede agregar una programación sencilla a un flujo de trabajo de Azure Databricks especificando tan solo un intervalo y una unidad de tiempo (por ejemplo, ejecutar el flujo de trabajo cada 4 horas). Este nuevo tipo de programación complementa el tipo de programación avanzada existente, ya que le permite agregar una programación con tan solo unos pocos clics. Consulte Ejecución de trabajos según una programación.

Databricks Runtime 15.3 está disponible de forma general

24 de junio de 2024

Databricks Runtime 15.3 y Databricks Runtime 15.3 ML ahora están disponibles con carácter general.

Consulte Databricks Runtime 15.3 (EoS) y Databricks Runtime 15.3 para Machine Learning (EoS).

Las zonas geográficas de Azure son GA

24 de junio de 2024

Las zonas geográficas de Azure ya están disponibles con carácter general. Azure Geographies administra la residencia de datos al procesar el contenido del cliente para algunas funcionalidades de IA.

Para obtener más información, consulte Servicios designados de Databricks.

Nueva interfaz de usuario de creación de catálogos mejorada

18 de junio de 2024

La nueva interfaz de usuario de creación de catálogos le lleva paso a paso por todo el proceso de creación y configuración de un catálogo; proporciona mensajes útiles y separa las configuraciones opcionales. Puede usar la misma interfaz de usuario para crear catálogos estándar, compartidos y externos.

Consulte Creación de catálogos.

Actualizaciones de subredes en configuraciones de conectividad de red

18 de junio de 2024

Databricks está actualizando las subredes en configuraciones de conectividad de red (NCC) en todas las regiones. Los nuevos identificadores de subred se agregan automáticamente a las reglas de firewall de Azure Storage existentes que permiten el acceso desde los identificadores de subred existentes para garantizar el acceso ininterrumpido desde Azure Databricks.

Si usa la API de configuraciones de conectividad de red para obtener los identificadores de subred y agregarlos a las reglas de red de almacenamiento para las nuevas cuentas de Azure Storage, no experimentará interrupciones. Sin embargo, si codifica de forma rígida el conjunto existente de identificadores de subred, es posible que se produzcan interrupciones. Databricks recomienda usar la API para obtener la información más reciente. Consulte la API de configuraciones de conectividad de red.

Es posible que experimente tiempo de inactividad para la API de configuraciones de conectividad de red mientras esta actualización tiene lugar entre las 20:00 y las 12:00 PDT el 20 de junio de 2024.

Las tablas del sistema de facturación están habilitadas de forma predeterminada

18 de junio de 2024

El esquema system.billing ahora está habilitado de forma predeterminada en todas las áreas de trabajo del Unity Catalog. Consulte Tabla de referencia del sistema de uso facturable

Lakehouse Monitoring está disponible con carácter general

13 de junio de 2024

Databricks Lakehouse Monitoring ahora está disponible con carácter general.

El uso compartido de volúmenes con Delta Sharing ahora está disponible con carácter general

13 de junio de 2024

La compatibilidad con Delta Sharing para compartir datos no tabulares como un volumen ahora está disponible con carácter general. Ahora, puede compartir volúmenes entre áreas de trabajo de Databricks en diferentes metastores de Unity Catalog (incluidas las áreas de trabajo de otras cuentas de Databricks y otras nubes).

Los volúmenes son objetos de Unity Catalog que representan un volumen lógico de almacenamiento en una ubicación de almacenamiento de objetos en la nube. Están pensados principalmente para proporcionar gobernanza sobre los recursos de datos no tabulares. Delta Sharing en Databricks proporciona una integración nativa con Unity Catalog que le permite administrar, gobernar, auditar y realizar un seguimiento del uso de los datos de los volúmenes compartidos.

Consulte Adición de volúmenes a un recurso compartido.

Las claves administradas por el cliente (CMK) para Databricks Vector Search ahora están en disponibilidad general.

12 de junio de 2024

Las claves administradas por el cliente (CMK) en los puntos de conexión de búsqueda vectorial ahora están disponibles con carácter general.

Mosaic AI Agent Framework (versión preliminar pública)

12 de junio de 2024

Mosaic AI Agent Framework es un conjunto de herramientas en Databricks diseñado para ayudar a los desarrolladores a crear, implementar y evaluar aplicaciones de Retrieval Augmented Generation (RAG) de calidad de producción. Agent Framework le permite crear o optimizar aplicaciones LLM en una sola plataforma mediante sus propios datos.

Agent Framework incluye las siguientes funcionalidades:

• Cree y registre agentes y cadenas.
• Parametrizar agentes y cadenas para experimentar e iterar rápidamente.
• Métricas integradas para comparar ejecuciones en la recuperación de documentos relevantes, precisión de respuesta y costo y latencia.
• Jueces LLM personalizados para la precisión de la recuperación y la respuesta.
• Implemente aplicaciones de inteligencia artificial con registro automatizado de solicitudes y respuestas.
• Aplicación de revisión integrada para obtener comentarios de los usuarios.
• Evaluación del agente para evaluar la calidad, la latencia y el costo de las aplicaciones de IA generativas.
• Seguimiento de MLflow para analizar y comparar seguimientos entre la ejecución de código.

Para más información, consulte RAG (generación aumentada de recuperación) en Azure Databricks.

La optimización predictiva ahora está disponible con carácter general

11 de junio de 2024

La optimización predictiva para las tablas administradas de Unity Catalog ahora está disponible con carácter general. La optimización predictiva ahora se ejecuta OPTIMIZE en tablas con clústeres líquidos habilitados para aplicar la agrupación en clústeres. Consulte Optimización predictiva para tablas administradas del catálogo de Unity.

La optimización de rutas está disponible para atender puntos de conexión

11 de junio de 2024

Ahora puede crear puntos de conexión de servicio optimizados para el servicio de modelos o los flujos de trabajo de servicio de características. Consulte Optimización de rutas en los puntos de conexión de servicio.

Compatibilidad con Modelo de servicio con un firewall de cuenta de almacenamiento de área de trabajo

11 de junio de 2024

El Modelo de servicio ahora es compatible con el firewall para la cuenta de almacenamiento del área de trabajo. Consulte Habilitar la compatibilidad con el firewall para la cuenta de almacenamiento del área de trabajo.

La asignación de columnas ahora está disponible con carácter general

10 de junio de 2024

La asignación de columnas de Delta Lake ahora está disponible con carácter general. Ahora puede usar DROP FEATURE para deshabilitar la asignación de columnas y el protocolo de tabla de degradación. Consulte Cambiar nombre y quitar columnas con la asignación de columnas de Delta Lake.

Las tablas del sistema de flujo de trabajo ya están disponibles (versión preliminar pública)

10 de junio de 2024

El esquema system.lakeflow contiene cuatro tablas nuevas que puede usar para supervisar los trabajos de la cuenta. Consulte Referencia de la tabla del sistema de trabajos.

Si no tiene acceso a estas tablas del sistema, asegúrese de que ha habilitado el system.lakeflow esquema en su cuenta. Consulte Acceso a las tablas del sistema.

La llamada a funciones está en versión preliminar pública

10 de junio de 2024

La llamada a funciones ahora está disponible en versión preliminar pública. Esta funcionalidad está disponible mediante los modelos de pago por token de las API de Foundation Model: DBRX Instruct y Meta-Llama-3-70B-Instruct. Consulte Llamada a funciones en Azure Databricks.

Consulta de un índice de vector de búsqueda mediante vector_search()

10 de junio de 2024

AI Functions ahora admite vector_search() , lo que le permite consultar un índice de búsqueda vectorial de IA de mosaico mediante SQL. Consulte la vector_search función.

Mosaic AI Vector Search ahora admite la búsqueda híbrida

7 de junio de 2024

Mosaic AI Vector Search ahora admite la búsqueda de similitud de palabras clave híbrida, que combina la búsqueda de inserción basada en vectores con técnicas tradicionales de búsqueda basadas en palabras clave. Este enfoque coincide con las palabras exactas de la consulta, mientras que también usa una búsqueda de similitud basada en vectores para capturar las relaciones semánticas y el contexto de la consulta. Al integrar estas dos técnicas, la búsqueda de similitud de palabras clave híbrida recupera documentos que contienen no solo las palabras clave exactas, sino también las que son conceptualmente similares, lo que proporciona resultados de búsqueda más completos y relevantes. Para obtener más información, consulte Mosaic AI Vector Search.

GTE ahora es compatible con Model Serving

7 de junio de 2024

Mosaic AI Model Serving ahora admite inserción de texto general (GTE), un modelo de inserción de texto que puede asignar texto a un vector de inserción. GTE se admite como parte de las API de Foundation Model y está disponible en las regiones de punto de conexión de servicio de pago por token. Consulte Uso de las API del modelo de Foundation.

Databricks Assistant: experiencia de subprocesos y consultas habilitada de forma predeterminada

6 de junio de 2024

Databricks Assistant (versión preliminar pública) ahora realiza un seguimiento de los hilos de consulta y del historial dentro de los contextos del editor durante la experiencia de sesión de forma predeterminada. Puede administrar la habilitación en todas las áreas de trabajo de una cuenta o áreas de trabajo individuales.

Para obtener más información, consulte ¿Qué es Databricks Assistant?

Editor de Markdown de bloc de notas mejorado

5 de junio de 2024

Ahora puede ver una vista previa activa de las celdas de Markdown en cuadernos y acceder a una barra de herramientas para elementos comunes de Markdown, como encabezados, listas y vínculos. Dedique más tiempo a comunicar sus ideas y menos tiempo recordar la sintaxis.

Acceso rápido a las tablas de Catalog Explorer desde cuadernos

5 de junio de 2024

Ahora puede acceder fácilmente a las tablas de Catalog Explorer directamente desde cuadernos. Sitúe el ratón sobre un nombre de tabla en una celda del cuaderno para obtener un enlace a la página del explorador de catálogos para ver detalles como columnas, permisos y mucho más.

Controlador ODBC de Databricks 2.8.2

4 de junio de 2024

Databricks ODBC Driver (download) versión 2.8.2 ya está disponible. Esta versión agrega las siguientes características y mejoras nuevas:

• Los clientes ahora pueden usar comandos extendidos de SQL PUT, GET, y REMOVE para ingerir y administrar grandes conjuntos de datos en volúmenes de Unity Catalog.
• Los valores de configuración predeterminados de OAuth ahora se actualizan y son compatibles. Las opciones de configuración actualizadas incluyen el punto de conexión de autorización, el identificador de cliente de OAuth, el ámbito de usuario a máquina de OAuth y el ámbito de máquina a máquina de OAuth. Para obtener más información, consulte las notas de la versión.
• Se han actualizado las bibliotecas de terceros, incluido expat 2.6.2 (anteriormente 2.6.0) y libCURL 8.7.1 (anteriormente 8.6.0).
• El controlador ahora acepta una entidad de certificación (CA) firmada privada si se agrega al almacén de certificados de entidades de certificación raíz de confianza de Windows.

Esta versión también corrige los siguientes problemas:

• El cliente devolvió previamente un error si la longitud de un comentario de tabla superó MaxCommentLen. El comportamiento predeterminado ahora trunca el comentario de la tabla para ajustarse al límite especificado en MaxCommentLen.
• El cliente devolvió previamente un error al emitir SQLCancel en determinadas circunstancias.

La nueva interfaz de usuario de Databricks Notebook ya está disponible con carácter general

4 de junio de 2024

La nueva interfaz de usuario de Databricks Notebooks proporciona a los desarrolladores una experiencia de creación optimizada y centrada en los datos. Entre las características principales se incluyen:

• Experiencia de usuario moderna: Disfrute de una experiencia de codificación simplificada con una interfaz de usuario actualizada y otras características para mejorar la organización de Notebook.
• Nueva tabla de resultados: Realice la exploración de datos sin código con funcionalidades de búsqueda y filtrado directamente en las salidas de resultados.