Noviembre de 2021

  • Artículo

Estas características y mejoras de la plataforma Azure Databricks se publicaron en noviembre de 2021.

Nota:

Las versiones se lanzan en fases. Es posible que su cuenta de Azure Databricks no se actualice hasta después de una semana o más de la fecha de lanzamiento inicial.

Creación de etiquetas para tablas de características (versión preliminar pública)

Del 30 de noviembre al 6 de diciembre de 2021: versión 3.60

Ahora puede crear etiquetas para las tablas de características y usarlas con el fin de realizar búsquedas.

Resaltado de sintaxis y característica de autocompletar para comandos SQL en celdas de Python

Del 30 de noviembre al 6 de diciembre de 2021: versión 3.60

El resaltado de sintaxis y la característica autocompletar de SQL están disponibles cuando se usa SQL dentro de un comando de Python, como spark.sql.

Cambio de nombre, eliminación y modificación de los permisos de experimentos de MLflow desde la página del experimento (versión preliminar pública)

Del 30 de noviembre al 6 de diciembre de 2021: versión 3.60

Ahora puede cambiar de nombre, eliminar y modificar los permisos de un experimento de MLflow desde la página del experimento. Para obtener más información, consulte Administración de experimentos.

Nuevos perfiles de datos en cuadernos: resúmenes tabulares y gráficos de los datos (versión preliminar pública)

Del 30 de noviembre al 6 de diciembre de 2021: versión 3.60

Cuando se usa display(<dataframe>) en Scala o Python, o bien se ejecuta una consulta SQL, en el panel de resultados se muestra una nueva pestaña Data Profile donde se presenta un resumen tabular y gráfico interactivo del dataframe o la tabla. Para obtener más información, consulte Creación de un nuevo perfil de datos y Creación de una nueva visualización.

También puede usar el comando de utilidades dbutils.data.summarize de Databricks.

Registro mejorado cuando los esquemas evolucionan mientras se ejecuta una canalización de Delta Live Tables

Del 30 de noviembre al 6 de diciembre de 2021: versión 3.60

Si la canalización de Delta Live Tables lee datos con el cargador automático, y el esquema de los datos de entrada cambia mientras se ejecuta una actualización, la actualización se registra como CANCELED y se reintenta automáticamente. La nueva actualización se registra con el estado SCHEMA_CHANGE. Antes, cuando cambiaba el esquema de entrada, la actualización se registraba como FAILED, aunque Delta Live Tables la reintentará automáticamente.

Disponibilidad general de Databricks Partner Connect

18 de noviembre de 2021

Databricks Partner Connect ya está disponible con carácter general. Puede usar Partner Connect para detectar y conectar herramientas de IA y datos populares de forma rápida y sencilla a su lago de datos de Azure Databricks. Consulte ¿Qué es Databricks Partner Connect?

Cambio importante: quitar el escape y las comillas de $ en los valores de variable de entorno para la creación del clústeres

15-30 de noviembre de 2021: versión 3.59

Nota:

Este cambio se revertirá el 3 de diciembre de 2021 de 01:00 a 03:00 UTC.

Al crear un clúster, puede especificar variables de entorno. Antes de este cambio, para usar $ dentro de un valor de variable de entorno, tenía que agregarle un carácter de escape o incluirlo entre comillas. Con este cambio, ya no se necesitan caracteres de escape ni comillas. Este cambio introduce un comportamiento importante, ya que los caracteres $ con escape o entre comillas que se incluyan en valores de variable de entorno ya no se interpretan como $. Por ejemplo, ahora, dadas las siguientes declaraciones de variable de entorno:

WITH_ESCAPING=\\$123
WITH_DOUBLE_QUOTING="$123"
NO_ESCAPING=$123
WITH_SINGLE_QUOTING='$123'
NO_QUOTING=$123

Al imprimir los siguientes valores desde un cuaderno:

%sh
echo ${WITH_ESCAPING}
echo ${WITH_DOUBLE_QUOTING}
echo ${NO_ESCAPING}
echo ${WITH_SINGLE_QUOTING}
echo ${NO_QUOTING}

Devuelve los siguientes valores:

\\$123
"$123"
$123
driver23
$123

Nota:

Este cambio solo se aplica a variables de entorno, no a secretos.

Mejoras de facilidad de uso para Archivos en Repos

15-30 de noviembre de 2021: versión 3.59

Se han agregado nuevas funcionalidades al editor de texto de archivos:

  • Al crear una etiqueta, se genera automáticamente otra de cierre.
  • Ya está disponible el plegado de código.

Además, en el caso de los archivos de texto, ahora puede copiar la ruta de acceso completa al repositorio además de la ruta de acceso desde la raíz del repositorio. Para información detallada, consulta Interacción mediante programación con archivos de áreas de trabajo.

La compatibilidad con widgets SQL heredados finaliza el 15 de enero de 2022

15 de noviembre de 2021

Databricks finalizará la compatibilidad con widgets de SQL heredados el 15 de enero de 2022. Después de esa fecha, los cuadernos ya no representarán widgets SQL heredados en la interfaz de usuario, pero los parámetros pasados mediante %run seguirán funcionando con la API de widgets SQL heredados. Para asegurarse de que los widgets se sigan representando en la interfaz de usuario, actualice el código para usar los widgets de SQL.

Mejoras de la interfaz de usuario de trabajos de Azure Databricks

15-30 de noviembre de 2021: versión 3.59

Esta versión ofrece las siguientes mejoras de la interfaz de usuario de trabajos:

Conector Delta Sharing para Power BI

15 de noviembre de 2021

Hemos publicado el conector Delta Sharing para Power BI, con el que los usuarios pueden detectar, analizar y visualizar conjuntos de datos compartidos a través del protocolo abierto Delta Sharing. El protocolo posibilita un intercambio seguro de conjuntos de datos entre productos y plataformas mediante REST y almacenamiento en la nube. Para información detallada, consulte Conector Delta Sharing para Power BI.

Controlador ODBC de Databricks 2.6.19

12 de noviembre de 2021

Hemos publicado la versión 2.6.19 del controlador ODBC de Databricks (descarga). El nuevo controlador propaga las condiciones de error de SQL (SQLState) que Databricks devuelve al cliente.

Databricks Runtime 10.1 y 10.1 ML están disponibles con carácter general; 10.1 Photon está disponible en versión preliminar pública

10 de noviembre de 2021

Databricks Runtime 10.1 y 10.1 ML ahora están disponibles con carácter general. 10.1 Photon está disponible en versión preliminar pública.

Consulte Databricks Runtime 10.1 (sin soporte técnico) y Databricks Runtime 10.1 para ML (sin soporte técnico).

Databricks Runtime 10.1 (versión beta)

4 de noviembre de 2021

Databricks Runtime 10.1, 10.1 Photon y 10.1 ML ahora están disponibles como versiones beta.

Consulte las notas completas de la versión en Databricks Runtime 10.1 (sin soporte técnico) y Databricks Runtime 10.1 para ML (sin soporte técnico).

Cambio de nombre y eliminación de experimentos de MLflow (versión preliminar pública)

2-8 de noviembre de 2021: versión 3.58

Ahora puede cambiar de nombre, eliminar y modificar los permisos de un experimento de MLflow desde la página "Experimentos".

Ahora puede crear una directiva de clúster clonando otra ya existente

2-8 de noviembre de 2021: versión 3.58

Se ha agregado la posibilidad de crear una directiva de clúster clonando otra ya existente. Consulte Crear y administrar directivas de proceso.

Simplificación del cambio del idioma predeterminado de los cuadernos y las celdas de cuadernos

2-8 de noviembre de 2021: versión 3.58

Ahora aparece un nuevo botón de idioma en la parte superior del cuaderno y en cada celda. Puede usar este botón para seleccionar el idioma predeterminado del cuaderno y el idioma de una celda específica. Para más información, consulte Establecimiento del idioma predeterminado y Combinación de idiomas.

Uso de archivos en Repos desde el terminal web

2-8 de noviembre de 2021: versión 3.58

Ahora puede acceder a Files in Repos desde el terminal web mediante la ruta de acceso /Workspace.