Notas de la versión de Databricks SQL 2021

A continuación se describen las mejoras y actualizaciones de Databricks SQL de enero a diciembre de 2021.

15 de diciembre de 2021

• Databricks SQL está disponible con carácter general. Esto marca un hito importante para proporcionarle la primera plataforma lakehouse que unifica los datos, la inteligencia artificial y las cargas de trabajo de BI en un solo lugar. Con la disponibilidad general, puede esperar el mayor nivel de estabilidad, compatibilidad y preparación para empresas de Databricks para cargas de trabajo críticas. Lea el blog sobre el anuncio de la disponibilidad general para obtener más información.
• Las alertas ahora se programan independientemente de las consultas. Al crear una nueva alerta y crear una consulta, se le pedirá que también cree una programación para la alerta. Si usted tenía una alerta existente, hemos duplicado el horario de la consulta original. Este cambio también permite establecer alertas para las consultas Run as Owner (Ejecutar como propietario) y Run as Viewer (Ejecutar como visualizadort). Las consultas Run as Owner (Ejecutar como propietario) se ejecutan según la programación de alertas designada con la credencial del propietario de la consulta. Las consultas Run as Viewer (Ejecutar como espectador) se ejecutan según la programación de alertas designada con la credencial del creador de la alerta. Consulte Alertas de SQL de Databricks y Programación de una consulta.
• Ahora puede volver a ordenar los parámetros tanto en el editor de SQL de como en los paneles de .
• Se ha ampliado la documentación para crear visualizaciones de mapa térmico. Consulte Opciones de mapa térmico.

9 de diciembre de 2021

• Al crear una visualización de tabla, ahora puede establecer el color de fuente de una columna en un valor estático o un intervalo de valores en función de los valores del campo de la columna. El valor literal se compara con el umbral. Por ejemplo, para colorear los resultados cuyos valores superan 500000, cree el umbral > 500000, en lugar de > 500,000. Consulte Aplicación de formato condicional a los colores de columnas.
• Los iconos del explorador de esquemas del editor de SQL con pestañas ahora le permiten distinguir entre tablas y vistas.

1 de diciembre de 2021

• Ahora puede aplicar parámetros de configuración de SQL en el nivel de área de trabajo. Esos parámetros se aplican automáticamente a todos los puntos de conexión de SQL existentes y nuevos del área de trabajo. Consulte Configuración de parámetros SQL.

18 de noviembre de 2021

• Al ver el historial de una consulta, ahora puede filtrar las consultas en la entidad de servicio que las ejecutó. Consulte Visualización del historial de consultas.

• Ahora puede abrir el editor de SQL mediante un acceso directo de la barra lateral. Para abrir el editor de SQL, haga clic en Editor de SQL.
• Si tiene permiso para crear clústeres de Ingeniería y ciencia de datos &, ahora puede hacer clic en Create (Crear) en la barra lateral y en SQL Endpoint (Punto de conexión de SQL) para crear puntos de conexión de SQL.
• Los administradores ahora pueden transferir la propiedad de una consulta, un panel o una alerta a otro usuario a través de la interfaz de usuario. Vea:
• Transferencia de la propiedad de una consulta
• Transferencia de la titularidad de un panel heredado
• Transferencia del control de una alerta

4 de noviembre de 2021

• En una Visualización de mapa (coropleta), el número máximo de pasos de degradado para los colores de la leyenda se ha aumentado de 11 a 20. El valor predeterminado es 5 etapas del degradado, incluyendo el color mínimo y el color máximo .
• El editor de SQL con pestañas ahora admite la administración masiva de pestañas. Si hace clic con el botón derecho en una pestaña, verá la opción Cerrar otros, Cerrar a la izquierda, Cerrar a la derecha y Cerrar todo. Tenga en cuenta que si hace clic con el botón derecho en la primera o última pestaña, no verá las opciones para Cerrar a la izquierda o Cerrar a la derecha.

28 de octubre de 2021

• Al ver una tabla en el Explorador de catálogos, tiene dos opciones para simplificar la interacción con la tabla:
• Haga clic en Crear > consulta para crear una consulta que seleccione todas las columnas y devuelva las primeras 1000 filas.
• Haga clic en Crear > Tablero Rápido para abrir una página de configuración donde pueda seleccionar columnas de interés y crear un tablero de control y consultas de apoyo que proporcionen información básica con esas columnas y demuestren parámetros a nivel de tablero y otras capacidades.

19 de octubre de 2021

• Los nuevos métodos abreviados de teclado ahora están disponibles en el editor con pestañas:
• Abra la nueva pestaña:
  • Windows: Cmd+Alt+T
  • Mac: Cmd+Option+T
• Cerrar la pestaña actual
  • Windows: Cmd+Alt+W
  • Mac: Cmd+Option+W
• Abra el cuadro de diálogo de consulta
  • Windows: Cmd+Alt+O
  • Mac: Cmd+Option+O

23 de septiembre de 2021

• Ahora puede crear un nuevo panel mediante la clonación de un panel existente, siempre que tenga el permiso CAN RUN, CAN EDIT y CAN MANAGE en el panel y todas las consultas ascendentes. Consulte Clonación de un panel heredado.
• Ahora puede usar GROUP BY en una visualización con varias columnas del eje Y. Consulte Gráfico de dispersión.
• Ahora puede usar {{ @@yPercent}} para dar formato a las etiquetas de datos en un gráfico de barras apiladas sin normalizar. Consulte Gráfico de barras.
• Si usa la autenticación SAML y su credencial SAML expirará en unos minutos, ahora se le solicitará proactivamente que inicie sesión de nuevo antes de ejecutar una consulta o actualizar un tablero. Esto ayuda a evitar interrupciones debido a una credencial que expira durante la ejecución de la consulta.

20 de septiembre de 2021

• Ahora puede transferir el control de los paneles, las consultas y las alertas mediante la API de REST de Permissions. Consulte ACL de consulta.

16 de septiembre de 2021

• En los resultados de la consulta, los resultados de BIGINT ahora se serializan como cadenas cuando son mayores que 9007199254740991. De esta forma se corrige un problema por el que los resultados de BIGINT se pueden truncar en los resultados de la consulta. Otros resultados enteros se siguen serializando como números. El formato de número en etiquetas de eje e información sobre herramientas no se aplica a los resultados de BIGINT serializados como cadenas. Para obtener más información sobre los tipos de datos en Databricks SQL, consulte BIGINT type (Tipo).

7 de septiembre de 2021

Databricks está implementando los siguientes cambios durante una semana. Es posible que el área de trabajo no esté habilitada para estos cambios hasta el 7 de septiembre.

• Databricks SQL está ahora en versión preliminar pública y está habilitado para todos los usuarios de nuevas áreas de trabajo.

Nota:

Si el área de trabajo se ha habilitado para Databricks SQL durante la versión preliminar pública(es decir, antes de la semana que comienza el 7 de septiembre de 2021), los usuarios conservan el derecho asignado antes de esa fecha, a menos que lo cambie. En otras palabras, si un usuario no tenía acceso a Databricks SQL durante la versión preliminar pública, no lo tendrá ahora a menos que un administrador le proporcione.

• Los administradores pueden gestionar qué usuarios tienen acceso a Databricks SQL mediante la asignación de los permisos de acceso a Databricks SQL (databricks-sql-access en la API) a usuarios o grupos. De forma predeterminada, los nuevos usuarios tienen este derecho.

Los administradores pueden limitar un usuario o grupo a acceder solo a Databricks SQL y evitar que accedan a Data Science & Engineering o Databricks Mosaic AI mediante la eliminación del derecho de Workspace Access (workspace-access en la API) del usuario o grupo. De forma predeterminada, los nuevos usuarios tienen este derecho.

Importante

Para iniciar sesión y acceder a Azure Databricks, los usuarios deben tener el derecho de acceso a SQL Databricks o el derecho de acceso al área de trabajo (o ambos).

• Hay un pequeño punto de conexión de SQL clásico denominado Starter Endpoint (Punto de conexión de inicio) preconfigurado en todas las áreas de trabajo, por lo que puede empezar a crear paneles, visualizaciones y consultas de inmediato. Para controlar cargas de trabajo más complejas, puede aumentar fácilmente su tamaño (para reducir la latencia) o el número de clústeres subyacentes (para controlar más usuarios simultáneos). Para administrar los costos, el punto de conexión de inicio está configurado para finalizar después de 120 minutos de inactividad.

2 de septiembre de 2021

• Los usuarios con el permiso CAN EDIT en un panel ahora pueden administrar la lista de suscripciones y la programación de actualización del panel. Anteriormente, se requería el permiso CAN MANAGE. Para obtener más información, consulte Actualizar automáticamente un panel.

• De forma predeterminada, las visualizaciones ya no cambian de tamaño dinámicamente en función del número de resultados devueltos, pero mantienen el mismo alto independientemente del número de resultados. Para retornar al comportamiento anterior y configurar una visualización para que cambie de tamaño dinámicamente, habilite Cambiar dinámicamente la altura del panel en la configuración de la visualización en el tablero. Para más información, consulte Opciones de tabla.
• Si tiene acceso a más de una área de trabajo de la misma cuenta, puede cambiar las áreas de trabajo desde Databricks SQL. Haga clic en en la esquina inferior izquierda del área de trabajo de Azure Databricks y, a continuación, seleccione un área de trabajo para cambiar a ella.

1 de julio de 2021

• El nuevo Explorador de catálogos permite explorar y administrar fácilmente permisos en bases de datos y tablas. Los usuarios pueden ver los detalles del esquema, obtener una vista previa de los datos de ejemplo y ver los detalles y las propiedades de la tabla. Los administradores pueden ver y cambiar los propietarios de objetos de datos, y los propietarios de objetos de datos pueden conceder y revocar permisos. Para obtener más información, consulte ¿Qué es el Explorador de catálogos?.
• Los ejes Y en los gráficos horizontales se han actualizado para reflejar el mismo orden que en las tablas. Si ha seleccionado previamente la ordenación inversa, puede usar el interruptor de orden inverso en la pestaña del Eje Y para invertir la nueva ordenación.

23 de junio de 2021

• Configure fácilmente puntos de conexión SQL con entidades de servicio. Ahora hay un control que le ayuda a configurar una entidad de servicio en la configuración global de los puntos de conexión de SQL. Consulte Configuración de una entidad de servicio.
• Ahora se admiten vistas temporales.

17 de junio de 2021

• Photon, el nuevo motor de ejecución vectorizado de Databricks, ahora está activado de forma predeterminada para los puntos de conexión SQL recién creados (tanto la interfaz de usuario como la API REST). Photon acelera de forma transparente:
  • Las escrituras en tablas Parquet y Delta.
  • Muchas consultas SQL. Consulte limitaciones de .
• Administre fácilmente usuarios y grupos con comandos de CREATE GROUP, DROP GROUP, ALTER GROUP, SHOW GROUPSy SHOW USERS. Para más información, consulte Instrucciones de seguridad e Instrucciones de mostrar.
• El editor de consultas del explorador de esquemas es más rápido y rápido en esquemas con más de 100 tablas. En estos esquemas, el explorador de esquemas no cargará todas las columnas automáticamente; La lista de tablas sigue apareciendo como de costumbre, pero las columnas solo se cargan al hacer clic en una tabla. Este cambio afecta a la función autocompletar de consultas en el editor de consultas, ya que depende de esta información para mostrar sugerencias. Hasta que expanda una tabla y cargue sus columnas, esas sugerencias no están disponibles.

3 de junio de 2021

• Los administradores de espacios de trabajo de Azure Databricks recién habilitados ahora reciben el permiso de acceso a Databricks SQL de forma predeterminada y ya no necesitan otorgarse a sí mismos el permiso de acceso a Databricks SQL usando la consola de administración.
• Photon ahora está en versión preliminar pública y está habilitado de manera predeterminada para los nuevos puntos de conexión de SQL.
• El equilibrio de carga de varios clústeres ahora está en versión preliminar pública.
• Ahora puede habilitar la colaboración en paneles y consultas con otros miembros de su organización mediante el permiso CAN EDIT. Consulte las Listas de control de acceso.

26 de mayo de 2021

• Se cambia el nombre de SQL Analytics a Databricks SQL. Este cambio tiene los siguientes impactos orientados al cliente:

  • Se han actualizado las referencias de la interfaz de usuario web.

  • Se ha cambiado el nombre del derecho a conceder acceso a Databricks SQL:

    • Interfaz de usuario: Acceso a Databricks SQL access (anteriormente Acceso a SQL Analytics)
    • API de SCIM:databricks-sql-access (anteriormente sql-analytics-access)

    Los usuarios, grupos y entidades de servicio con el derecho anterior se han migrado al nuevo derecho.

  • Las etiquetas de los eventos de registro de auditoría relacionadas con Databricks SQL han cambiado:

    • El prefijo para los eventos sql de Databricks ahora es databrickssql.
    • changeSqlAnalyticsAcl ahora es changeDatabricksSqlAcl.

• Actualizaciones del panel

  • El nombre de archivo de exportación del panel se ha actualizado para que sea el nombre del panel y la marca de tiempo, en lugar de un UUID.
  • El límite de registros de exportación se ha elevado de 22 000 a 64 000.

13 de mayo de 2021

• Databricks SQL ya no intenta adivinar los tipos de columna. Anteriormente, una columna con el formato xxxx-yy-dd se trataba automáticamente como una fecha, incluso si era un código de identificación. Ahora que esa columna ya no se trata automáticamente como una fecha. Debe especificarlo en la consulta si así lo desea. Este cambio puede provocar que algunas visualizaciones que dependían del comportamiento anterior ya no funcionen. En esta versión, puede cambiar la opción >Settings>Backwards Compatibility (Configuración > Compatibilidad con versiones anteriores) para volver al comportamiento anterior. En una versión futura, quitaremos esa funcionalidad.

• El editor de consultas ahora tiene un indicador de progreso de la consulta. Los cambios de estado ahora están visibles en una barra de progreso actualizada continuamente.

  

Problemas corregidos

• Editor de SQL. El editor de SQL ahora conservará el texto seleccionado y la posición de desplazamiento al cambiar entre pestañas de consulta.
• Editor de SQL. Si hace clic en "Ejecutar" en una consulta en el editor de SQL, vaya a otra página y vuelva mientras la consulta sigue ejecutándose, el editor mostrará el estado de consulta correcto. Si la consulta se completa mientras se encuentra en otra página, los resultados de la consulta estarán disponibles al volver a la página del editor de SQL.
• Ahora puede usar MySQL 8.0 como metastore externo.
• Los comandos de DESCRIBE DETAIL en las tablas Delta ya no fallan con java.lang.ClassCastException: java.sql.Timestamp cannot be cast to java.time.Instant.
• Ya no se produce un error al leer archivos Parquet con marcas de tiempo INT96.
• Cuando un usuario tiene el permiso CAN RUN en una consulta y lo ejecuta, si otro usuario creó la consulta, el historial de consultas muestra el ejecutor de la consulta como usuario.
• Ahora se omiten los valores NULL al representar un gráfico, lo que mejora la facilidad de uso de los gráficos. Por ejemplo, anteriormente, las barras de un gráfico de barras tendrían un aspecto muy pequeño cuando había valores NULL presentes. Ahora los ejes se establecen solo en función de valores no NULL.