Creación de una réplica de Unity Catalog de Azure Databricks

En la actualidad, muchas organizaciones registran sus datos en el Catálogo de Unity en Azure Databricks. Un Unity Catalog reflejado en Fabric permite al cliente leer datos administrados por Unity Catalog desde cargas de trabajo de Fabric. Azure Databricks y Fabric son mejores juntos.

Para ver un tutorial sobre cómo configurar el área de trabajo de Azure Databricks para crear reflejo del catálogo de Unity en Fabric, consulte Tutorial: Configuración de bases de datos reflejadas de Microsoft Fabric desde Azure Databricks.

Al usar Mirroring en Fabric, puedes disfrutar de un producto altamente integrado, de extremo a extremo y fácil de usar, que simplifica tus necesidades analíticas y está diseñado para la apertura y colaboración entre Microsoft Fabric y Azure Databricks.

Cuando se usa Fabric para leer datos registrados en el catálogo de Unity, no hay movimiento de datos ni replicación de datos. Solo se refleja en Fabric la estructura del catálogo de Azure Databricks, y se accede a los datos subyacentes del catálogo mediante accesos directos. Es posible que los cambios en los datos subyacentes no aparezcan inmediatamente en Fabric. La propagación puede tardar entre unos segundos y varios minutos, como se describe en la documentación de rendimiento del extremo de análisis de SQL.

Qué funciones de análisis están integradas

Los catálogos reflejados son un elemento del almacenamiento de datos de Fabric distinto del almacén de datos y del punto de conexión de análisis de SQL.

Al reflejar un catálogo de Unity de Azure Databricks, Fabric crea estos elementos:

Puedes acceder a tus datos reflejados de Azure Databricks Unity Catalog de varias maneras:

  • Cada elemento reflejado de Azure Databricks tiene un punto de conexión de análisis de SQL generado automáticamente que proporciona una completa experiencia analítica creada por el proceso de reflejo. Use comandos de T-SQL para definir y consultar objetos de datos desde el punto de conexión de SQL Analytics de solo lectura.
  • Use Power BI en modo Direct Lake para crear informes sobre el elemento de Azure Databricks.

Sincronización de metadatos

Cuando creas un nuevo espejo desde Azure Databricks en Fabric, la opción de sincronizar automáticamente los cambios futuros del catálogo para el esquema seleccionado está habilitada por defecto. Si activas la sincronización automática, los siguientes cambios de metadatos se reflejan desde tu espacio de trabajo de Azure Databricks a Fabric:

  • Adición de esquemas a un catálogo.
  • Eliminación de esquemas de un catálogo.
  • Adición de tablas a un esquema.
  • Eliminación de tablas de un esquema.

Selección de esquema/tabla:

  • De forma predeterminada, se selecciona todo el catálogo cuando el usuario agrega el catálogo.
  • El usuario puede excluir determinadas tablas dentro del esquema.
  • Anular la selección de un esquema anula la selección de todas las tablas del esquema.
  • Si el usuario vuelve y selecciona el esquema, se vuelven a seleccionar todas las tablas del esquema.
  • El mismo comportamiento de selección se aplica a los esquemas de un catálogo.

Hay otras condiciones de filtración que se aplican a catálogos, esquemas o tablas:

  • No se mostrarán las vistas materializadas ni las tablas de streaming.
  • Las tablas externas que no admiten el formato Delta no se mostrarán.

Contenido relacionado

  • Última actualización el