Compartir a través de

Configuración de la calidad de los datos de Snowflake

Al examinar orígenes de datos de Snowflake, Microsoft Purview admite la extracción de metadatos técnicos, entre los que se incluyen:

  • Servidor, bases de datos, esquemas y tablas, incluidas las columnas; las vistas, incluidas las columnas, las claves externas y las restricciones únicas.
  • Procedimientos almacenados, incluidos el conjunto de datos de parámetros y el conjunto de resultados.
  • Funciones, incluido el conjunto de datos de parámetros.
  • Canalizaciones, fases y secuencias, incluidas las columnas.
  • Tareas y secuencias.

Configuración del examen de Mapa de datos para catalogar datos de Snowflake en Microsoft Purview

Registro de un origen de Snowflake

Para registrar un nuevo origen de Snowflake en Catálogo unificado, siga estos pasos:

  • Inicie sesión en el portal de Microsoft Purview.
  • Seleccione la tarjeta de solución Mapa de datos . Si no se muestra la tarjeta de solución Mapa de datos, seleccione Ver todas las soluciones y, a continuación, seleccione Mapa de datos en la sección Núcleo .
  • Seleccione Registrar.
  • En Registrar orígenes, seleccione Snowflake.

Configuración de un examen de Mapa de datos

  • Seleccione el origen de Snowflake registrado.
  • Seleccione + Nuevo examen.
  • Proporcione los detalles siguientes:
    • Nombre: nombre del examen
    • Conectar a través del entorno de ejecución de integración: seleccione el entorno de ejecución de integración resuelto automáticamente de Azure, Managed Virtual Network IR o SHIR según su escenario.
    • Host para la conexión: elija el punto de conexión que se usa para establecer la conexión a Snowflake durante el examen. Puede elegir entre la dirección URL del servidor o los demás hosts que configuró en el origen de datos.
    • Credencial: seleccione la credencial para conectarse al origen de datos. Asegúrese de:
      • Seleccione Autenticación básica al crear una credencial.
      • Proporcione el nombre de usuario usado para conectarse a Snowflake en el campo De entrada Nombre de usuario.
      • Almacene la contraseña de usuario usada para conectarse a Snowflake en la clave secreta.
    • Almacén: especifique el nombre de la instancia de almacenamiento que se usa para habilitar el examen en mayúsculas. El rol predeterminado asignado al usuario especificado en la credencial debe tener derechos USAGE en este almacén.
    • Bases de datos: especifique uno o varios nombres de instancia de base de datos que se van a importar en mayúsculas. Separe los nombres de la lista con un punto y coma (;). Por ejemplo, DB1; DB2. El rol predeterminado asignado al usuario especificado en la credencial debe tener derechos adecuados en los objetos de base de datos.
    • Esquema: enumera el subconjunto de esquemas que se van a importar expresados como una lista separada por punto y coma.
  • Seleccione Probar conexión para validar la configuración (disponible al usar Azure Integration Runtime).
  • Seleccione Continuar.
  • Seleccione un conjunto de reglas de examen para la clasificación. Puede elegir entre los conjuntos de reglas personalizados predeterminados del sistema existentes o crear un nuevo conjunto de reglas alineado.
  • Revise el examen y seleccione Guardar y ejecutar.

Una vez examinado, el recurso de datos de Snowflake estará disponible en la búsqueda de Catálogo unificado. Para obtener más información sobre cómo conectarse y administrar Snowflake en Microsoft Purview, siga este documento.

Importante

Cuando se elimina el objeto del origen de datos, el examen posterior no quitará automáticamente el recurso correspondiente en Microsoft Purview.

Configuración de la conexión al origen de datos de Snowflake para el examen de calidad de datos

En este momento, el recurso examinado está listo para la catalogación y la gobernanza. Asocie el recurso examinado al producto de datos en una Sele de dominio de gobernanza. En la pestaña Calidad de datos, agregue un nuevo Azure SQL Conexión a la base de datos: escriba manualmente el nombre de la base de datos.

  1. En el portal de Microsoft Purview, abra Catálogo unificado.

  2. En Administración de estado, seleccione Calidad de los datos.

  3. Seleccione un dominio de gobernanza de la lista y, a continuación, seleccione Connections en la lista desplegable Administrar.

  4. Configure la conexión en la página Connections:

    • Agregue el nombre y la descripción de la conexión.
    • Seleccione el tipo de origen Snowflake.
    • Agregue El nombre del servidor, el nombre del almacén, el nombre de la base de datos, el nombre del esquema y el nombre de la tabla.
    • Seleccione método de autenticación: autenticación básica.
    • Agregar nombre de usuario.
    • Agregar credenciales:
      • Incorporación de una suscripción de Azure
      • Conexión de Key Vault
      • Nombre del secreto
      • Versión secreta
    • Active la casilla Habilitar V-Net administrado si Snowflake se ejecuta en Azure Virtual Network.
    • Seleccione la región de Azure.
    • Agregue Private Link id. de recursos.
    • Agregue el nombre de dominio completo.

  5. Pruebe la conexión para asegurarse de que funciona. Si usa Virtual Network, no se admite la característica de conexión de prueba.

    Captura de pantalla que muestra cómo configurar la conexión de snowflake.

    Captura de pantalla que muestra cómo configurar el token de conexión de Snowflake.

El identificador de recurso del vínculo privado de Snowflake de destino tiene el siguiente formato: /subscriptions/(subscription_id)/resourcegroups/az(region)-privatelink/providers/microsoft.network/privatelinkservices/sf-pvlinksvc-az(region).

  • Para obtener el identificador de región y el nombre completo, ejecute SYSTEM_WHITE_LIST y SYSTEM_WHITE_LIST_PRIVATELINK obtenga los SNOWFLAKE_DEPLOYMENTvalores , SNOWFLAKE_DEPLOYMENT_REGIONLESSy OCSP_CACHE para los hosts públicos y allowlist.
  • Para obtener el identificador de suscripción, ejecute SYSTEM$GET_SNOWFLAKE_PLATFORM_INFO() como ACCOUNTADMIN para obtener los valores de snowflake-vnet-subnet-ids . El identificador de suscripción de la Private Link del inquilino de Azure de Snowflake se obtiene de esto.

Importante

  • Los administradores de calidad de datos necesitan acceso de solo lectura a Snowflake para configurar la conexión de calidad de datos.
  • El conector de Snowflake no acepta https://. Quite https:// al agregar el nombre del servidor para configurar la conexión del origen de datos.
  • Si el acceso público está deshabilitado, debe seleccionar la casilla Permitir servicios de Microsoft de confianza para Key Vault. Esto solo es necesario para Key Vault, no para el área de trabajo de Snowflake.
  • Virtual Network soporte técnico está actualmente en versión preliminar y está disponible globalmente. Se incluye temporalmente en las SKU de gobernanza de datos para mantener la flexibilidad durante esta fase. Virtual Network precios aún no están disponibles y se pueden realizar antes de la disponibilidad general de la característica.

Generación de perfiles y examen de calidad de datos para datos en Snowflake

Una vez completada correctamente la configuración de la conexión, puede generar perfiles, crear y aplicar reglas y ejecutar un examen de calidad de datos de los datos en Snowflake. Siga la guía paso a paso que se describe en los documentos siguientes:

Documentos de referencia