Carga de datos en un grupo de SQL dedicado en Azure Synapse Analytics con SQL Server Integration Services (SSIS)

Se aplica a:Azure Synapse Analytics

Cree un paquete de SQL Server Integration Services (SSIS) para cargar datos en un grupo de SQL dedicado en Azure Synapse Analytics. Si quiere, puede reestructurar, transformar y limpiar los datos a medida que pasan a través del flujo de datos de SSIS.

En este artículo se explica cómo realizar las siguientes tareas:

• Crear un nuevo proyecto de Integration Services en Visual Studio.
• Diseñar un paquete de SSIS que cargue datos del origen en el destino.
• Ejecutar el paquete de SSIS para cargar los datos.

Conceptos básicos

El paquete es la unidad de trabajo básica en SSIS. Los paquetes relacionados se agrupan en proyectos. Los proyectos y los paquetes de diseño se crean en Visual Studio con SQL Server Data Tools. El proceso de diseño es un proceso visual en el que se arrastran componentes del cuadro de herramientas y se colocan en la superficie de diseño, se conectan y se establecen sus propiedades. Después de terminar el paquete, puede ejecutarlo y puede implementarlo opcionalmente en SQL Server o SQL Database para una administración, supervisión y seguridad globales.

Una introducción detallada a SSIS queda fuera del ámbito de este artículo. Para más información, vea los siguientes artículos:

• SQL Server Integration Services
• Tutorial de SSIS: Crear un paquete ETL sencillo

Opciones para cargar datos en Azure Synapse Analytics con SSIS

SQL Server Integration Services (SSIS) es un conjunto flexible de herramientas que proporciona varias opciones para conectarse y cargar datos en Azure Synapse Analytics.

1. El método preferido, que proporciona el mejor rendimiento, consiste en crear un paquete que use la tarea de carga de Azure SQL DW para cargar los datos. Esta tarea encapsula la información de origen y destino. Se supone que los datos de origen se almacenan localmente en archivos de texto delimitado.

2. De forma alternativa, puede crear un paquete que use una tarea Flujo de datos que contenga un origen y un destino. Este enfoque es compatible con una amplia gama de orígenes de datos, incluidos SQL Server y Azure Synapse Analytics.

Prerequisites

Para realizar este tutorial, necesita lo siguiente:

1. SQL Server Integration Services (SSIS) . SSIS es un componente de SQL Server y exige una versión con licencia, de desarrollador o de evaluación de SQL Server. Para obtener una versión de evaluación de SQL Server, vea Evaluaciones de SQL Server.

2. Visual Studio (opcional). Para obtener la edición gratuita de Visual Studio Community, vea Visual Studio Community. Si no quiere instalar Visual Studio, puede instalar solo SQL Server Data Tools (SSDT). SSDT instala una versión de Visual Studio con funcionalidad limitada.

3. SQL Server Data Tools para Visual Studio (SSDT) . Para obtener SQL Server Data Tools para Visual Studio, vea Descargar SQL Server Data Tools (SSDT).

4. Permisos y una base de datos de Azure Synapse Analytics. En este tutorial se explica cómo conectar un grupo de SQL dedicado con una instancia de Azure Synapse Analytics y cargar datos en ella. Necesita permisos para conectarse, crear una tabla y cargar datos.

Crear un proyecto de Integration Services

1. Inicie Visual Studio.

2. En el menú Archivo, seleccione Nuevo | Proyecto.

3. Vaya a los tipos de proyecto Instalados | Plantillas | Inteligencia empresarial | Integration Services.

4. Seleccione Proyecto de Integration Services. Proporcione los valores de Nombre y Ubicación y luego seleccione Aceptar.

Se abre Visual Studio y crea un nuevo proyecto de Integration Services (SSIS). Luego Visual Studio abre el diseñador para el nuevo paquete único de SSIS (Package.dtsx) en el proyecto. Se ven las siguientes áreas de pantalla:

• En el lado izquierdo, el cuadro de herramientas de componentes de SSIS.

• En el centro, la superficie de diseño, con varias pestañas. Normalmente se usan al menos las pestañas Flujo de control y Flujo de datos.

• En el lado derecho, los paneles Explorador de soluciones y Propiedades.

  

Opción 1: usar la tarea de carga de SQL DW

El primer enfoque es un paquete que usa la tarea de carga de SQL DW. Esta tarea encapsula la información de origen y destino. Se supone que los datos de origen se almacenan en archivos de texto delimitado, ya sea localmente o en Azure Blob Storage.

Requisitos previos de la opción 1

Para seguir el tutorial con esta opción, necesitará lo siguiente:

• Feature Pack de Microsoft SQL Server Integration Services para Azure. La tarea de carga de SQL DW es un componente del Feature Pack.

• Una cuenta de Azure Blob Storage. La tarea de carga de SQL DW carga datos desde Azure Blob Storage en Azure Synapse Analytics. Puede cargar los archivos que ya están en el Blob Storage, o bien puede cargar los archivos de su equipo. Si selecciona los archivos en el equipo, la tarea de carga de SQL DW los cargará en Blob Storage en primer lugar para el almacenamiento provisional y, después, los cargará en su grupo de SQL dedicado.

Agregar y configurar la tarea de carga de SQL DW

1. Arrastre una tarea de carga de SQL DW desde el cuadro de herramientas al centro de la superficie de diseño (en la pestaña Flujo de control).

2. Haga doble clic en la tarea para abrir el Editor de la tarea de carga de SQL DW.

   

3. Configure la tarea con la ayuda de las instrucciones del artículo Tarea de carga de Azure SQL DW. Dado que esta tarea encapsula tanto la información de origen como de destino, así como las asignaciones entre las tablas de origen y destino, el editor de tareas tiene varias páginas de ajustes para configurar.

Crear una solución similar manualmente

Para obtener más control, puede crear manualmente un paquete que emule el trabajo realizado por la tarea de carga de SQL DW.

1. Use la tarea de carga en el blob de Azure para cargar los datos en Azure Blob Storage. Para obtener la tarea de carga en el blob de Azure, descargue Feature pack de Microsoft SQL Server Integration Services para Azure.

2. Después, use la tarea Ejecutar SQL de SSIS para iniciar un script de PolyBase que cargue los datos en su grupo de SQL dedicado. Para obtener un ejemplo que cargue datos desde Azure Blob Storage en un grupo de SQL dedicado (pero no con SSIS), vea Tutorial: Carga de datos en Azure Synapse Analytics.

Opción 2: usar un origen y un destino

El segundo enfoque es un paquete típico que usa una tarea Flujo de datos que contiene un origen y un destino. Este enfoque es compatible con una amplia gama de orígenes de datos, incluidos SQL Server y Azure Synapse Analytics.

En este tutorial se usa SQL Server como origen de datos. SQL Server se ejecuta en local o en una máquina virtual de Azure.

Para conectarse a SQL Server y a un grupo de SQL dedicado, puede usar un administrador de conexiones de ADO.NET y un origen y un destino, o bien un administrador de conexiones OLE DB y un origen y un destino. En este tutorial se usa ADO NET porque tiene las mínimas opciones de configuración. OLE DB puede proporcionar un rendimiento ligeramente mejor que ADO.NET.

Como método abreviado, puede usar el Asistente para importación y exportación de SQL Server para crear el paquete básico. Después, guarde el paquete y ábralo en Visual Studio o SSDT para verlo y personalizarlo. Para más información, vea Importar y exportar datos con el Asistente para importación y exportación de SQL Server.

Requisitos previos de la opción 2

Para seguir el tutorial con esta opción, necesitará lo siguiente:

1. Datos de ejemplo. En este tutorial se usan datos de ejemplo almacenados en SQL Server en la base de datos de ejemplo AdventureWorks como datos de origen para cargar en un grupo de SQL dedicado. Para obtener la base de datos de ejemplo AdventureWorks, vea Bases de datos de ejemplo de AdventureWorks.

2. Una regla de firewall. Tiene que crear una regla de firewall en su grupo de SQL dedicado con la dirección IP del equipo local para poder cargar datos en dicho grupo.

Crear el flujo de datos básico

1. Arrastre una tarea Flujo de datos desde el cuadro de herramientas al centro de la superficie de diseño (en la pestaña Flujo de control).

   

2. Haga doble clic en la tarea Flujo de datos para ir a la pestaña Flujo de datos.

3. En la lista Otros orígenes del cuadro de herramientas, arrastre un origen de ADO.NET a la superficie de diseño. Con el adaptador de origen aún seleccionado, cambie su nombre a Origen de SQL Server en el panel Propiedades.

4. Desde la lista Otros destinos del cuadro de herramientas, arrastre un destino de ADO.NET a la superficie de diseño bajo el origen de ADO.NET. Con el adaptador de destino aún seleccionado, cambie su nombre a Destino de SQL DW en el panel Propiedades.

   

Configurar el adaptador de origen

1. Haga doble clic en el adaptador de origen para abrir el Editor de orígenes de ADO.NET.

   

2. En la pestaña Conexión Manager del editor de origen de ADO.NET , seleccione el botón Nuevo junto a la lista del administrador de conexiones de ADO.NET para abrir el cuadro de diálogo Configurar el Administrador de Conexión ADO.NET y crear configuraciones de conexión para la base de datos SQL Server desde la cual este tutorial carga datos.

   

3. En el cuadro de diálogo Configurar el Administrador de Conexiones ADO.NET, seleccione el botón Nuevo para abrir el cuadro de diálogo Administrador de Conexiones y crear una nueva conexión de datos.

   

4. En el cuadro de diálogo Administrador de conexiones, haga lo siguiente.

   1. En Proveedor, seleccione el proveedor de datos SqlClient.

   2. En Nombre del servidor, escriba el nombre del servidor de SQL Server.

   3. En la sección Iniciar sesión en el servidor, seleccione o escriba la información de autenticación.

   4. En la sección Conectar con una base de datos, seleccione la base de datos de ejemplo AdventureWorks.

   5. Seleccione Test Connection (Probar conexión).

      

   6. En el cuadro de diálogo que informa de los resultados de la prueba de conexión, seleccione Aceptar para volver al cuadro de diálogo Administrador de Conexiones.

   7. En el cuadro de diálogo Administrador de conexiones, seleccione Aceptar para volver al cuadro de diálogo Configurar Administrador de conexiones ADO.NET.

5. En el cuadro de diálogo Configurar el administrador de conexiones ADO.NET, seleccione Aceptar para volver al Editor de orígenes de ADO.NET.

6. En el Editor de orígenes de ADO.NET, en la lista Nombre de la tabla o la vista, seleccione la tabla Sales.SalesOrderDetail.

   

7. Seleccione Vista previa para ver las primeras 200 filas de datos de la tabla de origen en el cuadro de diálogo Vista previa de los resultados de la consulta.

   

8. En el cuadro de diálogo Vista previa de los resultados de la consulta, seleccione Cerrar para volver al Editor de orígenes de ADO.NET.

9. En el editor de origen de ADO.NET, seleccione Aceptar para terminar de configurar el origen de datos.

Conectar el adaptador de origen al adaptador de destino

1. Seleccione el adaptador de origen en la superficie de diseño.

2. Seleccione la flecha azul que va desde el adaptador de origen y arrástrela al editor de destino hasta que quede en su lugar.

   

   En un paquete SSIS típico, se usan otros componentes del Cuadro de herramientas de SSIS entre el origen y el destino para reestructurar, transformar y limpiar los datos a medida que pasa a través del flujo de datos de SSIS. Para que este ejemplo sea lo más sencillo posible, se conecta el origen directamente al destino.

Configurar el adaptador de destino

1. Haga doble clic en el adaptador de destino para abrir el Editor de destinos de ADO.NET.

   

2. En la pestaña Administrador de conexiones del Editor de destinos de ADO.NET, seleccione el botón Nuevo situado junto a la lista Administrador de conexiones para abrir el cuadro de diálogo Configurar el administrador de conexiones ADO.NET y crear la configuración de conexión para la base de datos de Azure Synapse Analytics en la que carga datos este tutorial.

3. En el cuadro de diálogo Configurar Administrador de Conexiones ADO.NET, seleccione el botón Nuevo para abrir el cuadro de diálogo Administrador de Conexiones y crear una nueva Conexión de Datos.

4. En el cuadro de diálogo Administrador de conexiones, haga lo siguiente.

   1. En Proveedor, seleccione el proveedor de datos SqlClient.

   2. En Nombre del servidor, escriba el nombre del grupo de SQL dedicado.

   3. En la sección Iniciar sesión en el servidor, seleccione Usar la autenticación de SQL Server y escriba la información de autenticación.

   4. En la sección Conectar con una base de datos, seleccione una base de datos del grupo de SQL dedicado.

   5. Seleccione Test Connection (Probar conexión).

   6. En el cuadro de diálogo que muestra los resultados de la prueba de conexión, seleccione Aceptar para volver al cuadro de diálogo Administrador de conexiones.

   7. En el cuadro de diálogo Administrador de conexiones, seleccione Aceptar para volver al cuadro de diálogo Configurar Administrador de conexiones ADO.NET.

5. En el cuadro de diálogo Configurar el administrador de conexiones ADO.NET, seleccione Aceptar para volver al Editor de destinos de ADO.NET.

6. En el Editor de destinos de ADO.NET, seleccione Nuevo junto a la lista Usar una tabla o una vista para abrir el cuadro de diálogo Crear tabla para crear una tabla de destino con una lista de columnas que coincida con la tabla de origen.

   

7. En el cuadro de diálogo Crear tabla, haga lo siguiente.

   1. Cambie el nombre de la tabla de destino a SalesOrderDetail.

   2. Quite la columna rowguid. El tipo de datos uniqueidentifier no se admite en grupos de SQL dedicados.

   3. Cambie el tipo de datos de la columna LineTotal a money. El tipo de datos decimal no se admite en grupos de SQL dedicados. Para obtener información sobre los tipos de datos admitidos, vea CREATE TABLE (Azure Synapse Analytics, Almacenamiento de datos paralelos).

      

   4. Seleccione Aceptar para crear la tabla y volver al Editor de destinos de ADO.NET.

8. En el Editor de destinos de ADO.NET, seleccione la pestaña Asignaciones para ver cómo se asignan las columnas del origen a las del destino.

   

9. Seleccione Aceptar para terminar de configurar el destino.

Ejecutar el paquete para cargar los datos

Para ejecutar el paquete, seleccione el botón Iniciar en la barra de herramientas o seleccione una de las opciones Ejecutar en el menú Depurar.

En los siguientes párrafos se describe lo que verá si ha creado el paquete con la segunda opción que se describe en este artículo, es decir, con un flujo de datos que contiene un origen y un destino.

A medida que el paquete comienza a ejecutarse, se ven ruedas amarillas que giran para indicar actividad, además del número de filas procesadas hasta el momento.

Cuando el paquete termine de ejecutarse, verá marcas de verificación verdes para indicar que se ha realizado correctamente y el número total de filas de datos cargados desde el origen hasta el destino.

Enhorabuena, ha usado correctamente SQL Server Integration Services para cargar datos en Azure Synapse Analytics.

Contenido relacionado

• Herramientas para solucionar problemas con el desarrollo de paquetes
• Implementar proyectos y paquetes de Integration Services (SSIS)