Archivo de novedades de Azure Data Factory
Azure Data Factory se mejora de forma continua. Para mantenerse al día con los avances más recientes, consulte la página Novedades actual, que proporciona información acerca de los elementos siguientes:
- Versiones más recientes.
- Problemas conocidos.
- Correcciones de errores.
- Funciones en desuso.
- Planes de cambios.
Esta página de archivo conserva las actualizaciones de los meses anteriores.
En nuestro archivo de vídeo de novedades encontrará todas las actualizaciones mensuales.
Septiembre de 2023
Pipelines
Se ha agregado compatibilidad con las canalizaciones controladas por metadatos para el procesamiento dinámico completo e incremental en Azure SQL Más información
Agosto de 2023
Captura de datos modificados
- Disponibilidad de destino de Azure Synapse Analytics en el recurso CDC de nivel superior Más información
- Conector de Snowflake en la compatibilidad de flujos de datos de asignación para la captura de datos modificados en la versión preliminar pública Más información
Flujo de datos
- Tipo entero disponible para variables de canalización Más información
- Conector de origen CDC de Snowflake disponible en el recurso CDC de nivel superior Más información
- Compatibilidad nativa con la interfaz de usuario de parametrización para más servicios vinculados Más información
Movimiento de datos
- Compatibilidad con puntos de conexión privados administrados para Application Gateway y servidor flexible de MySQL Más información
- Disponibilidad general del período de vida (TTL) de la red virtual administrada Más información
Tiempo de ejecución de integración
El entorno de ejecución de integración autohospedado ahora admite la creación interactiva autocontenida (versión preliminar) Más información
Jul. de 2023
Captura de datos modificados
El recurso CDC de nivel superior ahora admite la evolución del esquema. Más información
Flujo de datos
La opción Combinar esquema en el receptor delta ahora admite la evolución del esquema en la asignación de flujos de datos. Más información
Movimiento de datos
- Desactive parte de la canalización con comentarios. Más información
- El valor devuelto de canalización ahora está disponible con carácter general. Más información
Productividad del desarrollador
Búsqueda de documentación ahora incluida en la barra de herramientas de búsqueda de Azure Data Factory. Más información
Junio de 2023
Integración continua e implementación continua
El paquete npm ahora admite paquetes descargados previamente para crear plantillas ARM. Si la configuración de su firewall está bloqueando la descarga directa para su paquete npm, ahora puede pre-cargar el paquete por adelantado, y dejar que el paquete npm consuma la versión local en su lugar. Se trata de una gran mejora para la canalización de CI/CD en un entorno con firewall.
Expansión de regiones
Azure Data Factory ya está disponible en el Centro de Suecia. Puede ubicar su flujo de trabajo ETL en esta nueva región si utiliza la región para almacenar y administrar su almacén de datos moderno. Más información
Movimiento de datos
Ahora es posible proteger el tráfico saliente con las reglas de red saliente de Azure Data Factory. Más información
Conectores
Ahora se admite el conector de Amazon S3 como destino de sumidero mediante el flujo de datos de asignación. Más información
Flujo de datos
Presentamos configuraciones de origen opcionales para fuentes DelimitedText y JSON en el recurso CDC de nivel superior. El recurso CDC de nivel superior en la fábrica de datos ahora admite configuraciones de fuente opcionales para fuentes Delimited y JSON. Ahora puede seleccionar los delimitadores de columna/fila para fuentes delimitadas y establecer el tipo de documento para fuentes JSON. Más información
Mayo de 2023
Data Factory en Microsoft Fabric
Data Factory en Microsoft Fabric proporciona servicios de movimiento y transformación de datos a escala de la nube que permiten resolver los escenarios de ETL y factoría de datos más complejos. Está diseñado para hacer que la experiencia de factoría de datos sea fácil de usar, eficaz y verdaderamente de nivel empresarial.
abril de 2023
flujo de datos
Expanda fácilmente varias matrices en flujos de datos de ADF. ADF actualizó la transformación Aplanar que ahora hace que sea muy fácil de expandir varias matrices de un solo paso de transformación Aplanar. Más información
Integración continua e implementación continua
Ahora puede personalizar el mensaje de confirmación en modo de Git. Escriba una descripción detallada sobre los cambios que haga y lo guardaremos en el repositorio de Git.
Conectores
El conector de Azure Blob Storage ahora admite la autenticación anónima. Más información
Marzo de 2023
Conectores
El conector de Azure Data Lake Storage Gen2 ahora admite la autenticación de firma de acceso compartido. Más información
Febrero de 2023
Movimiento de datos
- Tipo de autenticación anónima compatible con Azure Blob Storage Más información
- Se ha actualizado la plantilla de SAP para mover fácilmente los datos de SAP a ADLSGen2 en formato Delta Más información
Orquestación
- Establecimiento del valor de salida de la canalización (versión preliminar pública) Más información
- Administrador de orquestación de flujo de trabajo (versión preliminar pública) Más información
Productividad del desarrollador
Se añadió la compatibilidad con temas oscuros (versión preliminar pública) Más información
Enero de 2023
Flujo de datos
- Flowlets ahora admite el desfase de esquema Más información
- La extracción incremental CDC de SQL ahora admite columnas numéricas Más información
Movimiento de datos
Nuevo recurso CDC de nivel superior: configuración CDC nativa en tres pasos sencillos Más información
Orquestación
Orquestación de cuadernos de Synapse y definiciones de trabajos de Spark de Synapse de forma nativa Más información
Expansión de regiones
- Expansión continua de regiones: ahora se admite Norte de China 3 Más información
- Expansión continua de regiones: ahora se admite Oeste de Suiza Más información
SQL Server Integration Services (SSIS)
La inserción de red virtual rápida para SSIS ya está disponible con carácter general Más información
Productividad del desarrollador
- Se ha agregado compatibilidad para favorecer recursos en la página principal
- Guardar el ancho de columna para la supervisión de canalizaciones
- Supervisión de actualizaciones de filtros para búsquedas más rápidas
- Inicio directo de la Galería de plantillas de canalización desde Azure Portal.
Diciembre de 2022
Flujo de datos
Extracción incremental de captura de datos modificados (CDC) de SQL: admite columnas numéricas en el flujo de datos de asignación Más información
Movimiento de datos
La inserción de red virtual rápida para SSIS en Azure Data Factory está disponible con carácter general Más información
Expansión de regiones
Expansión continua de la región: Azure Data Factory ya está disponible en Norte de China 3 Más información
Noviembre de 2022
flujo de datos
- Incremental solo está disponible en CDC de SAP: obtención de cambios solo del sistema SAP sin carga completa inicial Más información
- Particiones de origen en la carga de datos completa inicial de CDC de SAP para mejorar el rendimiento Más información
- Una nueva plantilla de canalización: carga de varios objetos con grandes cantidades de SAP a través de CDC de SAP Más información
Movimiento de datos
- Compatibilidad con Azure Databricks a través de un vínculo privado desde una red virtual administrada por Data Factory Más información
Interfaz de usuario
2 Mejoras del diseñador de canalizaciones agregadas a la experiencia de versión preliminar de ADF Studio
- Control flotante de contenido dinámico: establecimiento más sencillo de contenido dinámico en las actividades de canalización sin usar el generador de expresiones Más información
- Reubicación de mensajes de error en la columna Estado: visualización de errores más sencilla cuando se ve una ejecución de canalización con errores Más información
Integración continua e implementación continua
En la configuración de publicación automática, el botón Deshabilitar publicación está disponible para anular la sobrescritura de la última implementación de publicación automatizada Más información
Octubre de 2022
Resumen en vídeo
Flujo de datos
- Exportación de hasta 1000 filas de la vista previa del flujo de datos Más información
- Ya está disponible CDC de SQL en Flujos de datos de asignación (versión preliminar pública) Más información
- Desbloqueo de análisis avanzados con el conector Flujo de datos de asignación de Microsoft 365 Más información
- Ya está disponible con carácter general la captura de datos modificados de SAP (CDC) Más información
Productividad del desarrollador
- Ahora aceptamos contribuciones de la comunidad a la Galería de plantillas Más información
- Nuevo diseño en Azure Portal: descubra fácilmente cómo iniciar ADF Studio Más información
- Ya está disponible el Centro de aprendizaje en Azure Data Factory Studio Más información
- Prueba de Azure Data Factory con un clic Más información
Orquestación
- Vista de facturación pormenorizada disponible para ADF: consulte la información de facturación detallada por canalización (versión preliminar pública) Más información
- Tiempo de espera de ejecución de la actividad de script ahora configurable Más información
Expansión de regiones
Expansión continua de la región: ahora se admite el Centro de Catar Más información
Integración continua e implementación continua
Ya está disponible con carácter general la exclusión de desencadenadores de canalización que no cambiaron en la implementación Más información
Septiembre de 2022
Resumen en vídeo
Flujo de datos
- Se ha agregado un conector de origen de Amazon S3 Más información
- Se ha agregado un conector basado en REST de Google Sheets como origen (versión preliminar) Más información
- Optimización del número máximo de columnas del flujo de datos Más información
- Funcionalidades de Captura de datos modificados de SAP en Flujo de datos de asignación (versión preliminar): extracción y transformación de cambios de datos de sistemas SAP para aumentar la eficacia de las actualizaciones de datos Más información
- Escritura de datos en un campo de búsqueda mediante claves alternativas admitidas en conectores de Dynamics 365/CRM para los flujos de datos de asignación Más información
Movimiento de datos
Compatibilidad para convertir el tipo NUMBER de Oracle en el entero correspondiente en el origen Más información
Supervisión
- Mejoras adicionales de la supervisión en Azure Data Factory Más información
- Supervisión de las mejoras en la carga: datos de agrupaciones de una nueva ejecución de las canalizaciones capturados solo cuando se expanden
- Se ha agregado la paginación a la vista de ejecuciones de actividad de las canalizaciones para mostrar todos los registros de actividad en la ejecución de canalizaciones
- Supervisión de la mejora del consumo: se ha agregado un icono de carga para saber cuándo se calcula completamente el informe de consumo
- Columnas de ordenación adicionales en la supervisión: se ha agregado la clasificación en Nombre de canalización, Final de ejecución y Estado
- La configuración de la zona horaria ahora se guarda en la supervisión
- La vista del diagrama de Gantt ahora se admite en la supervisión del entorno de ejecución de integración Más información
Orquestación
El método DELETE de la actividad web ahora admite el envío de un cuerpo con solicitud HTTP Más información
Interfaz de usuario
- Compatibilidad nativa con la interfaz de usuario de la parametrización agregada para seis servicios vinculados adicionales: SAP ODP, ODBC, Microsoft Access, Informix, Snowflake y DB2 Más información
- Se han agregado mejoras al diseñador de canalizaciones en la experiencia de versión preliminar de Studio: los usuarios pueden ver un flujo de trabajo dentro de objetos de canalización, como For Each, If Then, etc. Más información
Agosto de 2022
Resumen en vídeo
Flujo de datos
- Se ha agregado el conector Appfigures como origen (versión preliminar) Más información
- Se ha agregado la transformación de conversión: conversión visual de los tipos de datos Más información
- Nueva interfaz de usuario para conjuntos de datos insertados: se han agregado categorías para encontrar con facilidad orígenes de datos Más información
Movimiento de datos
Se ha agregado el tipo de autenticación de entidad de servicio para Azure Blob Storage Más información
Productividad del desarrollador
- El tiempo de espera predeterminado de las actividades ha cambiado de 7 días a 12 horas Más información
- Nueva experiencia en la creación de factorías de datos: con un clic la factoría está lista en cuestión de segundos Más información
- Actualización de la interfaz de usuario del generador de expresiones: se han agregado pestañas de categorías para facilitar su uso Más información
Integración continua y entrega continua (CI/CD)
Cuando CI/CD integra la plantilla de ARM, en lugar de desactivar todos los desencadenadores, pueden excluir los que no cambiaron en la implementación Más información
Julio de 2022
Resumen en vídeo
Flujo de datos
- Conector Asana agregado como origen Más información
- Ahora se admiten tres nuevas funciones de transformación de datos Más información
- collectUnique(): cree una colección de valores únicos en una matriz.
- substringIndex(): extraiga la subcadena antes de n repeticiones de un delimitador.
- topN(): devuelve los n principales resultados después de ordenar los datos.
- Volver a capturar desde el origen disponible en Actualizar para escenarios de cambio en el origen de datos Más información
- Funciones definidas por el usuario (GA): creación de expresiones reutilizables y personalizadas para evitar la creación de lógica compleja sobre y sobre Más información Video
- Configuración más sencilla en el runtime del flujos de datos: elija el tamaño de proceso entre Pequeño, Mediano y Grande para realizar una configuración previa de todos los parámetros del entorno de ejecución de integración Más información
Integración continua y entrega continua (CI/CD)
Incluya los parámetros globales admitidos en la plantilla de ARM. Más información
Productividad del desarrollador
Forme parte de las características en vista previa (GB) de Azure Data Factory Studio: experimente las funcionalidades de Azure Data Factory más recientes y sea el primero en compartir sus comentarios Más información
Junio de 2022
Resumen en vídeo
Categoría del servicio | Mejoras en el servicio | Detalles |
Flujo de datos | Combinación aproximada admitida para flujos de datos | La combinación aproximada ahora se admite en la transformación Combinación de flujos de datos con puntuación de similitud configurable en condiciones de combinación. Más información |
Funcionalidades de edición en la proyección de origen | Las funcionalidades de edición en la proyección de origen están disponibles en Flujo de datos para realizar modificaciones en los esquemas de forma sencilla Más información | |
Control de errores de aserción | El control de errores de aserción ahora se admite en los flujos de datos para garantizar la calidad de los datos y realizar procesos de validación de datos Más información | |
Movimiento de datos | Parametrización admitida de forma nativa en 4 conectores adicionales | Se ha agregado compatibilidad de la interfaz de usuario nativa de parametrización con los siguientes servicios vinculados: Azure Data Lake Gen1, Azure PostgreSQL, Google AdWords y PostgreSQL. Más información |
Funcionalidades de captura de datos modificados (CDC) de SAP en el nuevo conector del marco ODP de SAP (versión preliminar pública) | Las funcionalidades de captura de datos modificados (CDC) de SAP ahora se admiten en el nuevo conector del marco ODP de SAP. Más información | |
Integration Runtime | Período de vida en VNET administrada (versión preliminar pública) | El período de vida se puede establecer en los procesos aprovisionados en VNET administrada. Más información |
Supervisión | Repetición de la ejecución de una canalización con nuevos parámetros | Ahora puede volver a ejecutar canalizaciones con nuevos valores de parámetro en Azure Data Factory. Más información |
Orquestación | La propiedad 'turnOffAsync' está disponible en la actividad web | La actividad web admite un patrón de solicitud-respuesta asincrónico que invoca HTTP GET en el campo Ubicación en el encabezado de respuesta de una respuesta HTTP 202. Ayuda a la actividad web a sondear automáticamente el punto de conexión de supervisión hasta que se ejecuta el trabajo. Se admite la propiedad 'turnOffAsync' para deshabilitar este comportamiento en los casos en los que el sondeo no es necesario Más información |
Mayo de 2022
Categoría del servicio | Mejoras en el servicio | Detalles |
Flujo de datos | Funciones definidas por el usuario para flujo de datos de asignación | Azure Data Factory presenta las funciones definidas por el usuario y las bibliotecas de flujo de datos definidas por el usuario en versión preliminar pública. Una función definida por el usuario es una expresión personalizada que se puede definir para poder reutilizar la lógica en varios flujos de datos de asignación. Las funciones definidas por el usuario residen en una colección denominada biblioteca de flujo de datos para poder agrupar fácilmente conjuntos comunes de funciones personalizadas. Más información |
Abril de 2022
Categoría del servicio | Mejoras en el servicio | Detalles |
Flujo de datos | Mejoras en la vista previa de los datos y en la depuración de los flujos de datos de asignación | Las sesiones de depuración con el entorno de ejecución de integración (IR) AutoResolve de Azure ahora se iniciarán en menos de 10 segundos. Hay nuevas actualizaciones en el panel de vista previa de datos en los flujos de datos de asignación. Ahora puede ordenar las filas dentro de la vista previa de datos mediante la selección de encabezados de columna. Puede mover columnas de forma interactiva. También puede guardar los resultados de la vista previa de datos como un archivo CSV mediante Exportar CSV. Más información |
El conector de Dataverse está disponible para flujos de datos de asignación | El conector de Dataverse está disponible para flujos de datos de asignación como origen y receptor. Más información | |
Compatibilidad con esquemas de base de datos de usuario para el almacenamiento provisional con los conectores de Azure Synapse Analytics y PostgreSQL en el receptor del flujo de datos | Ahora el receptor de flujo de datos admite el uso de un esquema de base de datos de usuario para el almacenamiento provisional en los conectores de Azure Synapse Analytics y PostgreSQL. Más información | |
Supervisión | Varias actualizaciones de las experiencias de supervisión de Data Factory | Las nuevas actualizaciones de la experiencia de supervisión en Data Factory incluyen la posibilidad de exportar los resultados a un archivo CSV, borrar todos los filtros y abrir una ejecución en una pestaña nueva. También se ha mejorado el almacenamiento en caché de las columnas y los resultados. Más información |
Interfaz de usuario | Nueva compatibilidad con formato regional | Elegir el idioma y el formato regional en la configuración influirá en el formato en que los datos, como las fechas y las horas, aparecerán en la supervisión de Azure Data Factory Studio. Por ejemplo, el formato de hora en Supervisión aparecerá como "Abr 2, 2022, 3:40:29 pm" al elegir inglés como formato regional y "2 abr 2022, 15:40:29" al elegir francés como formato regional. Estas opciones afectan solo a la interfaz de usuario de Azure Data Factory Studio y no cambian ni modifican los datos y la zona horaria reales. |
Marzo de 2022
Resumen en vídeo
Categoría del servicio | Mejoras en el servicio | Detalles |
Flujo de datos | ScriptLines y el servicio vinculado parametrizado admiten flujos de datos de asignación agregados | Ahora es fácil detectar cambios en el script de flujo de datos en Git con ScriptLines en la definición JSON del flujo de datos. Los servicios vinculados parametrizados ahora también se pueden usar dentro de los flujos de datos para patrones de conexión genéricos flexibles. Más información |
Disponibilidad general (GA) de flowlets | Los flowlets ahora están disponibles con carácter general para crear partes reutilizables de la lógica de flujo de datos que puede compartir en otras canalizaciones como transformaciones insertables. Los flowlets permiten que los trabajos de extracción, transformación y carga (ETL) se compongan de componentes lógicos comunes o personalizados. Más información | |
Los conectores de fuente de cambios están disponibles en cinco transformaciones de origen de flujo de datos | Los conectores de fuente de cambios están disponibles en transformaciones de origen de flujo de datos para Azure Cosmos DB, Azure Blob Storage, Azure Data Lake Storage Gen1, Azure Data Lake Storage Gen2 y el modelo de datos común (CDM). Más información | |
Mejoras en la vista previa de los datos y en la depuración de los flujos de datos de asignación | Se han agregado nuevas características a la versión preliminar de datos y a la experiencia de depuración en los flujos de datos de asignación. Más información | |
Conector SFTP para el flujo de datos de asignación | El conector SFTP está disponible para el flujo de datos de asignación como origen y receptor. Más información | |
Movimiento de datos | Compatibilidad Always Encrypted para conectores relacionados con SQL en la actividad de búsqueda en Red virtual administrada | Always Encrypted se admite para SQL Server, Azure SQL Database, Azure SQL Managed Instance y Synapse Analytics en la actividad de búsqueda en la red virtual administrada. Más información |
Integration runtime (Tiempo de ejecución de integración) | Nuevo diseño de la interfaz de usuario en la página de creación y edición de Azure IR | Ahora en el diseño de la interfaz de usuario de la página de creación y edición de IR se usa el estilo de pestaña para Configuración, Red virtual y Tiempo de ejecución de flujo de datos. Más información |
Orquestación | Transformación de datos mediante la actividad de script | Puede usar una actividad de script para invocar un script SQL en SQL Database, Azure Synapse Analytics, SQL Server, Oracle o Snowflake. Más información |
Mejora del tiempo de espera de la actividad web | Puede configurar el tiempo de espera de respuesta en una actividad web para evitar que se agote si el período de respuesta es superior a un minuto, en especial en el caso de las API sincrónicas. Más información |
Febrero de 2022
Resumen en vídeo
Categoría del servicio | Mejoras en el servicio | Detalles |
Flujo de datos | Servicios vinculados con parámetros admitidos en los flujos de datos de asignación | Ahora puede usar los servicios vinculados con parámetros en los flujos de datos de asignación para que las canalizaciones de flujo de datos sea genérica y flexible. Más información |
Extracción de origen incremental de SQL Database disponible en el flujo de datos (versión preliminar pública) | Se ha agregado una nueva opción al flujo de datos de asignación orígenes de SQL Database denominada Habilitar extracción incremental (versión preliminar). Ahora puede extraer automáticamente solo las filas que han cambiado en los orígenes de SQL Database mediante flujos de datos. Más información | |
Cuatro nuevos conectores disponibles para los flujos de datos de asignación (versión preliminar pública) | Ahora Data Factory admite cuatro conectores nuevos (versión preliminar pública) para asignar flujos de datos: Quickbase, Smartsheet TeamDesk y Zendesk. Más información | |
La BD de Azure Cosmos (API de SQL) para el flujo de datos de asignación admite ahora el modo en línea | La BD de Azure Cosmos (API de SQL) para el flujo de datos de asignación puede usar ahora conjuntos de datos en línea. Más información | |
Movimiento de datos | Obtenga canalizaciones de ingesta de datos basadas en metadatos con la herramienta Copiar datos de Data Factory en 10 minutos (GA) | Ahora puede crear canalizaciones de copia de datos a gran escala con un enfoque basado en metadatos en la herramienta Copiar datos en 10 minutos. Más información |
Actualización de la API del conector de Google AdWords de Data Factory disponible | Ahora el conector Google AdWords de Data Factory admite la nueva versión de AdWords API. No se necesita ninguna acción para el nuevo usuario del conector, ya que está habilitado de manera predeterminada. Más información | |
Integración continua y entrega continua (CI/CD) | Compatibilidad con Azure DevOps entre inquilinos | Configure un repositorio mediante Git de Azure DevOps no en el mismo inquilino que Azure Data Factory. Más información |
Expansión de regiones | Ahora Data Factory está disponible en Oeste de EE. UU. 3 y JIO de India occidental | Ahora Data Factory está disponible en dos nuevas regiones: Oeste de EE. UU. 3 y JIO de India occidental. Puede colocar el flujo de trabajo de ETL en estas nuevas regiones si las usa para almacenar y administrar el almacenamiento de datos moderno. También puede usar estas regiones con fines de continuidad empresarial y recuperación ante desastres si necesita conmutar por error desde otra región dentro de la geoárea. Más información |
Seguridad | Conexión a una cuenta de Azure DevOps en otro inquilino de Entra ID | Puede conectar la instancia de Data Factory a una cuenta de Azure DevOps en otro inquilino de Azure AD con fines de control de código fuente. Más información |
Enero de 2022
Categoría del servicio | Mejoras en el servicio | Detalles |
Flujo de datos | La reutilización rápida ahora es automática en todas las instancias de Azure IR que usan el período de vida (TTL) | Ya no es necesario especificar manualmente "reutilización rápida". Los flujos de datos de asignación de Data Factory ahora pueden iniciar actividades de flujo de datos posteriores en menos de cinco segundos después de establecer un TTL. Más información |
Recuperación de Declarar transformación personalizada | En Declarar la transformación, puede definir su propio mensaje de descripción dinámica. Puede usar la nueva función assertErrorMessage() para recuperar el mensaje fila por fila y almacenarlo en los datos de destino. Más información | |
Detección automática de esquemas en Analizar transformación | Se ha agregado una nueva característica a la transformación Analizar para facilitar la detección automática del esquema de un campo complejo insertado dentro de una columna de cadena. Seleccione el botón Detectar esquema para establecer automáticamente el esquema de destino. Más información | |
Compatibilidad del conector de Dynamics 365 como receptor y origen | Ahora puede conectarse directamente a Dynamics 365 para transformar los datos de Dynamics a gran escala mediante el nuevo conector de flujo de datos de asignación para Dynamics 365. Más información | |
Las conexiones SQL de Always Encrypted ya están disponibles en flujos de datos | Ahora hay transformaciones de origen de Always Encrypted en SQL Server, SQL Database, SQL Managed Instance y Azure Synapse al usar flujos de datos. Más información | |
Movimiento de datos | El conector Azure Databricks Delta Lake de Data Factory admite nuevos tipos de autenticación | Ahora el conector Databricks Delta Lake de Data Factory admite dos tipos de autenticación más: la autenticación de identidad administrada asignada por el sistema y la autenticación de identidad administrada asignada por el usuario. Más información |
La actividad Copiar de Data Factory admite actualizar/insertar (upsert) en varios conectores adicionales | Ahora la actividad Copiar de Data Factory ahora admite actualizar/insertar (upsert) mientras recibe datos para SQL Server, SQL Database, SQL Managed Instance y Azure Synapse. Más información |
Diciembre de 2021
Categoría del servicio | Mejoras en el servicio | Detalles |
Flujo de datos | Conector de Dynamics como origen nativo y receptor para flujos de datos de asignación | Ahora se admite el conector de Dynamics como origen y receptor para flujos de datos de asignación. Más información |
Ahora se admite de forma nativa la captura de datos modificados (CDC) | CDC ahora se admite de forma nativa en Data Factory para Azure Cosmos DB, Blob Storage, Data Lake Storage Gen1, Data Lake Storage Gen2 y CDM. Más información | |
Versión preliminar pública de Flowlets | La versión preliminar pública de Flowlets permite a los desarrolladores de flujos de datos compilar componentes reutilizables para crear fácilmente lógica de transformación de datos que admite composición. Más información | |
Versión preliminar pública de Map Data | La versión preliminar de Asignar datos permite a los usuarios empresariales definir transformaciones y asignaciones de columnas para cargar bases de datos de lago de Azure Synapse. Más información | |
Varios destinos de salida de Power Query | Ahora puede asignar varios destinos de salida desde Power Query en Data Factory a fin de obtener patrones de ETL flexibles para integradores de datos civiles. Más información | |
Compatibilidad con la transformación de llamadas externas | Amplíe la funcionalidad de los flujos de datos de asignación mediante la transformación Llamada externa. Ahora puede agregar código personalizado propio como punto de conexión REST o llamar a un servicio de terceros mantenido fila a fila. Más información | |
Habilitación de la reutilización rápida por los flujos de datos de asignación de Azure Synapse con compatibilidad con TTL | Ahora los flujos de datos de asignación de Azure Synapse admiten la reutilización rápida mediante el establecimiento de un TTL en Azure IR. El uso de una configuración permite que las actividades de flujo de datos posteriores se ejecuten en menos de cinco segundos. Más información | |
Declarar la transformación | Agregue fácilmente comprobaciones de calidad de datos, validación de dominios de datos y metadatos a la canalizaciones de Data Factory mediante la transformación de aserción de los flujos de datos de asignación. Más información | |
Compatibilidad con IntelliSense en el generador de expresiones para conseguir experiencias de creación de canalizaciones más productivas | La compatibilidad con IntelliSense en el generador de expresiones y creación de contenido dinámico permite que los desarrolladores de canalizaciones de Data Factory y Azure Synapse sean más productivos al escribir expresiones complejas en sus canalizaciones de datos. Más información |
Noviembre de 2021
Categoría del servicio | Mejoras en el servicio | Detalles |
Integración continua y entrega continua (CI/CD) | Mejoras en la integración de GitHub | Las mejoras en la integración de Data Factory y GitHub elimina los límites de 1000 recursos de Data Factory por tipo de recurso, como conjuntos de datos y canalizaciones. Para factorías de datos grandes, este cambio ayuda a mitigar el impacto del límite de frecuencia de GitHub API. Más información |
Flujo de datos | Establecimiento de un código de error personalizado y un mensaje de error con la actividad de error | La actividad de error permite a los desarrolladores de ETL establecer el mensaje de error y el código de error personalizado para una canalización de Data Factory. Más información |
Transformación de llamada externa | La transformación Llamada externa de los flujos de datos de asignación permite a los desarrolladores de ETL usar las transformaciones y el enriquecimiento de datos que proporcionan los puntos de conexión de REST o los servicios de API de terceros. Más información | |
Reutilización rápida de Synapse | Al ejecutar el flujo de datos en Synapse Analytics, use la característica TTL. La característica TTL usa la característica de reutilización rápida para que los flujos de datos secuenciales se ejecuten en unos segundos. Puede establecer el TTL al configurar una instancia de Azure IR. Más información | |
Movimiento de datos | La actividad Copiar permite leer datos de FTP o SFTP sin fragmentarlos | Determine automáticamente la longitud del archivo o el desplazamiento pertinente que se leerá al copiar datos de un servidor FTP o SFTP. Con esta funcionalidad, Data Factory se conectará automáticamente al servidor FTP o SFTP para determinar la longitud del archivo. Una vez que se determina la longitud, Data Factory divide el archivo en varios fragmentos y los lee en paralelo. Más información |
UTF-8 sin compatibilidad con BOM en la actividad de copia | La actividad Copiar admite la escritura de datos con el tipo de codificación UTF-8 sin BOM para JSON y conjuntos de datos de texto delimitados. | |
Compatibilidad con delimitadores de columna de varios caracteres | La actividad Copiar admite el uso de delimitadores de columna de varios caracteres para conjuntos de datos de texto delimitados. | |
Integration runtime (Tiempo de ejecución de integración) | Ejecución de cualquier proceso en cualquier lugar en tres pasos con SQL Server Integration Services (SSIS) en Data Factory | Obtenga información sobre cómo usar lo mejor de las funcionalidades de Data Factory y SSIS en una canalización. Un paquete SSIS de ejemplo con propiedades parametrizadas le ayuda a empezar. Con Data Factory Studio, el paquete SSIS se puede arrastrar y colocar fácilmente en una canalización y usarse como parte de una actividad de ejecución de paquete SSIS. Esta funcionalidad le permite ejecutar la canalización de Data Factory con un paquete SSIS en IR autohospedados o de SSIS. Al proporcionar valores de parámetros en tiempo de ejecución, puede usar las eficaces funcionalidades de Data Factory y SSIS conjuntamente. En este artículo se muestran tres pasos para ejecutar cualquier proceso, que puede ser cualquier archivo ejecutable, como una aplicación, un programa, una utilidad o un archivo por lotes, en cualquier lugar. Más información |
Octubre de 2021
Categoría del servicio | Mejoras en el servicio | Detalles |
Flujo de datos | Conectores de Azure Data Explorer y Amazon Web Services (AWS) S3 | El equipo de Integración de datos de Microsoft ha publicado dos nuevos conectores para flujos de datos de asignación. Si usa Azure Synapse, ahora puede conectarse directamente a los cubos de AWS S3 para realizar transformaciones de datos. Tanto en Data Factory como en Azure Synapse, ahora se puede conectar de forma nativa a los clústeres de Azure Data Explorer en flujos de datos de asignación. Más información |
Actividades de Power Query que dejan la versión preliminar para GA | La actividad de canalización de Power Query de Data Factory ya está disponible con carácter general. Esta nueva característica proporciona preparación de datos de escalabilidad horizontal y limpieza y transformación de datos para los integradores civiles dentro de la interfaz de usuario del explorador de Data Factory a fin de obtener una experiencia integrada para los ingenieros de datos. La característica de limpieza y transformación de datos de Power Query en Data Factory proporciona una potente capacidad de canalización fácil de usar para resolver los patrones de ETL e integración de datos más complejos en un solo servicio. Más información | |
Nueva transformación de datos que se convierten a cadena JSON en flujos de datos de asignación | La asignación de flujos de datos agrega una nueva transformación de datos denominada Convertir a cadena JSON para facilitar la conversión de tipos de datos complejos como estructuras y matrices en formato de cadena. Estos tipos de datos se pueden enviar a destinos de salida estructurados. Más información | |
Integration runtime (Tiempo de ejecución de integración) | Inserción de red virtual rápida para IR de SSIS (versión preliminar pública) | Ahora el IR de SSIS admite la inserción de red virtual rápida. Más información: Introducción a la inserción de red virtual para IR de SSIS Diferencias entre la inserción de red virtual estándar y rápida para IR de SSIS Inserción de red virtual rápido para IR de SSIS |
Seguridad | Mejora de la integración de Azure Key Vault | Ahora la integración de Key Vault tiene listas desplegables para que los usuarios puedan seleccionar los valores secretos en el servicio vinculado. Esta funcionalidad aumenta la productividad porque los usuarios no tienen que escribir los secretos, lo que podría dar lugar a un error humano. |
Compatibilidad con la identidad administrada asignada por el usuario en Data Factory | La seguridad de las credenciales es fundamental para cualquier empresa. El equipo de Data Factory se ha comprometido a hacer que el proceso de ingeniería de datos sea seguro, pero sencillo, para los ingenieros de datos. La identidad administrada asignada por el usuario (versión preliminar) ahora se admite en todos los conectores y servicios vinculados que admiten la autenticación basada en Azure AD. Más información |
Septiembre de 2021
Categoría del servicio | Mejoras en el servicio | Detalles |
Integración continua y entrega continua | Funcionalidades de CI/CD ampliadas | Ahora puede crear una rama de Git basada en cualquier otra de Data Factory. Más información |
Movimiento de datos | Amazon Relational Database Service (RDS) para orígenes de Oracle | El conector Amazon RDS para orígenes de Oracle ya está disponible tanto en Data Factory como en Azure Synapse. Más información |
Amazon RDS para orígenes de SQL Server | El conector Amazon RDS para orígenes de SQL Server ya está disponible tanto en Data Factory como en Azure Synapse. Más información | |
Compatibilidad con la copia paralela de Azure Database for PostgreSQL | El conector de Azure Database for PostgreSQL ahora admite operaciones de copia paralela. Más información | |
Flujo de datos | Uso de Azure Data Lake Storage Gen2 para ejecutar comandos anteriores y posteriores al procesamiento | Los comandos anteriores y posteriores al procesamiento del Sistema de archivos distribuido de Hadoop (HDFS) ahora se pueden ejecutar mediante receptores de Data Lake Storage Gen2 en flujos de datos. Más información |
Edición de propiedades de flujos de datos para las instancias existentes de Azure IR | Azure IR se ha actualizado para permitir la edición de propiedades de flujos de datos para los entornos de ejecución de integración existentes. Ahora puede modificar las propiedades del proceso del flujo de datos sin necesidad de crear una instancia de Azure IR. Más información | |
Configuración de TTL para Azure Synapse para mejorar el tiempo de inicio de ejecución de actividades de canalización | Azure Synapse ha agregado TTL a Azure IR para que las actividades de canalización de flujo de datos puedan comenzar a ejecutarse en segundos, lo que minimiza considerablemente el tiempo de ejecución de las canalizaciones de flujo de datos. Más información | |
Integration runtime (Tiempo de ejecución de integración) | Disponibilidad general de la red virtual administrada de Data Factory | Ahora puede aprovisionar Azure IR como parte de una red virtual administrada y usar puntos de conexión privados para conectarse de forma segura a los almacenes de datos admitidos. El tráfico de datos pasa por las instancias de Azure Private Link, que proporcionan conectividad segura al origen de datos. También evita la filtración de datos a la red pública de Internet. Más información |
Orquestación | Operación y suministro de un Acuerdo de Nivel de Servicio para canalizaciones de datos | La nueva métrica Ejecución de canalización de tiempo transcurrido, combinada con las alertas de Data Factory, permite a los desarrolladores de canalizaciones de datos entregar mejores SLA a sus clientes. Ahora puede indicarnos cuánto tiempo se debe ejecutar una canalización y le notificaremos de forma proactiva si se ejecuta más tiempo del esperado. Más información |
Actividad de error (versión preliminar pública) | La nueva actividad de error permite producir un error en una canalización intencionadamente por cualquier motivo. Por ejemplo, puede usar la actividad de error si una actividad de búsqueda no devuelve datos que coincidan, o bien una actividad personalizada finaliza con un error interno. Más información |
Agosto de 2021
Categoría del servicio | Mejoras en el servicio | Detalles |
Integración continua y entrega continua | Mejoras en CI/CD con compatibilidad con GitHub en Azure Government y Microsoft Azure operado por 21Vianet | Agregamos soporte para GitHub en Azure para el Gobierno de EE. UU. y Azure operado por 21Vianet. Más información |
Movimiento de datos | El conector Azure Cosmos DB API for MongoDB es compatible con las versiones 3.6 y 4.0 de Data Factory | Ahora el conector Azure Cosmos DB API for MongoDB de Data Factory es compatible con las versiones del servidor 3.6 y 4.0. Más información |
Mejora del uso de la instrucción COPY para cargar datos en Azure Synapse | Ahora el conector Azure Synapse de Data Factory admite la copia de ensayo y el origen de copia con *.* como wildcardFilename para la instrucción COPY. Más información | |
Flujo de datos | Los puntos de conexión REST están disponibles como origen y receptor en el flujo de datos | Ahora los flujos de datos de Data Factory y Azure Synapse admiten puntos de conexión REST como origen y receptor con compatibilidad total con cargas JSON y XML. Más información |
Integration runtime (Tiempo de ejecución de integración) | La herramienta de diagnóstico está disponible para el IR autohospedado | Se ha diseñado una herramienta de diagnóstico para el IR autohospedado a fin de proporcionar una mejor experiencia de usuario y ayudar a los usuarios a encontrar posibles problemas. La herramienta ejecuta una serie de escenarios de prueba en la máquina del IR autohospedado. Cada escenario tiene casos de comprobación de estado típicos para incidencias comunes. Más información |
Orquestación | Disponibilidad general del desencadenador de eventos personalizado con la opción de filtrado avanzado | Ahora puede crear un desencadenador que responda a un tema personalizado publicado en Azure Event Grid. También puede usar el filtrado avanzado para obtener un control preciso sobre los eventos a los que responder. Más información |
Julio de 2021
Categoría del servicio | Mejoras en el servicio | Detalles |
Movimiento de datos | Obtención de canalizaciones de ingesta de datos basadas en metadatos con la herramienta Copiar datos de Data Factory en 10 minutos (versión preliminar pública) | Ahora puede crear canalizaciones de copia de datos a gran escala con un enfoque basado en metadatos en la herramienta Copiar datos (versión preliminar pública) en 10 minutos. Más información |
Flujo de datos | Nuevas funciones de asignación agregadas en las funciones de transformación de flujo de datos | Un nuevo conjunto de funciones de transformación de flujo de datos permite que los ingenieros de datos generen, lean y actualicen fácilmente tipos de datos de asignación y estructuras de asignación complejas. Más información |
Integration runtime (Tiempo de ejecución de integración) | Hay cinco nuevas regiones disponibles en la red virtual administrada de Data Factory (versión preliminar pública) | Cinco regiones nuevas (Este de China 2, Norte de China, US Government Arizona, US Government Texas y US Government Virginia) están disponibles en la red virtual administrada de Data Factory (versión preliminar pública). |
Productividad de los desarrolladores | Mejoras en la página principal de Data Factory | La página principal de Data Factory se ha rediseñado con mejores funcionalidades de contraste y reflujo. Se han introducido algunas secciones en la página principal para ayudarle a mejorar la productividad en el recorrido de integración de datos. Más información |
Nueva página de aterrizaje para Data Factory Studio | Página de aterrizaje del panel Data Factory en Azure Portal. Más información |
Junio de 2021
Categoría del servicio | Mejoras en el servicio | Detalles |
Movimiento de datos | Nueva experiencia del usuario con la herramienta Copiar datos de Data Factory | La herramienta Copiar datos rediseñada ya está disponible con una experiencia de ingesta de datos mejorada. Más información |
MongoDB y MongoDB Atlas se admiten como origen y receptor | Esta mejora admite la copia de datos entre cualquier almacén de datos compatible y la base de datos de MongoDB o MongoDB Atlas. Más información | |
Always Encrypted es compatible con los conectores de SQL Database, SQL Managed Instance y SQL Server como origen y receptor | Always Encrypted está disponible en Data Factory para los conectores de SQL Database, SQL Managed Instance y SQL Server para la actividad de copia. Más información | |
La configuración de metadatos personalizados se admite en la actividad Copiar si la recepción tiene lugar en Data Lake Storage Gen2 o Blob Storage | Al escribir en Data Lake Storage Gen2 o Blob Storage, la actividad Copiar admite la configuración de metadatos personalizados o el almacenamiento de la información de última modificación del archivo de origen como metadatos. Más información | |
Flujo de datos | SQL Server se admite ahora como origen y receptor en los flujos de datos | SQL Server se admite ahora como origen y receptor en los flujos de datos. Siga el vínculo para obtener instrucciones sobre cómo configurar las redes mediante la característica de red virtual administrada de Azure IR para comunicarse con las instancias de SQL Server locales y basadas en máquinas virtuales en la nube. Más información |
La reutilización rápida del clúster de flujo de datos ahora está habilitada de forma predeterminada para todas las instancias nuevas de Azure IR | La característica popular de reutilización de inicio rápido de flujo de datos ahora está disponible con carácter general para Data Factory. Ahora la reutilización rápida está habilitada en todas las instancias nuevas de Azure IR de manera predeterminada. Más información | |
Actividad de Power Query (versión preliminar pública) | Ahora puede crear asignaciones de campos complejas en el receptor de Power Query mediante la limpieza y transformación de datos de Data Factory. Ahora el receptor está configurado en la canalización de la actividad de Power Query (versión preliminar pública) para dar cabida a esta actualización. Más información | |
Se ha actualizado la interfaz de usuario de supervisión de flujos de datos en Data Factory | Data Factory tiene una nueva actualización de la interfaz de usuario de supervisión para facilitar la visualización de las ejecuciones de trabajos de ETL del flujo de datos e identificar rápidamente áreas de optimización del rendimiento. Más información | |
SQL Server Integration Services | Ejecución de instrucciones SQL o scripts en cualquier parte en tres pasos con SSIS en Data Factory | En esta publicación se proporcionan tres pasos para ejecutar cualquier instrucción SQL o script en cualquier lugar con SSIS en Data Factory.
|