Qu’est-ce que Genie Migrate ?

Genie Migrate est l’outil Azure Databricks permettant de migrer des charges de travail depuis des entrepôts de données existants et d’extraire, transformer et charger (ETL) vers Azure Databricks. Basé sur Genie Code, l’agent de codage IA Azure Databricks, il convertit du code SQL et ETL d’autres plateformes en requêtes SQL Databricks ou en notebooks Databricks que votre équipe peut examiner et exécuter.

Vous gérez chaque migration dans un projet de migration dans votre espace de travail. Genie Migrate vous aide à évaluer votre système source, convertit les fichiers associés ensemble, vérifie et corrige sa sortie, et affiche le code original et converti côte à côte pour que votre équipe l’approuve.

Schéma des trois étapes d’une migration, orchestrée par Genie Code : évaluation des systèmes sources hérités, conversion du code SQL et ETL, et migration des données avec Lakeflow Connect.

Étapes d’une migration Genie Migrate

Une migration depuis une autre plateforme de données comporte trois étapes : évaluation, conversion et migration de données. Genie Migrate couvre les étapes d’évaluation et de conversion. Pour déplacer les données elles-mêmes, voir concepts de connecteurs Lakeflow Connect.

Tâche Description
Créer et analyser un projet Phase d’évaluation. Créez un projet de migration, ajoutez vos fichiers sources, analysez la complexité du code et les dépendances entre les fichiers, et planifiez la migration en groupes.
Convertir le code Phase de conversion. Convertir SQL en requêtes SQL Databricks ou notebooks Databricks, et relire et accepter le code converti.

Qu’est-ce qu’un projet de migration ?

Un projet de migration consiste à gérer une migration dans votre espace de travail. Il suit l’état de chaque fichier et vous offre un endroit unique pour analyser, convertir et relire votre code. Lorsque vous créez un projet, vous choisissez :

  • Dialecte source : Le dialecte SQL de votre code existant, comme T-SQL ou Teradata, ou Informatica pour les exportations PowerCenter.
  • Framework cible : Le format du code converti. Consultez Dialectes sources et frameworks cibles pris en charge.
  • Dossier de destination : Le dossier de l’espace de travail où Genie Migrate écrit les fichiers convertis.

Pour créer un projet, voir Créer un projet de migration.

Exigences pour Genie Migrate

  • Vos fichiers SQL ou XML existants doivent être accessibles dans votre espace de travail, soit téléchargés en tant que fichiers d’espace de travail, soit ouverts dans l’éditeur.
  • Votre espace de travail doit répondre aux exigences du code Génie. Voir Le code Genie.
  • Pour utiliser les cadres cibles Notebooks ou Lakeflow Pipelines, l’analyse de projet et la lignée, ou la conversion Informatica PowerCenter, qui sont en bêta, un administrateur d’espace de travail doit activer Migration Projects Experimental Features depuis la page Previews. Consultez Gérer les préversions d’Azure Databricks.
  • Pour utiliser le cadre cible des pipelines Lakeflow, votre espace de travail doit prendre en charge les pipelines sans serveur, et vous devez avoir l’autorisation de créer des pipelines, ainsi que USE CATALOG, USE SCHEMA, CREATE TABLE et CREATE MATERIALIZED VIEW sur le catalogue et le schéma de destination de chaque groupe. Pour convertir des fichiers d’un groupe dont le pipeline a été créé par un autre utilisateur, vous avez également besoin de l’autorisation CAN RUN sur ce pipeline.

Étapes suivantes