Migrate Spark workloads from Azure Synapse Analytics to Microsoft Fabric (Preview)

Hinweis

Der Workflow für geführte Migration befindet sich derzeit in der öffentlichen Vorschau.

Migriere Spark-Workloads von Azure Synapse Analytics auf Microsoft Fabric über einen geführten Workflow.

In der öffentlichen Vorschau migriert der Workflow Spark-Pools, Notizbücher, Spark-Job-Definitionen und Lake-Datenbanken.

Die Migration verschebt Ihre Daten nicht. Der Workflow kopiert und transformiert unterstützte Spark-Items für Fabric und erstellt für jeden Durchlauf einen Migrationsbericht.

Der Migrationsworkflow unterstützt folgende Elemente:

  • Spark-Pools werden zu Fabric Pools und entsprechenden Umgebungen migriert.
  • Notizbücher und zugehörige Umgebungen werden migriert.
  • Spark-Auftragsdefinitionen (SJDs) werden mit zugehörigen Umgebungen migriert.
  • Lake-Datenbanken werden Fabric-Schemas zugeordnet, und verwaltete Delta-Tabellen werden durch Erstellen von OneLake-Katalogverknüpfungen migriert.

Für Details zur Migration von Lake-Datenbanken wird die Standard-Synapse-Datenbank dem Schema in Fabric zugeordnetdbo, und weitere Datenbanken werden als Schemata im selben Lakehouse migriert.

So funktioniert die Migration

Um Apache Spark Pools, Notizbücher, Spark-Jobdefinitionen und Lake-Datenbanken zu Fabric zu migrieren, folgen Sie dem geleiteten Workflow.

Kopieren und Transformieren von Elementen

Suchen Sie zuerst den Quellarbeitsbereich, der die Data Engineering-Elemente enthält, die Sie migrieren möchten. Der Migrationsprozess kopiert und transformiert dann unterstützte Items, damit sie in einem Fabric-Arbeitsbereich ausgeführt werden können.

Überwachen der Migration

Während der Migration können Sie den Fortschritt überwachen und eine Zusammenfassung der migrierten Daten engineering-Elemente überprüfen. Nach Abschluss der Migration sind die neuen Elemente in Ihrem Fabric-Arbeitsbereich verfügbar.

Migrierung von Spark-Workloads

  1. Öffnen Sie einen Fabric-Arbeitsbereich, und wählen Sie dann auf der Symbolleiste "Migrieren" aus.

  2. Wählen Sie im Assistenten Daten-Ingenieurwesen-Elemente aus.

    Screenshot der Migration zu Fabric.

  3. Geben Sie die Azure Synapse-Quellarbeitsbereichsdetails an. Sie können den Quellarbeitsbereich anhand eines Abonnements suchen. Nachdem Sie das Abonnement ausgewählt haben, wählen Sie den Quellarbeitsbereich aus diesem Abonnement.

    • Geben Sie einen Migrationsnamen ein.
    • Wählen Sie das Abonnement und den Quellarbeitsbereich aus.

    Screenshot der Auswahlquelle.

  4. Wählen Sie den Ziel-Fabric-Arbeitsbereich aus, in dem Elemente migriert werden sollen.

    Der Quellarbeitsbereich und der Ziel-Fabric-Arbeitsbereich, den Sie im Assistenten auswählen, bestimmen die Migrationsrichtung.

    Screenshot der Option

  5. Überprüfen Sie die verfügbaren Datengatewayverbindungen, auf die Sie zugreifen können. Fügen Sie bei Bedarf eine neue Verbindung hinzu.

    Screenshot der Auswahl oder Erstellung einer Daten-Gateway-Verbindung.

    • Um eine neue Verbindung zu erstellen, wählen Sie "Neu hinzufügen" aus.

    • Der Server und der Pfad werden aus dem Standardmäßigen Azure Data Lake Storage Gen2-Konto und -Container für den Quellarbeitsbereich generiert. Dieser Wert ist erforderlich, da die Migration der Lake-Datenbank Verknüpfungen zu den Speicherorten der verwalteten Tabellen erstellt.

      Screenshot der neuen Verbindung.

  6. Wählen Sie optional die Datengatewayverbindung aus, die für diese Migrationsausführung verwendet werden soll.

    Hinweis

    Wenn Sie keine Gatewayverbindung auswählen, werden Datenbanken nicht migriert.

  7. Überprüfen Sie die Migrationsdetails, und wählen Sie dann "Weiter" aus.

    Screenshot des Vorgangs

    Wenn Sie das Dialogfeld an diesem Punkt schließen, können Sie die Migration abbrechen:

    Screenshot des Abbrechens dieser Migration.

  8. Wählen Sie "Migrieren" aus, um die Migration zu starten.

    Screenshot der Schaltfläche

  9. Überwachen Sie den Fortschritt der Migration. Während der Migration können Sie den Status und die Zusammenfassung der migrierten Elemente anzeigen.

    • Der Spinner gibt an, dass die Migration gestartet wurde.

    • Eine Benachrichtigung in der oberen rechten Ecke zeigt den Fortschritt an.

    • Ein Link zum Migrationsbericht ist verfügbar.

    • Nach ein paar Sekunden werden Sie automatisch an den Bericht umgeleitet.

      Screenshot der Migration von Spark-Elementen.

      Hinweis

      Auf den Migrationsbericht kann auch über den Monitoring Hub zugegriffen werden. Sie können nach dem Migrationsauftrag anhand des Migrationsnamens suchen oder nach dem Spark Job Definition-Elementtyp filtern.

  10. Wählen Sie den Link "Migrationsbericht " aus dem vorherigen Schritt aus, um die Ergebnisse zu überprüfen.

    Screenshot der Migrationszusammenfassung.

    Hinweis

    Wählen Sie "Details " aus, um zusätzliche Informationen zu Fehlern oder Warnungen anzuzeigen, die während der Migration aufgetreten sind.

Einschränkungen der öffentlichen Vorschauversion

  • Synapse-Arbeitsbereiche unter einem virtuellen Netzwerk (VNET) können nicht migriert werden.
  • Spark-Konfigurationen, benutzerdefinierte Bibliotheken und benutzerdefinierte Executoreinstellungen werden nicht migriert.
  • Nicht-Delta-Tabellenformate werden nicht unterstützt.

Verwandte Inhalte

  • Last updated on