Freigeben über


Umstellung von alten Datenintegrationsdiensten

Der Datenexportservice, Bring Your Own Database (BYOD) und Nach Data Lake exportieren waren in Dynamics 365-Apps eingeführte Features zum Exportieren von Daten für Analyse- und Datenintegrationsszenarien. Diese Dienste ermöglichten es IT-Administrierenden und -Fachkräften, Daten in externe Datenbanken oder Data Lakes zu exportieren und Datenintegrationspipelines aufzubauen. Während wir diese Dienste im Laufe der Jahre durch Updates im Rahmen der Zusammenführung von Dynamics 365 mit der Power Platform verbessert haben, haben wir die gleichen Funktionen dieser unterschiedlichen Dienste in einfachere, vereinheitlichte Erfahrungen umgewandelt, die in Power Apps (make.powerapps.com) integriert sind. Mit einem Wechsel zu Microsoft Fabric oder einem Upgrade auf Azure Synapse Link bieten Ihnen die neu gestalteten Dienste einen einfachen Einstieg, um von KI und Copilot-Investitionen in Microsoft Dataverse und Fabric zu profitieren.

Wenn Sie einen der Dienste der vorherigen Generation nutzen, finden Sie in diesem Artikel Informationen zum Upgrade auf die neue Erfahrung. Dabei profitieren Sie von den Innovationen und können den Gesamtaufwand und die Kosten reduzieren.

Aufgrund von Kundenbefragungen in der Vorabversion haben wir zudem eine umfassende Kosten- und Nutzenschätzung zusammengestellt, um Ihnen die Umstellung zu erleichtern. Darüber hinaus finden Sie hier Links zu weiteren Informationen und Videos sowie Links zur Teilnahme an Foren und wöchentlichen Sprechstunden, um sich mit dem Produktteam, Microsoft-Fachkräften und anderen Benutzenden auszutauschen. Unser Ziel ist es, diese Dienste durch Einbeziehung der Community zu verbessern.

Vor der Umstellung

Wenn Sie die alten Dienste BYOD, Datenexportdienst oder „Nach Data Lake exportieren“ nutzen, verfügen Sie möglicherweise über eine Datenintegrationsarchitektur, die der hier gezeigten ähnelt. Das hervorgehobene Feld zeigt die Datenpipelines an, die Ihr Unternehmen vielleicht erstellt hat, um die aus Dynamics 365 und Dataverse exportierten Daten zu nutzen. Sie können eine Auswahl an Tools von Microsoft und anderen Anbietern verwenden, um Dynamics-Daten zu kopieren und in Ihre eigenen Daten zu integrieren. Sie können Daten auch transformieren und aggregieren, indem Sie sie in mehrere Speicher kopieren – dargestellt im Datenaufbereitungsfeld des Diagramms. Sie können Power BI oder ein anderes Tool zum Visualisieren von Daten und Erstellen umsetzbarer Erkenntnisse nutzen. Möglicherweise haben Sie Pipelines zum Exportieren von Daten in ein lokales System und andere Clouds erstellt.

Datenintegrationslösung mit „Nach Data Lake exportieren“

Nach der Umstellung

Es gibt zwei Datenintegrationsmuster in Power Apps:

  • Azure Synapse Link ermöglicht den kontinuierlichen Export von Daten ähnlich wie BYOD, Export nach Data Lake oder Datenexportdienst. Diese Option ist für IT-Administrierende und Datenintegrationsfachkräfte aktiviert.
  • Das Feature „Link zu Fabric“ bietet eine vollständig verwaltete SaaS-Integration (Software as a Service) ohne Kopieren, Extrahieren, Transformieren und Laden (ETL).

Diese Optionen ergänzen sich. Hier sehen Sie einen ein detaillierten Vergleich der Datenintegrationsdienste.

Wenn Sie ein Finanz- und Betriebs-Apps-Kunde sind, der derzeit BYOD- oder Nach Data Lake exportieren-Funktionen verwendet, können Sie durch ein Upgrade auf Azure Synapse Link oder Fabric-Verknüpfung von einer vereinfachten Datenintegrationsarchitektur profitieren, die zu geringeren Betriebskosten führt:

  • Einfache Konfiguration und Wartung über Power Apps (make.powerapps.com). Integrierte Integration mit Azure Synapse und Fabric.
  • Azure Synapse Link und Fabric-Verknüpfung sind vollständig verwaltete Dienste. Es ist jeweils nur ein minimaler laufender Verwaltungsaufwand erforderlich.
  • Die neuen Dienste bieten dieselben Datenformen wie die früheren Dienste. Ihre vorhandenen Downstream-Integrationspipelines können unverändert bleiben.
  • Minimale Auswirkungen auf betriebliche Workloads. Sie müssen keine Workloads verwalten und keine Datenexporte planen.

Sichere End-to-End-Datenintegrationspipelines:

  • Mit Fabric Link verlassen Ihre Daten die Dataverse-Governance-Grenzen nicht, während autorisierte Fabric-Benutzende sicher auf die innerhalb der Grenzen gespeicherte Dataverse-Daten zugreifen können.
  • Mit dem Azure Synapse Link-Dienst können Sie gleichzeitig den Zugriff auf Ihre Speicherkonten mit Firewalls einschränken und Dataverse ermöglichen, Daten mit verwalteten Identitäten für Azure zu exportieren, einer in Microsoft Entra integrierte Sicherheitsfunktion.

Wenn Sie ein Dynamics 365 Customer Engagement-Kunde sind, der den Datenexportservice oder die klassische Azure Synapse Verknüpfung mit Datenexporten im CSV-Format verwendet, können Sie von einer effizienten Berichterstellung profitieren, die durch das branchenübliche Delta- oder Parquet-Datenformat ermöglicht wird:

  • Dank der integrierten Delta Lake- oder Parquet-Konvertierungsoption müssen Sie keine eigenen Pipelines für Analysen und Betriebsberichte erstellen.
  • Das Delta Lake- oder Parquet-Format ermöglicht schnellere, besser reagierende Abfragen und Berichte und skaliert auf größere Datensätze jeder Größe.
  • Die Daten im Lake werden auf 1/3 bis 1/8 der Originalgröße komprimiert. Dadurch entstehen kleinere Dateien, was die Datenabfrage- und -speicherkosten reduziert.
Verknüpfung zu Fabric Azure Synapse Link
Kein Kopieren, keine direkte ETL-Integration mit Fabric. Daten in Ihr eigenes Speicherkonto exportieren und sie in Azure Synapse, Fabric und andere Tools integrieren.
Daten bleiben in Dataverse. Benutzende erhalten sicheren Zugriff zu Microsoft Fabric. Daten bleiben in Ihrem eigenen Speicher. Sie verwalten den Zugriff von Benutzenden.
Alle Tabellen sind standardmäßig ausgewählt. Systemadministratoren können erforderliche Tabellen auswählen.
Verbraucht zusätzlichen Dataverse Speicher. Verbraucht Ihren eigenen Speicher sowie andere Rechen- und Integrationstools.

Welche Option sollte ich verwenden?

Wenn Ihre Organisation Fabric bereits verwendet oder in den kommenden Monaten eine Umstellung plant, empfehlen wir die Verwendung der Fabric-Link-Funktion. Sie können den Azure Synapse Link-Dienst weiterhin verwenden, wenn Ihr unmittelbarer Fokus auf einem Upgrade Ihrer aktuellen Dienste liegt.

Wenn Sie bereits Daten mithilfe von Power BI nutzen, ein Data Warehouse verwenden oder Dataflows und Notebooks zur Datentransformation nutzen, bietet das Feature „Link zu Fabric“ einen sofortigen Mehrwert. Sie können Ihre Datenintegrationsarchitektur vereinfachen, indem Sie den Bedarf für ein eigenes Speicherkonto oder eigene Synapse-Dienste für Dataverse-Daten beseitigen. Anstatt für Azure-Ressourcen wie Speicher und Rechenleistung zu zahlen, zahlen Sie für die Erhöhung des Dataverse-Speichers. Rechenkosten wie Datenaktualisierungen in Quasi-Echtzeit und Verwaltungskosten werden ebenfalls in den Dataverse-Speicher einberechnet. Mit der Fabric Link-Option haben Sie eine in Quasi-Echtzeit verfügbare, schreibgeschützte Kopie Ihrer Daten, die für die Gewinnung von Erkenntnissen optimiert ist.

Vereinfachte Datenintegrationslösung mit Fabric-Verknüpfung

Fragen Sie dieses Replikat mit T-SQL, Apache Spark, Python sowie anderen Workloads in Fabric ab. Sie können auf diese Daten auch mit jedem Tool zugreifen, das T-SQL oder Daten von Azure Data Lake Storage verwenden kann.

Als Dynamics- oder Power Apps-Kundschaft erhalten Sie ein Dataverse Speicherkontingent basierend auf der Anzahl der von Ihnen erworbenen Lizenzen. Das Fabric-Link-Feature verwendet dieses Datenbankkontingent. Übersteigt das Datenvolumen Ihr Kontingent, können Sie weiteren Speicher hinzukaufen.

Sie können Platform-as-a-Service (PaaS)-Dienste von Azure wie Databricks und die SQL-Datenbank weiterhin in Ihrem eigenen Abonnement behalten. Kürzlich angekündigte Fabric-Features wie Datenspiegelung und Verknüpfungen können Ihnen dabei helfen, Ihre Datenintegration weiter zu vereinfachen.

Hier werden Beispiele für Kostensenkungen beschrieben, die durch die Vereinfachung des Fabric-Integrationsfeatures erreicht werden.

Durch das Upgrade auf Azure Synapse Link und die Aktivierung der Delta- oder Parquet-Konvertierung können Sie Dataverse Datenaufbereitungspipelines in Ihrer Lösung eliminieren. Azure Synapse Link-Dienst exportiert dieselben Datenformen in einem leistungsfähigeren Delta- oder Parquet-Format in Ihr Speicherkonto. Sie können vorhandene Tools und Azure-Dienste wie Speicher und Azure Synapse Analytics-Abfragen mit minimalen Störungen Ihrer Produktionsumgebungen weiterhin verwenden.

Datenintegrationslösung nach dem Upgrade auf Azure Synapse Link

Mehr zu Vorteilen und Kostensenkungen

Die Einfachheit, die mit Fabric-Verknüpfung und Azure Synapse Link erreicht wird, führt zu einer Reduzierung der End-to-End-Kosten. Betrachten Sie die folgenden Beispiele, die auf Kundenerfahrungen mit der Vorschauversion basieren.

Stellen Sie sich den Fall vor, dass Sie von „Export zu Data Lake“ zu Fabric Link wechseln.

Vorher-Nachher-Lösungen mit Link zu Fabric

Wie in den Vorher-nachher-Diagrammen in diesem Artikel dargestellt, wurde der Dienst „Nach Data Lake exportieren“ (1) sowie die Staging-Datenspeicher (2) mit einer Fabric-Verknüpfung eingestellt. Um betriebliche Erkenntnisse zu gewinnen (4), werden Daten in OneLake direkt in Power BI eingesetzt. Für einige der Erkenntnisse sind eine Zusammenführung, Transformation und Aggregation von Daten erforderlich (3). Anstatt unterschiedliche Azure-Dienste zu verwenden, standardisiert die Kundschaft dieselben in Fabric integrierten Tools.

Innovationen in Dataverse und Fabric ermöglichen Vereinfachungen und Kostensenkungen:

  • Dataverse wird mit einem integrierten OneLake-Speicher geliefert. Betriebsdaten aus Dynamics 365 und Power Apps werden in Quasi-Echtzeit in den integrierten Lake-Speicher repliziert (um Auswirkungen auf betriebliche Workloads zu vermeiden) und über Verknüpfungen sicher mit Fabric verlinkt. Das Bereitstellen von Azure-Speicher und Sichern exportierter Daten ist nicht notwendig. Ihre Daten verlassen die Dataverse Governance-Grenzen nicht und autorisierte Benutzende in Fabric können mithilfe aller Fabric-Workloads mit Daten arbeiten.
  • Nach Data Lake exportieren und der Datenexportdienst exportieren Daten im CSV-Format. CSV-Dateien sind aufgrund einer schlechter Abfrageleistung sowie gelegentlicher Lese-/Schreibkonflikte nicht für die direkte Verwendung geeignet. Die Lösung vor dem Übergang verwendet Azure Data Factory, um Rohdaten regelmäßig zu erfassen und in eine Azure SQL-Datenbank oder ein Azure Data Warehouse zu konvertieren. Diese Ebene wird in der Lösung nach dem Übergang nicht benötigt, da das in OneLake-Daten enthaltene Dataverse im Delta- oder Parquet-Format verwaltet wird, dem gleichen offenen Format, das auch für Microsoft Fabric nativ ist. Durch das Delta- oder Parquet-Format sowie die Optimierungen in Fabric entfällt die Notwendigkeit, zusätzliche Datenspeicher für die Zwischenspeicherung und Verbesserung der Abfrageleistung zu pflegen, während Lese-/Schreibkonflikte vermieden werden. Sie können Power BI-Berichte mithilfe von Direct Lake über Daten in OneLake ohne zusätzliche Datenphasen erstellen.
  • Während betriebliche Erkenntnisse mithilfe der in OneLake bereits verfügbaren Daten gewonnen werden können, verfügen Sie möglicherweise über zusätzliche Daten aus anderen Systemen. Diese Daten müssen möglicherweise mit Dataverse-Daten kombiniert, neu strukturiert und aggregiert werden. Fabric bietet eine integrierte Umgebung, die erstklassige Tools wie Dataflows, Azure Data Factory und Spark bereitstellt. Verwenden Sie diese Tools, anstatt Tools eigenständig zu konfigurieren und bereitzustellen, wobei Sie die Tools Ihrer Wahl übernehmen. Integrierte Abrechnung, Quellcodeverwaltung und Sicherheit sorgen für eine einfachere Verwaltung und Governance.
  • Sie können weiterhin den Power BI-Dienst für die Berichterstellung nutzen. Fabric führt Direct Lake-Modus-Berichte ein, welche die im Delta oder Parquet-Format integrierten speicherinternen Indizes nutzen, sodass Sie keine Power BI-Importmodusberichte mehr verwenden müssen.

Diese Innovationen führen neben den bereits besprochenen Vorteilen zu durchgängigen Kosteneinsparungen. In den Tabellen hier finden Sie die einzelnen Kostenpositionen sowie einen Vergleich der Vorher- und Nachherlösung. Sie können diese Tabelle als Richtschnur zur Schätzung der zu erwartenden Kosteneinsparungen verwenden.

Einzelposition Kosteneinsparung Kosten vorher – nach Data Lake exportieren Kosten nachher – Fabric Link
Einrichten und Konfiguration Mehrere Tools müssen verwendet werden.
– Für mehrere Softwarelizenzen und Abonnements bezahlen.
– Aufwand für die Systemkonfiguration.
– Aufwand zum Erstellen und Validieren von Datenpipelines.
– Kontinuierliche Governance, Verwaltung und Überwachung.
– Schulung der Benutzenden.
Einfachere Konfiguration in Power Platform.

Fabric-Kapazität kaufen und nutzungsabhängig für alle Dienste bezahlen. Sie bezahlen nur, was Sie nutzen. In manchen Fällen erfolgt die Abrechnung sekundengenau.

Keine ETL-Pipelines für Dataverse-Daten erforderlich.
Daten-Staging (1, 2) Für Azure-Dienste fallen Kosten an.
– Kosten für Azure Storage einschließlich E/A-Kosten.
– Synapse Analytics (serverlose SQL-Abfrage).
– Azure Data Factory-Aufträge für das Kopieren von Daten.
– Staging-Datenspeicher, wie etwa Azure SQL-Datenbank.
Kostenanstieg im Dataverse-Speicher

Wenn Sie beispielsweise 500 GB Daten aus Dynamics 365 synchronisieren, können der Dataverse-Speicher um etwa 100 GB ansteigen (bei einer angenommenen fünf- bis achtfachen Datenkomprimierung).
Betriebskosten – Datenaufbereitung (3) – Azure Storage-Staging-Bereich.
– Datenpipelines.
– Datenerfassung in Azure SQL oder Data Warehouse.
– Entwicklung von Wartungsdaten.
Die Ausgaben werden zu Fabric verlagert, wo Sie für den Verbrauch mit einer gemeinsam genutzten Kapazität bezahlen.
Betriebskosten – Berichterstellung (4)
– Power BI-Datasets.
– Berichterstellung.
Synapse Analytics (SQL-Abfrage).
Power BI-Kapazität und -Speicher für Berichte im Importmodus.
Da Ihre Daten komprimiert werden (beispielsweise 1/3 bis 1/6 der Originalgröße), verringern sich Ihre Berichts- und Abfragekosten entsprechend.

Neue Features wie Direct Lake-Berichterstellung reduzieren den Verbrauch von Power BI-Speicherverbrauch.

Anmerkung

Diese Schätzungen werden bereitgestellt, damit die Ausgaben nach der Umstellung geschätzt werden können. Diese Schätzungen basieren zwar auf den Erfahrungen von Kundschaft mit der Vorschauversion, die tatsächlichen Kosten in Ihrer Umgebung sowie die Datenkomprimierung können jedoch je nach Volumen und Zusammensetzung der Daten variieren.

Ein Upgrade auf Azure Synapse Link ist eine Option, die Sie in Betracht ziehen sollten, wenn Sie Fabric derzeit nicht verwenden oder nicht planen, in den kommenden Monaten umzusteigen.

Wie in den Vorher-Nachher-Diagrammen hier dargestellt, wurde der Nach Data Lake exportieren-Dienst (1) sowie die Staging-Datenspeicher (2) mit Azure Synapse Link eingestellt. Für das Daten-Staging verwendete Datenspeicher, wie z. B. zwischengeschaltete Azure SQL-Datenbanken, werden außer Dienst gestellt, da Dataverse-Daten im Delta- oder Parquet-Format gespeichert werden – einem leistungsfähigeren und stärker komprimierten Datenformat. Nachgelagerte Pipelines, die zur Datenzusammenführung, -transformation und -aggregation (3) verwendet werden, sowie Präsentationstools (4) wie Power BI bleiben unverändert.

Vor und nach dem Upgrade auf Azure Synapse Link

Azure Synapse Link bietet einen einfachen Upgrade-Pfad für Kunden, die ihre bestehenden Investitionen mit minimalen Änderungen erweitern möchten. Wie hier besprochen, ermöglichen Innovationen in Dataverse eine einfache Umstellung von Finanz- und Betriebs-App-Diensten wie „Nach Data Lake exportieren“ und BYOD.

  1. Azure Synapse Link ermöglicht die einfache Konfiguration von Azure-Speicher und Synapse-Diensten innerhalb der Power Apps (make.powerapps.com). Mehrere Einschränkungen von „Nach Data Lake exportieren“ wurden entfernt:

    1. Eine einheitliche Erfahrung ermöglicht die Auswahl von Daten aus allen Dynamics 365-Apps, einschließlich aus Finanz- und Betriebs- sowie Kundenbindungs-Apps. Sie können einen einzelnen Dienst verwalten, um Daten aus allen Dynamics 365- und Power Apps-Versionen zu exportieren.
    2. Bei „Nach Data Lake exportieren“ vorhandene Tabellenbeschränkungen entfallen. Sie können bis zu 1.000 Tabellen für jedes Azure Synapse Linkprofil innerhalb eines einzelnen Speicherkontos auswählen. Sie können mehrere Profile (Exportpipelines) mit jeweils bis zu 1.000 Tabellen erstellen.
    3. Azure Synapse Link bietet integrierte Unterstützung für die Verwendung von durch die Firewall eingeschränkten Speicherkonten zum Exportieren von Daten.
    4. Azure-Ressourcen müssen nicht konfiguriert werden. Azure Synapse Link stellt Azure-Ressourcen in Ihrem Namen bereit und konfiguriert diese.
    5. Azure Synapse Link exportiert Daten im gleichen Format wie Nach Data Lake exportieren oder BYOD, sodass Sie vorhandene Pipelines beibehalten können.
  2. Sowohl „Nach Data Lake exportieren“ als auch der Datenexportdienst exportieren Daten im CSV-Format. CSV-Dateien sind aufgrund einer schlechter Abfrageleistung sowie gelegentlicher Lese-/Schreibkonflikte nicht für die direkte Verwendung geeignet. Vor der Umstellung wird Azure Data Factory verwendet, um regelmäßig Rohdaten zu erfassen und in eine SQL Azure-Datenbank oder ein Azure Data Warehouse zu konvertieren. Diese Ebene wird Nach dem Übergang nicht benötigt, da Azure Synapse Link Daten in Delta oder Parquet exportiert, wodurch die Notwendigkeit entfällt, zusätzliche Datenspeicher für die Zwischenspeicherung zu verwalten und die Abfrageleistung zu verbessern und gleichzeitig Lese-/Schreibkonflikte zu vermeiden.

  3. Verwenden Sie weiterhin Ihre vorhandenen Datenpipelines zum Kombinieren, Neustrukturieren und Aggregieren zusätzlicher Daten aus anderen Systemen.

  4. Nutzen Sie den Power BI-Dienst weiterhin für die Berichterstellung. Fabric führt Direct Lake-Modus-Berichte ein, welche die im Delta oder Parquet-Format integrierten speicherinternen Indizes nutzen, sodass Sie keine Power BI-Importmodusberichte mehr verwenden müssen.

Diese Innovationen führen neben den bereits besprochenen Vorteilen zu durchgängigen Kosteneinsparungen. In den Tabellen hier finden Sie die einzelnen Kostenpositionen sowie einen Vergleich der Vorher- und Nachherlösung. Verwenden Sie diese Tabelle als Richtschnur zur Schätzung der zu erwartenden Kosteneinsparungen.

Einzelposition Kosteneinsparung Kosten vorher – nach Data Lake exportieren Nach Kosten - Azure Synapse Link
Einrichten und Konfiguration Mehrere Tools müssen verwendet werden.
– Für mehrere Softwarelizenzen und Abonnements bezahlen.
– Aufwand für die Systemkonfiguration.
– Aufwand zum Erstellen und Validieren von Datenpipelines.
– Kontinuierliche Governance, Verwaltung und Überwachung.
– Schulung der Benutzenden.
Einfachere Konfiguration in Power Platform.
Keine ETL-Pipelines für Dataverse-Daten erforderlich.
Daten-Staging (1, 2) Für Azure-Dienste fallen Kosten an.
– Kosten für Azure Storage einschließlich E/A-Kosten.
– Synapse Analytics (serverlose SQL-Abfrage).
– Azure Data Factory-Aufträge für das Kopieren von Daten.
– Staging-Datenspeicher, wie etwa Azure SQL-Datenbank.
Azure Synapse Link erfordert, dass Sie einen Spark-Pool bereitstellen, um Daten in das Parquet-Format zu konvertieren.

Die Daten für den Spark-Pool können je nach der Häufigkeit der Datensynchronisierung und dem Volumen der Datenänderungen variieren.

Kleine bis mittlere Datenänderungen (pro Monat):
- 600 bis 2.000 $ für stündliche Aktualisierung.
- 1.200 bis 4.100 $ für viertelstündliche Aktualisierung.

Mittlere bis große Datenänderungen (pro Monat):
- 1.200 bis 2.500 $ für stündliche Aktualisierung.
- 2.500 bis 8.300 $ für viertelstündliche Aktualisierung.
Betriebskosten – Datenaufbereitung (3) – Azure Storage-Staging-Bereich.
– Datenpipelines.
– Datenerfassung in Azure SQL Database oder Data Warehouse.
– Entwicklungs- und Wartungsdaten.
Dieselben Kosten wie oben angegeben, Sie müssen jedoch aufgrund der Parquet-Konvertierung möglicherweise keine Dataverse-Daten aggregieren.
Betriebskosten – Berichterstellung (4):
– Power BI-Datasets.
– Berichterstellung.
Synapse Analytics (SQL-Abfrage).
Power BI-Kapazität.
Da Ihre Daten komprimiert werden (beispielsweise 1/3 bis 1/6 der Originalgröße), verringern sich Ihre Berichts- und Abfragekosten entsprechend.

Wichtig

Diese Schätzungen werden bereitgestellt, damit die Ausgaben nach der Umstellung geschätzt werden können. Diese Schätzungen basieren zwar auf den Erfahrungen von Kundschaft mit der Vorschauversion, die tatsächlichen Kosten in Ihrer Umgebung sowie die Datenkomprimierung können jedoch je nach Volumen und Zusammensetzung der Daten variieren.

Beispiel 3: Inkrementelles Erfassen von Daten in ein Data Warehouse

Wenn Sie derzeit inkrementelle Daten aus dem Feature „Nach Data Lake exportieren“ verwenden, um eine nachgelagerte Datenpipeline zu befüllen, können Sie dieselbe Pipeline weiterhin verwenden. Wie hier gezeigt,kann der Azure Synapse Link-Dienst inkrementelle Datenänderungen im gleichen Format exportieren wie der Änderungsfeed Nach Data Lake exportieren.

Vor und nach dem inkrementellen Datenexport nach Azure Synapse Link

Der Azure Synapse Link-Dienst bietet mehrere Verbesserungen gegenüber dem Nach Data Lake exportieren für inkrementelle Datenänderungen:

  • Das anfängliche Laden der Daten ist in Änderungsordnern enthalten. Dadurch kann dieselbe Pipeline problemlos sowohl die anfängliche Ladung als auch inkrementelle Aktualisierungen verarbeiten.
  • Bei einer Neuinitialisierung einer Tabelle werden die Änderungsdaten nicht gelöscht.
  • Das System erstellt eine mit Zeitstempel versehene Ordnerstruktur und Metadaten, die Ihnen helfen, die Änderungen in chronologischer Reihenfolge zu lesen. Einmal geschriebene Änderungsdaten werden nie aktualisiert. Dieser Ansatz eignet sich besser für die Verarbeitung von Änderungen mithilfe von Tools zur Big-Data-Erfassung wie Azure Data Factory.
  • Sie können konfigurieren, wie oft die Änderungsfeeds in Ordnern mit Azure Synapse Link aktualisiert werden sollen, bis zu einer Frequenz von fünf Minuten.

Wenn Sie zu Fabric oder Azure Synapse Link wechseln, sind die Kostenänderungen für inkrementelle Datenänderungen minimal.

Die Vorteile verstehen – mehr Echtzeit-Berichterstellung

Fabric vereinfacht nicht nur Ihre Datenintegrationsarchitektur, sondern reduziert auch die Notwendigkeit, Daten zu kopieren oder zu replizieren. Das zugrunde liegende Datenformat in Fabric, die Industriestandardformate Delta oder Parquet, kann direkt von Power BI, Dataflows, Notebooks und anderen Workloads genutzt werden, sodass keine Bereiche für Zwischenspeicherung und Staging mehr benötigt werden.

Wenn Sie ein Upgrade auf Azure Synapse Link durchführen und weiterhin Daten exportieren, werden Ihre Daten im Delta- oder Parquet-Format gespeichert, wodurch die Schritte in Ihren eigenen Datenpipelines für die betriebliche Berichterstellung reduziert werden können.

Bedenken Sie, wie lange Sie zum Aktualisieren eines Betriebsberichts benötigen, beispielsweise einer Bestandsanalyse oder einer Finanzanalyse zum Monatsende. Diese Berichte erfordern möglicherweise die Datenaggregation von Millionen von Datenzeilen aus mehreren Tabellen in Dynamics 365 Finance. Mit dem Dienst „Nach Data Lake exportieren“ werden CSV-Daten innerhalb von 10 Minuten exportiert. Diese Daten müssen möglicherweise in einen Power BI-Bericht importiert werden, um bessere Antwortzeiten zu erreichen. Die Power BI-Aktualisierung kann bis zu 24 Mal am Tag (alle 30 Minuten) durchgeführt werden. Je nach Gestaltung des Berichts kann die Aktualisierung mehrere Minuten dauern. Mit diesem Ansatz können Benutzende Daten innerhalb von 60 Minuten nach einer Aktualisierung sehen.

Veralten von Daten mit „Nach Data Lake exportieren“

Betriebsberichte, deren Daten über Fabric Link bezogen werden, können den Direct Lake-Modus oder den DirectQuery-Modus in Fabric nutzen, der wiederum den in Delta- oder Parquet-Dateien integrierten speicherinternen Index nutzt. In diesen Modi müssen Sie keine Aktualisierung von Power BI-Berichten planen, da der Bericht immer die neuesten Dataverse-Daten in Fabric aktualisiert.

Veralten von Daten nach Fabric-Link

Der Fabric-Verknüpfungsdienst aktualisiert die Daten in Dataverse OneLake innerhalb einer Stunde ab diesem Zeitpunkt. Dataverse löst alle 15 Minuten Datenaktualisierungsaufträge aus und je nach Umfang der Datenänderungen werden Ihnen möglicherweise innerhalb von 15 bis 45 Minuten aktualisierte Parquet-Dateien angezeigt.

Wenn Sie inkrementelle Datenfeeds von Dynamics 365 mit dem Dienst „Nach Data Lake exportieren“ für Datenerfassungsszenarien in Quasi-Echtzeit verwenden (Beispiel 3), Mit dem Upgrade auf Azure Synapse Link können Sie dieselben Datenpipelines ausführen.

Einschränkungen und Veränderungen am Verhalten

Möglicherweise wurden einige Änderungen an den Tabellenformaten vorgenommen, um Konflikte zu vermeiden. Weitere Informationen: Bekannte Einschränkungen.

Stellen Sie außerdem sicher, dass Sie über die neuesten Updates verfügen, mit denen einige der bekannten Probleme behoben werden. Um mehr über die bevorstehende Roadmap zu erfahren und mit dem Produktteam in Kontakt zu bleiben, treten Sie der Viva Engage-Vorschaugruppe. bei.

Häufig gestellte Fragen

Noch Fragen? Sehen Sie in den hier veröffentlichten häufig gestellten Fragen nach. Sie können auch an wöchentlichen Sprechstunden teilnehmen, mit dem Produktteam und dem Kundenforum in Kontakt bleiben, indem Sie der Viva Engage-Gruppe beitreten.

Siehe auch

Was ist Azure Synapse Link für Dataverse?

Verknüpfen Sie Ihre Dataverse-Umgebung mit Microsoft Fabric und gewinnen Sie tiefe Einblicke