Freigeben über

Datenübertragung für große Datasets mit mittlerer bis hoher Netzwerkbandbreite

Dieser Artikel enthält eine Übersicht über die Datenübertragungslösungen, wenn Sie in Ihrer Umgebung über eine moderate bis hohe Netzwerkbandbreite verfügen und planen, große Datasets zu übertragen. Der Artikel beschreibt auch die empfohlenen Datenübertragungsoptionen und die entsprechende Schlüsselfunktionsmatrix für dieses Szenario.

Um eine Übersicht über alle verfügbaren Datenübertragungsoptionen zu verstehen, wechseln Sie zu "Auswählen einer Azure-Datenübertragungslösung".

Szenariobeschreibung

Große Datensätze beziehen sich auf Datengrößen im Bereich von TB bis PB. Moderate bis hohe Netzwerkbandbreite bezieht sich auf 100 MBit/s auf 10 GBit/s.

Die in diesem Szenario empfohlenen Optionen hängen davon ab, ob Sie eine mittlere Netzwerkbandbreite oder eine hohe Netzwerkbandbreite nutzen.

Mittlere Netzwerkbandbreite (100 MBit/s bis 1 GBit/s)

Mit moderater Netzwerkbandbreite müssen Sie die Zeit für die Datenübertragung über das Netzwerk projizieren.

Verwenden Sie die folgende Tabelle, um die Zeit zu schätzen und auf dieser Grundlage zwischen einer Offlineübertragung oder über die Netzwerkübertragung zu wählen. Die Tabelle zeigt die voraussichtliche Zeit für die Übertragung von Daten über das Netzwerk für verschiedene verfügbare Netzwerkbandbreiten (bei einer Auslastung von 90 %).

Netzwerkübertragung oder Offlineübertragung

  • Wenn die Netzwerkübertragung zu langsam ist, sollten Sie ein physisches Gerät verwenden. Die empfohlenen Optionen in diesem Fall sind die Offlineübertragungsgeräte aus der Azure Data Box-Familie oder Azure Import/Export mit Ihren eigenen Datenträgern.

    • Azure Data Box-Familie für Offlineübertragungen – Verwenden Sie Geräte von von Microsoft bereitgestellten Data Box-Geräten, um große Datenmengen nach Azure zu verschieben, wenn Sie nach Zeit, Netzwerkverfügbarkeit oder Kosten begrenzt sind. Kopieren Sie lokale Daten mithilfe von Tools wie Robocopy. Abhängig von der für die Übertragung vorgesehenen Datengröße können Sie zwischen Data Box Disk, Data Box oder Data Box Heavy wählen.
    • Azure Import/Export – Verwenden Sie den Azure-Import-/Exportdienst, indem Sie Ihre eigenen Datenträgerlaufwerke versenden, um große Datenmengen sicher in Azure Blob Storage und Azure Files zu importieren. Sie können diesen Dienst auch zum Übertragen von Daten aus Azure Blob Storage auf Festplattenlaufwerke und zum Versand an lokale Standorte nutzen.

  • Wenn die Netzwerkübertragung angemessen projiziert wird, können Sie eines der folgenden Tools verwenden, die in hoher Netzwerkbandbreite beschrieben sind.

Hohe Netzwerkbandbreite (1 GBit/s bis 100 GBit/s)

Wenn die verfügbare Netzwerkbandbreite hoch ist, verwenden Sie eines der folgenden Tools.

  • AzCopy – Verwenden Sie dieses Befehlszeilentool, um Daten einfach in Azure Blobs, Dateien und Tabellenspeicher mit optimaler Leistung zu kopieren. AzCopy unterstützt die gleichzeitige Ausführung und Parallelverarbeitung sowie die Möglichkeit, unterbrochene Kopiervorgänge fortzusetzen.
  • Azure Storage-REST-APIs/SDKs – Beim Erstellen einer Anwendung können Sie die Anwendung mit Azure Storage-REST-APIs entwickeln und die in mehreren Sprachen angebotenen Azure-SDKs verwenden.
  • Azure Data Box-Familie für Onlineübertragungen – Azure Stack Edge und Data Box Gateway sind Onlinenetzwerkgeräte, die Daten in Azure verschieben können. Verwenden Sie physisches Azure Stack Edge-Gerät, wenn vor dem Hochladen gleichzeitig eine kontinuierliche Aufnahme und Vorverarbeitung der Daten erforderlich ist. Data Box Gateway ist eine virtuelle Version des Geräts mit den gleichen Datenübertragungsfunktionen. In jedem Fall wird die Datenübertragung vom Gerät verwaltet.
  • Azure Data Factory – Data Factory sollte verwendet werden, um einen Übertragungsvorgang zu skalieren und wenn Orchestrierung sowie Überwachungsfunktionen in Unternehmensqualität erforderlich sind. Verwenden Sie Data Factory, um regelmäßig Dateien zwischen mehreren Azure-Diensten, lokal oder in einer Kombination aus beidem zu übertragen. Mit Data Factory können Sie datengesteuerte Workflows (sogenannte Pipelines) erstellen und planen, die Daten aus unterschiedlichen Datenspeichern erfassen und die Datenbewegung und Datentransformation automatisieren.

Vergleich der wichtigsten Funktionen

In den folgenden Tabellen sind die Unterschiede in den wichtigsten Funktionen für die empfohlenen Optionen zusammengefasst.

Moderate Netzwerkbandbreite

Wenn Sie die Offlinedatenübertragung verwenden, verwenden Sie die folgende Tabelle, um die Unterschiede in den wichtigsten Funktionen zu verstehen.

Data Box Festplatte Datenbox Datenfeld schwer Importieren/Exportieren
Datengröße Bis zu 35 TBs Bis zu 80 TBs pro Gerät Bis zu 800 TB pro Gerät Variable
Datentyp Azure-Blobs
Azure Files*		 Azure-Blobs
Azure Files		 Azure-Blobs
Azure Files		 Azure-Blobs
Azure Files
Gerätegrößen 5 SSDs pro Bestellung 1 x 22,7 kg Gerät in Desktopgröße pro Auftrag 1 x ca. 226,8 kg großes Gerät pro Bestellung Bis zu 10 HDDs/SSDs pro Bestellung
Anfängliche Einrichtungszeit Niedrig
(15 Minuten)		 Niedrig bis mittel
(<30 Minuten)		 Mäßig
(1-2 Stunden)		 Mäßig bis schwierig
(variabel)
Senden von Daten an Azure Ja Ja Ja Ja
Exportieren von Daten aus Azure Nein Nein Nein Ja
Verschlüsselung AES 128-Bit AES 256-Bit AES 256-Bit AES 128-Bit
Hardware Von Microsoft bereitgestellt. Von Microsoft bereitgestellt. Von Microsoft bereitgestellt. Vom Kunden bereitgestellt
Netzwerkschnittstelle USB 3.1/SATA RJ 45, SFP+ RJ45, QSFP+ SATA II/SATA III
Partnerintegration Einige Hoch Hoch Einige
Versand Von Microsoft verwaltet Von Microsoft verwaltet Von Microsoft verwaltet Vom Kunden verwaltet
Verwenden, wenn Daten verschoben werden Innerhalb einer Handelsgrenze Innerhalb einer Handelsgrenze Innerhalb einer Handelsgrenze Über geografische Grenzen hinweg, z. B. USA zu EU
Preise Preise Preise Preise Preise

* Data Box Disk unterstützt keine großen Dateifreigaben und behält keine Dateimetadaten bei

Wenn Sie online Datenübertragungen verwenden, verwenden Sie die Tabelle im folgenden Abschnitt für hohe Netzwerkbandbreite.

Hohe Netzwerkbandbreite

Werkzeuge AzCopy,
Azure PowerShell,
Azure-Befehlszeilenschnittstelle (Azure CLI)		 Azure Storage-REST-APIs, SDKs Data Box Gateway oder Azure Stack Edge Azure Data Factory
Datentyp Azure-Blobs, Azure Files, Azure Tables Azure-Blobs, Azure Files, Azure Tables Azure-Blobs, Azure Files Unterstützt mehr als 70 Datenverbindungen für Datenspeicherungen und Datenformate
Gerätegrößen Befehlszeilentools Programmgesteuerte Schnittstelle Microsoft stellt ein virtuelles
oder physisches Gerät bereit		 Dienst im Azure-Portal
Erstmaliges einmaliges Setup Einfach Mäßig Einfach (<30 Minuten) bis moderat (1-2 Stunden) Umfangreich
Datenvorbearbeitung Nein Nein Ja (mit Edge-Compute) Ja
Übertragung von anderen Clouds Nein Nein Nein Ja
Benutzertyp IT-Experte oder -Entwickler Entwicklung IT-Experte IT-Experte
Preise Kostenlos, Gebühren für Datenerfassung fallen an Kostenlos, Gebühren für Datenerfassung fallen an Azure Stack Edge-Preise
Preise für Data Box Gateway		 Preise

Nächste Schritte