Azure Data Factory で複数のフォルダーをコピーする

[アーティクル]
08/10/2023

適用対象: Azure Data Factory Azure Synapse Analytics

ヒント

企業向けのオールインワン分析ソリューション、Microsoft Fabric の Data Factory をお試しください。 Microsoft Fabric は、データ移動からデータサイエンス、リアルタイム分析、ビジネスインテリジェンス、レポートまで、あらゆるものをカバーしています。無料で新しい試用版を開始する方法について説明します。

この記事では、複数のコピーアクティビティを使用して、ファイルベースのストア間でコンテナーまたはフォルダーをコピーするソリューションテンプレートについて説明します。ここでは、各コピーアクティビティが 1 つのコンテナーまたはフォルダーをコピーすることが想定されています。

Note

1 つのコンテナーからファイルをコピーする場合は、データのコピーツールを使用して、単一のコピーアクティビティを含んだパイプラインを作成する方が効率的です。この記事に示すテンプレートは、そのシンプルなシナリオで必要とするものより大きくなっています。

このソリューションテンプレートについて

このテンプレートは、ソースストレージストア上の指定された親フォルダーからフォルダーを列挙します。次に、各フォルダーをコピー先のストアにコピーします。

このテンプレートには、3 つのアクティビティが含まれています。

GetMetadata はソースストレージストアをスキャンし、指定された親フォルダーからサブフォルダーの一覧を取得します。
ForEach は、GetMetadata アクティビティからサブフォルダーの一覧を取得し、その一覧を反復処理して、各フォルダーを Copy アクティビティに渡します。
Copy は、各フォルダーをソースストレージストアからコピー先ストアにコピーします。

このテンプレートでは、次のパラメーターを定義します。

SourceFileFolder は、データソースストア SourceFileFolder/SourceFileDirectory の親フォルダーパスの一部で、ここでサブフォルダーの一覧を取得できます。
SourceFileDirectory は、データソースストア SourceFileFolder/SourceFileDirectory の親フォルダーパスの一部で、ここでサブフォルダーの一覧を取得できます。
DestinationFileFolder は、親フォルダーパス DestinationFileFolder/DestinationFileDirectory の一部で、宛先ストアにファイルがコピーされる場所です。
DestinationFileDirectory は、親フォルダーパス DestinationFileFolder/DestinationFileDirectory の一部で、宛先ストアにファイルがコピーされる場所です。

ルートフォルダーにある複数のコンテナーをストレージストア間でコピーする場合は、4 つのすべてのパラメーターを / として入力できます。これにより、ストレージストア間ですべてがレプリケートされます。

このソリューションテンプレートの使用方法

Copy multiple files containers between File Stores テンプレートに移動します。ソースストレージストアへの [新規] 接続を作成します。ソースストレージストアは、複数のコンテナーからファイルをコピーする場所 (コピー元) です。
コピー先ストレージストアへの [新規] 接続を作成します。
このテンプレートを使用する を選択します。
次の例に示すように、パイプラインが表示されます。
[デバッグ] を選択し、 [パラメーター] で入力し、 [完了] を選択します。
結果を確認します。