你当前正在访问 Microsoft Azure Global Edition 技术文档网站。 如果需要访问由世纪互联运营的 Microsoft Azure 中国技术文档网站，请访问 https://docs.azure.cn。

使用 Azure 数据工厂将数据加载到 Azure Data Lake Storage Gen2 中

适用于： Azure 数据工厂 Azure Synapse Analytics

提示

试用 Microsoft Fabric 中的数据工厂，这是一种适用于企业的一站式分析解决方案。 Microsoft Fabric 涵盖从数据移动到数据科学、实时分析、商业智能和报告的所有内容。 了解如何免费开始新的试用！

Azure Data Lake Storage Gen2 是一组专用于大数据分析的功能，内置于 Azure Blob 存储中。 它可使用文件系统和对象存储范例与数据进行交互。

Azure 数据工厂 (ADF) 是一个完全托管的基于云的数据集成服务。 通过该服务，可使用丰富的本地数据存储和基于云的数据存储中的数据填充数据湖，并更快速地生成分析解决方案。 若要查看受支持的连接器的详细列表，请参阅支持的数据存储表。

Azure 数据工厂提供可横向扩展的托管数据移动解决方案。 得益于 ADF 的横向扩展体系结构，它能以较高的吞吐量引入数据。 有关详细信息，请参阅复制活动性能。

本文介绍如何使用数据工厂复制数据工具将数据从 Amazon Web Services S3 服务加载至 Azure Data Lake Storage Gen2 。 可以遵循类似步骤，从其他类型的数据存储中复制数据。

提示

要将 Azure Data Lake Storage Gen1 中的数据复制到 Gen2，请参阅此特定演练。

先决条件

• Azure 订阅：如果没有 Azure 订阅，请在开始之前创建一个免费帐户。
• 启用了 Data Lake Storage Gen2 的 Azure 存储帐户：如果没有存储帐户，请创建一个帐户。
• AWS 帐户与一个包含数据的 S3 存储桶：本文介绍如何从 Amazon S3 复制数据。 可以按类似步骤使用其他数据存储。

创建数据工厂

1. 如果尚未创建数据工厂，请按照快速入门：使用 Azure 门户和 Azure 数据工厂工作室创建数据工厂中的步骤进行创建。 创建后，浏览到 Azure 门户中的数据工厂。

   

2. 在“打开 Azure 数据工厂工作室”磁贴上选择“打开”，以便在单独选项卡中启动“数据集成应用程序”。

将数据加载到 Azure Data Lake Storage Gen2 中

1. 在 Azure 数据工厂的主页中，选择“引入”磁贴来启动“复制数据”工具。

2. 在“属性”页中，在“任务类型”下选择“内置复制任务”，在“任务节奏或任务计划”下选择“现在运行一次”，然后选择“下一页”。

   

3. 在“源数据存储”页上，完成以下步骤：

   1. 选择“+ 新建连接”。 从连接器库中选择“Amazon S3”，然后选择“继续” 。

      

   2. 在“新建连接 (Amazon S3)”页中，执行以下步骤：

      1. 指定“访问密钥 ID”值。
      2. 指定“机密访问密钥”值。
      3. 选择“测试连接”以验证设置，然后选择“创建” 。

      

   3. 在“源数据存储”页上，确保新创建的 Amazon S3 连接在“连接”块中处于选中状态。

   4. 在“文件或文件夹”部分中，浏览到要复制的文件夹和文件。 选中文件夹/文件，然后选择“确定”。

   5. 通过选中“以递归方式”和“以二进制方式复制”选项，指定复制行为 。 选择“下一步”。

   

4. 在“目标数据存储”页上，完成以下步骤。

   1. 选择“+ 新建连接”，然后选择“Azure Data Lake Storage Gen2”，再选择“继续” 。

      

   2. 在“新建连接 (Azure Data Lake Storage Gen2)”页上，从“存储帐户名称”下拉列表中选择你的支持 Data Lake Storage Gen2 的帐户，然后选择“创建”以创建连接。

      

   3. 在“目标数据存储”上的“连接”块中选择新创建的连接 。 然后在“文件夹路径”下，输入“copyfroms3”作为输出文件夹名称，然后选择“下一步”。 ADF 将在复制过程中创建相应的 ADLS Gen2 文件系统和子文件夹（如果不存在）。

      

5. 在“设置”页中，为“任务名称”字段指定“CopyFromAmazonS3ToADLS”，然后选择“下一步”，以使用默认设置。

   

6. 在“摘要”页中检查设置，然后选择“下一步”。

   

7. 在“部署”页中，选择“监视”可以监视管道（任务） 。

8. 管道运行成功完成后，你会看到由手动触发器触发的管道运行。 可以使用“管道名称”列下的链接来查看活动详细信息以及重新运行该管道。

   

9. 若要查看与管道运行关联的活动运行，请选择“管道名称”列下的“CopyFromAmazonS3ToADLS”链接。 有关复制操作的详细信息，请选择“活动名称”列下的“详细信息”链接（眼镜图标） 。 可以监视详细信息，例如，从源复制到接收器的数据量、数据吞吐量、执行步骤以及相应的持续时间和使用的配置。

   

   

10. 若要刷新视图，请选择“刷新”。 选择顶部的“所有管道运行”，回到“管道运行”视图。

11. 验证数据是否已复制到 Data Lake Storage Gen2 帐户。

相关内容

• 复制活动概述
• Azure Data Lake Storage Gen2 连接器