使用 Azure Data Factory 或 Synapse Analytics 從 Amazon Marketplace Web 服務複製資料
適用于: Azure Data Factory Azure Synapse Analytics
提示
試用 Microsoft Fabric 中的 Data Factory,這是適用于企業的單一分析解決方案。 Microsoft Fabric 涵蓋從資料移動到資料科學、即時分析、商業智慧和報告等所有專案。 瞭解如何 免費啟動新的試用版 !
本文概述如何使用 Azure Data Factory 或 Synapse Analytics 管線中的複製活動,從 Amazon Marketplace Web Service 複製資料。 它會以 複製活動概觀 一文為基礎,提供複製活動的一般概觀。
支援的功能
下列功能支援此 Amazon Marketplace Web 服務連接器:
支援的功能 | IR |
---|---|
複製活動 (source/-) | ① ② |
查閱活動 | ① ② |
(1) Azure 整合執行時間 (2) 自我裝載整合執行時間
如需支援作為來源/接收的資料存放區清單,請參閱 支援的資料存放區 資料表。
此服務提供內建驅動程式來啟用連線能力,因此您不需要使用此連接器手動安裝任何驅動程式。
開始使用
若要使用管線執行複製活動,您可以使用下列其中一個工具或 SDK:
- 複製資料工具
- Azure 入口網站
- The .NET SDK
- The Python SDK
- Azure PowerShell
- The REST API
- Azure Resource Manager 範本
使用 UI 建立 Amazon Marketplace Web Service 的連結服務
使用下列步驟,在 Azure 入口網站 UI 中建立 Amazon Marketplace Web Service 的連結服務。
流覽至 Azure Data Factory 或 Synapse 工作區中的 [管理] 索引標籤,然後選取 [連結服務],然後按一下 [新增]:
搜尋 Amazon,然後選取 Amazon Marketplace Web 服務連接器。
設定服務詳細資料、測試連線,並建立新的連結服務。
連線or 組態詳細資料
下列各節提供屬性的相關詳細資料,這些屬性是用來定義 Amazon Marketplace Web Service 連接器專屬的 Data Factory 實體。
連結的服務屬性
Amazon Marketplace Web Service 連結服務支援下列屬性:
屬性 | 描述 | 必要 |
---|---|---|
type | type 屬性必須設定為: AmazonMWS | Yes |
endpoint | AmazonMWS 伺服器的端點(也就是 mws.amazonservices.com) | Yes |
marketplaceID | 您想要從中擷取資料的 Amazon Marketplace 識別碼。 若要從多個 Marketplace 識別碼擷取資料,請以逗號 ( , ) 分隔它們。 (即A2EUQ1WTGCTBG2) |
Yes |
sellerID | Amazon 賣方識別碼。 | Yes |
mwsAuthToken | AmazonMWS 驗證權杖。 將此欄位標示為 SecureString 以安全地儲存,或 參考儲存在 Azure 金鑰保存庫 中的秘密。 | Yes |
accessKeyId | 用來存取資料的存取金鑰識別碼。 | Yes |
secretKey | 用來存取資料的秘密金鑰。 將此欄位標示為 SecureString 以安全地儲存,或 參考儲存在 Azure 金鑰保存庫 中的秘密。 | Yes |
useEncryptedEndpoints | 指定資料來源端點是否使用 HTTPS 加密。 預設值為 True。 | No |
useHostVerification | 指定在透過 TLS 連線時,是否要求伺服器憑證中的主機名稱符合伺服器的主機名稱。 預設值為 True。 | No |
usePeerVerification | 指定是否要在透過 TLS 連線時驗證服務器的身分識別。 預設值為 True。 | No |
範例:
{
"name": "AmazonMWSLinkedService",
"properties": {
"type": "AmazonMWS",
"typeProperties": {
"endpoint" : "mws.amazonservices.com",
"marketplaceID" : "A2EUQ1WTGCTBG2",
"sellerID" : "<sellerID>",
"mwsAuthToken": {
"type": "SecureString",
"value": "<mwsAuthToken>"
},
"accessKeyId" : "<accessKeyId>",
"secretKey": {
"type": "SecureString",
"value": "<secretKey>"
}
}
}
}
資料集屬性
如需可用來定義資料集的完整區段和屬性清單,請參閱 資料集 一文。 本節提供 Amazon Marketplace Web 服務資料集所支援的屬性清單。
若要從 Amazon Marketplace Web 服務複製資料,請將資料集的 type 屬性設定為 AmazonMWSObject 。 支援下列屬性:
屬性 | 描述 | 必要 |
---|---|---|
type | 資料集的類型屬性必須設定為: AmazonMWSObject | Yes |
tableName | 資料表的名稱。 | 否(如果已指定活動來源中的「查詢」) |
範例
{
"name": "AmazonMWSDataset",
"properties": {
"type": "AmazonMWSObject",
"typeProperties": {},
"schema": [],
"linkedServiceName": {
"referenceName": "<AmazonMWS linked service name>",
"type": "LinkedServiceReference"
}
}
}
複製活動屬性
如需可用來定義活動的區段和屬性的完整清單,請參閱 管線 一文。 本節提供 Amazon Marketplace Web 服務來源所支援的屬性清單。
AmazonMWS 作為來源
若要從 Amazon Marketplace Web 服務複製資料,請將複製活動中的來源類型設定為 AmazonMWSSource 。 複製活動 來源 區段中支援下列屬性:
屬性 | 描述 | 必要 |
---|---|---|
type | 複製活動來源的類型屬性必須設定為: AmazonMWSSource | Yes |
query | 使用自訂 SQL 查詢來讀取資料。 例如: "SELECT * FROM Orders where Amazon_Order_Id = 'xx'" 。 |
否(如果已指定資料集中的 「tableName」 ) |
範例:
"activities":[
{
"name": "CopyFromAmazonMWS",
"type": "Copy",
"inputs": [
{
"referenceName": "<AmazonMWS input dataset name>",
"type": "DatasetReference"
}
],
"outputs": [
{
"referenceName": "<output dataset name>",
"type": "DatasetReference"
}
],
"typeProperties": {
"source": {
"type": "AmazonMWSSource",
"query": "SELECT * FROM Orders where Amazon_Order_Id = 'xx'"
},
"sink": {
"type": "<sink type>"
}
}
}
]
查閱活動屬性
若要瞭解屬性的詳細資料,請檢查 查閱活動 。
相關內容
如需複製活動支援做為來源和接收的資料存放區清單,請參閱 支援的資料存放區 。