共用方式為

將 Spark 組態從 Azure Synapse 遷移至 Fabric

  • 發行項

Apache Spark 提供許多可自定義的組態，以增強各種案例的體驗。 在 Azure Synapse Spark 和 Fabric 資料工程師 ing 中，您可以彈性地納入這些設定或屬性，以量身打造您的體驗。 在 Fabric 中，您可以將 Spark 組態新增至 環境 ，並直接在 Spark 作業內使用內嵌 Spark 屬性。 若要將 Azure Synapse Spark 集區組態移至 Fabric，請使用環境。

如需Spark組態考慮，請參閱 Azure Synapse Spark 與 Fabric 之間的差異。

必要條件

  • 如果您還沒有網狀架構工作區，請在租使用者中建立 Fabric 工作區 。
  • 如果您還沒有環境，請在工作區中建立 環境 。

選項 1：將 Spark 組態新增至自定義環境

在環境中，您可以設定 Spark 屬性，並將這些設定套用至選取的環境集區。

  1. 開啟 Synapse Studio：登入 Azure。 流覽至您的 Azure Synapse 工作區，然後開啟 Synapse Studio。
  2. 找出 Spark 組態：
    • 移至 [ 管理 ] 區域，然後選取 [Apache Spark 集區]。
    • 尋找 Apache Spark 集區，選取 [Apache Spark 組態 ]，然後找出集區的 Spark 組態名稱。
  3. 取得 Spark 組態：您可以從 [組態 + 連結庫>Apache Spark 組態] 選取 [檢視組態] 或匯出組態 （.txt/.conf/.json 格式）來取得這些屬性。
  4. 設定 Spark 之後，請在 Fabric 中將自訂 Spark 屬性新增至您的環境：
    • 在 [環境] 中，移至 [Spark 計算>Spark] 屬性。
    • 新增Spark組態。 您可以手動新增每個，或從.yml匯入。
  5. 按兩下 [ 儲存 併 發佈 變更]。

顯示 Spark 組態的螢幕快照。

深入瞭解如何將Spark組態新增至 環境。

相關內容