แชร์ผ่าน

ย้ายจาก Azure Synapse Spark ไปยัง Fabric

  • บทความ

ก่อนที่คุณจะเริ่มการโยกย้ายของคุณ คุณควรตรวจสอบว่า Fabric วิศวกรข้อมูล ing เป็นโซลูชันที่ดีที่สุดสําหรับปริมาณงานของคุณ การวิศวกรข้อมูลผ้ารองรับ lakehouse, notebook, environment, Spark job definition (SJD) และรายการไปป์ไลน์ข้อมูล รวมถึงรันไทม์ที่ต่างกันและการสนับสนุนความสามารถของ Spark

ข้อควรพิจารณาหลัก

ขั้นตอนแรกในการสร้างกลยุทธ์การโยกย้ายข้อมูลคือการประเมินความเหมาะสม เป็นที่น่าสังเกตว่าคุณลักษณะบางอย่างของ Fabric ที่เกี่ยวข้องกับ Spark กําลังอยู่ในระหว่างการพัฒนาหรือการวางแผน สําหรับรายละเอียดเพิ่มเติมและการอัปเดต โปรดไปที่ แผนการทํางาน Fabric

สําหรับ Spark ดูความแตกต่างในการเปรียบเทียบโดยละเอียดระหว่าง Azure Synapse Spark และ Fabric

สถานการณ์การโยกย้าย

หากคุณพิจารณาว่า Fabric วิศวกรข้อมูล ing เป็นตัวเลือกที่เหมาะสมสําหรับการโยกย้ายปริมาณงาน Spark ที่มีอยู่ของคุณ กระบวนการโยกย้ายสามารถเกี่ยวข้องกับสถานการณ์และขั้นตอนต่าง ๆ ได้หลายขั้นตอน:

  • รายการ: การโยกย้ายรายการเกี่ยวข้องกับการถ่ายโอนหนึ่งหรือหลายรายการจากพื้นที่ทํางาน Azure Synapse ที่มีอยู่ของคุณไปยัง Fabric เรียนรู้เพิ่มเติมเกี่ยวกับการโยกย้ายพูล Spark การกําหนดค่า Spark, ไลบรารี Spark, สมุดบันทึก และ ข้อกําหนดงาน Spark
  • ข้อมูลและไปป์ไลน์: การใช้ ทางลัด OneLake คุณสามารถทําข้อมูล ADLS Gen2 (เชื่อมโยงกับพื้นที่ทํางาน Azure Synapse) ที่พร้อมใช้งานใน Fabric lakehouse การโยกย้ายไปป์ไลน์เกี่ยวข้องกับการย้ายไปป์ไลน์ข้อมูลที่มีอยู่ไปยัง Fabric รวมถึงสมุดบันทึกและกิจกรรมไปป์ไลน์ข้อกําหนดงาน Spark เรียนรู้เพิ่มเติมเกี่ยวกับ การโยกย้ายข้อมูลและไปป์ไลน์
  • เมตาดาต้า: การโยกย้ายเมตาดาต้าเกี่ยวข้องกับการย้ายเมตาดาต้าแค็ตตาล็อก Spark (ฐานข้อมูล ตาราง และพาร์ติชัน) จาก Hive MetaStore (HMS) ที่มีอยู่แล้วใน Azure Synapse ไปยัง Fabric lakehouse เรียนรู้เพิ่มเติมเกี่ยวกับ การโยกย้ายเมตาดาต้าของ HMS
  • พื้นที่ทํางาน: ผู้ใช้สามารถโยกย้ายพื้นที่ทํางาน Azure Synapse ที่มีอยู่แล้วโดยการสร้างพื้นที่ทํางานใหม่ใน Microsoft Fabric รวมถึงเมตาดาต้า การโยกย้ายพื้นที่ทํางานไม่ได้ครอบคลุมในคําแนะนํานี้ สมมติฐานว่าผู้ใช้จําเป็นต้อง สร้างพื้นที่ทํางาน ใหม่หรือมีพื้นที่ทํางาน Fabric ที่มีอยู่ เรียนรู้เพิ่มเติมเกี่ยวกับ บทบาท พื้นที่ทํางานใน Fabric

สกรีนช็อตที่แสดงสถานการณ์การโยกย้าย

การเปลี่ยนจาก Azure Synapse Spark เป็น Fabric Spark ต้องมีความเข้าใจอย่างลึกซึ้งเกี่ยวกับสถาปัตยกรรมปัจจุบันของคุณและความแตกต่างระหว่าง Azure Synapse Spark และ Fabric ขั้นตอนสําคัญอันดับแรกคือการประเมินตามด้วยการสร้างแผนการย้ายที่มีรายละเอียด แผนนี้สามารถกําหนดเองเพื่อให้ตรงกับลักษณะเฉพาะของระบบ ของคุณ การขึ้นต่อกันของระยะ และความซับซ้อนของปริมาณงาน

เนื้อหาที่เกี่ยวข้อง