หมายเหตุ
การเข้าถึงหน้านี้ต้องได้รับการอนุญาต คุณสามารถลอง ลงชื่อเข้าใช้หรือเปลี่ยนไดเรกทอรีได้
การเข้าถึงหน้านี้ต้องได้รับการอนุญาต คุณสามารถลองเปลี่ยนไดเรกทอรีได้
Fabric data engineering agent (Project Osmos) เป็นความสามารถด้านวิศวกรรมข้อมูลอัตโนมัติสําหรับ Microsoft Fabric มันรันงานถาวรที่วางแผน ดําเนินการ และตรวจสอบงานวิศวกรรมข้อมูลกับทรัพยากร Fabric ที่คุณมีสิทธิ์เข้าถึง
จากไคลเอนต์บรรทัดคําสั่งที่รองรับ คุณป้อนผลลัพธ์ Project (คําอธิบายของงานวิศวกรรมข้อมูลครบวงจร) และเลือก Fabric lakehouse ที่โฮสต์งานนั้น Project Osmos สามารถตรวจสอบข้อมูล สร้างและทดสอบสมุดบันทึก Spark แปลงข้อมูล เขียนตาราง Delta และตรวจสอบผลลัพธ์ได้ งานจะยังคงทํางานใน Fabric หลังจากที่ไคลเอนต์ท้องถิ่นตัดการเชื่อมต่อ
Important
ตัวแทนวิศวกรรมข้อมูล (Project Osmos) อยู่ในขั้นตอนพรีวิว ฟีเจอร์ตัวอย่างจะถูกปล่อยออกมาพร้อมความสามารถจํากัดและอยู่ภายใต้ เงื่อนไขการดูตัวอย่างเพิ่มเติมแยกต่างหาก ไม่ได้ออกแบบมาเพื่อใช้งานจริง ไม่ได้อยู่ภายใต้ข้อตกลงระดับการให้บริการ และอาจมีจําหน่ายเฉพาะในบางภูมิภาคเท่านั้น สําหรับข้อมูลเพิ่มเติม ให้ดูที่ Microsoft Fabric ข้อมูลตัวอย่าง
ความสามารถหลัก
ตัวแทนวิศวกรรมข้อมูล (Project Osmos) จะดําเนินการและดําเนินงานวิศวกรรมข้อมูลในงาน Fabric ที่มีการจัดการ มันใช้ SparkCore, สถานะถาวร, การควบคุมการเข้าถึง, การติดตามความคืบหน้า และการตรวจสอบความถูกต้องกับข้อมูลเป้าหมาย ตัวแทนหลายตัวที่ประสานงานกันสร้างและประเมินตัวเลือกการใช้งานหลากหลายเพื่อส่งมอบผลลัพธ์คุณภาพการผลิต
Project Osmos เพิ่มความสามารถเฉพาะของ Fabric:
- การประมวลผลแบบโฮสต์บน Fabric: การดําเนินการโค้ดและข้อมูลทํางานกับ Fabric Spark และ OneLake แทนที่จะทํางานเฉพาะในสภาพแวดล้อมการพัฒนาท้องถิ่น
- สถานะงานถาวร: งานจะยังคงทํางานต่อหลังจากที่ไคลเอนต์ในเครื่องตัดการเชื่อมต่อ และสามารถดําเนินการต่อได้โดยไม่ต้องเริ่มใหม่
- บริบท Lakehouse: Project Osmos จะแก้ไข Fabric workspace และ Lakehouse เซสชัน Spark เริ่มต้นจาก URL ของ lakehouse ที่คุณให้ไว้
- กํากับการปฏิบัติงาน: ก่อนดําเนินการ คุณจะตรวจสอบการตั้งค่าสําหรับสิทธิ์ ความปลอดภัยในการเขียน พฤติกรรมการรันซ้ํา วิวัฒนาการสคีมา อาร์ติแฟกต์ และความพยายามในการให้เหตุผล
- การตรวจสอบความถูกต้องแบบบูรณาการ: งานสามารถรันโค้ดที่สร้างขึ้นและตรวจสอบจํานวนแถว, null, schema และเกณฑ์ความสําเร็จอื่น ๆ ในสภาพแวดล้อมเป้าหมาย
- การมองเห็นร่วมกัน:ใครก็ตามที่สามารถเข้าถึงบ้านริมทะเลสาบที่คุณเริ่มงานสามารถตรวจสอบความคืบหน้าและให้ข้อมูลได้หากต้องการ
ความสามารถเหล่านี้เปลี่ยนผลลัพธ์ของ Project ให้กลายเป็นหน่วยงานวิศวกรรมข้อมูลที่มีการจัดการ แทนที่จะเป็นการตอบกลับแชทชั่วคราว
การทํางานของเอเจนต์วิศวกรรมข้อมูล (Project Osmos)
Project Osmos ใช้วงจรชีวิตที่จัดการสําหรับแต่ละงานวิศวกรรมข้อมูล:
- กําหนด:ผลลัพธ์ของ Project ระบุงานวิศวกรรมข้อมูลครบวงจร และ URL ของ lakehouse ระบุ Fabric lakehouse ที่เป็นโฮสต์งานนั้น
- แผน: Project Osmos วิเคราะห์บริบทที่มีอยู่และแนะนําการตั้งค่าการทํางานสําหรับการตรวจสอบ
- ดําเนินการ:งานนี้ทํางานใน Fabric และสามารถสร้าง ทดสอบ และปรับปรุงอาร์ติแฟกต์ทางวิศวกรรมข้อมูลได้
- ตรวจสอบความถูกต้อง: งานจะตรวจสอบผลลัพธ์ตามเกณฑ์ความสําเร็จที่ระบุและรายงานผลลัพธ์
- ตรวจสอบ: งานยังคงใช้งานได้จากไคลเอนต์บรรทัดคําสั่งและประสบการณ์งาน lakehouse
บ้านพักทะเลสาบที่เลือกเป็นบ้านพักทะเลสาบเริ่มต้นสําหรับเซสชัน Spark มันไม่ใช่แหล่งหรือปลายทางเดียวโดยอัตโนมัติ ผลลัพธ์ของ Project, สิทธิ์ Fabric และการตั้งค่าการทํางานที่ตรวจสอบแล้วจะเป็นตัวกําหนดขอบเขตของงาน
สําหรับขั้นตอนการสร้างงานแรกของคุณ ดูที่ เริ่มต้นใช้งาน Project Osmos
เลือกกรณีการใช้งานที่เหมาะสม
Project Osmos ถูกออกแบบมาเพื่องานวิศวกรรมข้อมูลที่มุ่งเน้นผลลัพธ์ ซึ่งได้รับการวางแผน ดําเนินการ และตรวจสอบความถูกต้องโดยอัตโนมัติ
| กรณีการใช้งาน | ตัวอย่างผลลัพธ์ |
|---|---|
| การเตรียมข้อมูล | ทําความสะอาดไฟล์ขาย มาตรฐานประเภท ลบแถวที่ไม่ถูกต้อง และเขียนตาราง Delta ที่ผ่านการตรวจสอบแล้ว |
| การบูรณาการตาราง | รวมคําสั่งซื้อ ลูกค้า และข้อมูลสินค้า จากนั้นสร้างตารางที่คัดสรรสําหรับการวิเคราะห์ในขั้นตอนถัดไป |
| การปรับปรุงบ้านพักริมทะเลสาบ | แปลงการแปลงที่มีอยู่เป็น Spark ผลิตโน้ตบุ๊กที่ทดสอบแล้ว และตรวจสอบผลลัพธ์ใหม่ |
| สถาปัตยกรรมเหรียญ | สร้างการแปลงแบบบรอนซ์ เงิน และทองจากไฟล์ต้นฉบับเป็นงานเดียวที่สมบูรณ์ |
| การแก้ไขคุณภาพข้อมูล | สร้างโปรไฟล์ตาราง ระบุปัญหาคุณภาพ ใช้การแก้ไขที่ได้รับการอนุมัติ และรายงานเมตริกก่อนและหลัง |
| การปรับปรุงประสิทธิภาพ | ตรวจสอบตาราง Delta แนะนําการเปลี่ยนแปลงพาร์ติชันหรือการจัดวาง ดําเนินการเปลี่ยนแปลงที่ได้รับการอนุมัติ และวัดผลลัพธ์ |
| ความช่วยเหลือด้านการย้ายถิ่น | แปลงการดึงข้อมูลแบบเก่าให้เป็นโมเดลที่พร้อมใช้งานกับ Fabric พร้อมรักษากฎทางธุรกิจและตรวจสอบยอดรวม |
Project Osmos ถูกสร้างขึ้นเพื่อแก้ไขปัญหาด้านวิศวกรรมข้อมูล ไม่ได้ออกแบบมาเพื่อการสืบค้นอย่างรวดเร็ว การเปลี่ยนแปลงรายงาน Power BI หรืองานวิศวกรรมที่ไม่ใช่ข้อมูลอื่น ๆ
ทํางานข้าม CLI และ Fabric
Project Osmos ใช้ประสบการณ์สองแบบที่เชื่อมโยงกัน คุณสร้างและควบคุมงานจากบรรทัดคําสั่งของคุณ และดูความคืบหน้าของงานในแอปพลิเคชัน Fabric:
- ประสบการณ์ผ่านบรรทัดคําสั่ง:ใช้ GitHub Copilot CLI, Codex หรือ Claude Code เพื่อสร้างงาน ป้อนผลลัพธ์ของ Project ตรวจสอบการตั้งค่าการทํางาน และส่งคําแนะนําติดตามผล
- ประสบการณ์ Fabric lakehouse: เรียกดูงานของ lakehouse ตรวจสอบสถานะ เปิดงาน ตรวจสอบกิจกรรมและข้อผิดพลาด และตรวจสอบผลลัพธ์ที่ผลิต
ทั้งสองประสบการณ์อ้างอิงถึงงานและรหัสงานที่โฮสต์บน Fabric เดียวกัน