หมายเหตุ
การเข้าถึงหน้านี้ต้องได้รับการอนุญาต คุณสามารถลอง ลงชื่อเข้าใช้หรือเปลี่ยนไดเรกทอรีได้
การเข้าถึงหน้านี้ต้องได้รับการอนุญาต คุณสามารถลองเปลี่ยนไดเรกทอรีได้
แท็บ Monitor ให้ผู้สร้างเห็นภาพรวมในบริบทของสุขภาพการผลิตของเอเจนต์ ใช้เพื่อเข้าใจการใช้งาน ผลลัพธ์ ข้อเสนอแนะจากผู้ใช้ ความน่าเชื่อถือ และการใช้เครดิตของ Copilot เพื่อให้คุณสามารถระบุแนวโน้มและตัดสินใจว่าจะปรับปรุงเอเจนต์ตรงไหน
Note
ฟีเจอร์ในบทความนี้ถูกใช้โดยเอเจนต์หรือเวิร์กโฟลว์ที่ขับเคลื่อนด้วย GitHub Copilot harness
การเรียกเก็บเงินตามการใช้งานครอบคลุมถึงการใช้ การสร้าง การทดสอบ และการประเมินเอเจนต์ การดำเนินการเหล่านี้อาจใช้เครดิต Copilot เรียนรู้เพิ่มเติมได้ที่ จัดการต้นทุนสําหรับเอเจนต์ที่ขับเคลื่อนด้วย GitHub Copilot harness
Note
คุณสามารถเปิดแท็บ Monitor ก่อนเผยแพร่เอเจนต์ของคุณ ข้อมูลการใช้งานการผลิต ข้อเสนอแนะ และเครดิตจะปรากฏหลังจากที่คุณเผยแพร่เอเจนต์และผู้คนเริ่มใช้งาน
คุณสามารถตรวจสอบอะไรได้บ้าง?
Monitor ให้ภาพรวมระดับสรุปของเอเจนต์แต่ละตัว รวมถึง:
- ภาพรวม: จํานวนเซสชันทั้งหมด จํานวนผู้ใช้ จํานวนรอบอัตโนมัติ ระยะเวลาเฉลี่ย อัตราความสําเร็จ และอัตราการล้มเหลว
- ปฏิกิริยา: ข้อเสนอแนะที่ให้คะแนนบวกและปฏิเสธจากการตอบกลับของเจ้าหน้าที่
- เครดิตโดยประมาณทั้งหมดที่ใช้: เครดิตที่ตัวแทนใช้ในช่วงเวลาที่เลือก
- เซสชัน: การโต้ตอบของแต่ละบุคคล สถานที่ที่เกิดขึ้น และเครดิตที่ใช้ไป
ใช้ตัวกรองวันที่เพื่อโฟกัสที่ช่วงเวลารายงานเฉพาะ ตัวชี้วัดร้อยละเปรียบเทียบแต่ละตัวชี้วัดกับช่วงเวลาก่อนหน้า
การตรวจสอบและการทํางานของเอเจนต์
Monitor ถูกออกแบบมาสําหรับผู้ผลิตที่ต้องการเห็นภาพรวมของเอเจนต์แต่ละรายอย่างรวดเร็วขณะสร้างและปรับปรุง สําหรับการตรวจสอบ การกํากับดูแล การสืบสวนอย่างละเอียด และการเพิ่มประสิทธิภาพการดําเนินงานทั่วทั้งเอเจนต์และสภาพแวดล้อม ให้ใช้ประสบการณ์การปฏิบัติการของเอเจนต์
ภาพรวมของตัวชี้วัด
ส่วน ภาพรวม จะแสดง:
- จํานวนเซสชันทั้งหมด: จํานวนเซสชันสนทนาในช่วงเวลาที่เลือก
- จํานวนผู้ใช้ทั้งหมด: จํานวนผู้ใช้ที่มีปฏิสัมพันธ์กับเอเจนต์ในช่วงเวลาที่เลือก
- ระยะเวลาเฉลี่ย: ระยะเวลาเฉลี่ยของเซสชันและรัน
- อัตราความสําเร็จ: ว่าเอเจนต์สามารถดําเนินการเซสชันและรันได้สําเร็จเพียงใด
จํานวนเครดิตโดยประมาณที่ใช้ทั้งหมด
บัตรเครดิตจะแสดงเครดิต Copilot รวมทั้งหมดที่เจ้าหน้าที่ใช้ในช่วงเวลาที่เลือกและการเปลี่ยนแปลงจากช่วงเวลาก่อนหน้า แตกต่างจากประมาณการเกือบเรียลไทม์ที่เห็นใน Preview และ Evaluate ค่าที่แสดงใน Monitor สะท้อนเหตุการณ์ทั้งหมดที่ประมวลผลจนถึงจุดนั้น และเป็นตัวเลขสุดท้ายที่ใช้ในการเรียกเก็บเงิน
เมื่อมีการแยกย่อยข้อมูล จะแสดงการแบ่งโดยประมาณการใช้พลังงานตามประสบการณ์ รวมถึงการใช้งานในการผลิต การทดสอบตัวอย่าง การประเมินผล และพื้นผิวที่รองรับอื่น ๆ ใช้เพื่อเข้าใจว่ากิจกรรมหรือผลลัพธ์ใดที่ใช้เครดิตไป
เรียนรู้เพิ่มเติมได้ในหัวข้อ ทําความเข้าใจการใช้เครดิตโดยประมาณและภาพรวมของการเรียกเก็บเงินตามการใช้งาน
การตอบสนอง
ส่วน Reactions แสดงความคิดเห็นของผู้ใช้เกี่ยวกับการตอบสนองของตัวแทน กราฟจะนับจํานวนครั้งที่ผู้ใช้เลือกให้คะแนนยกนิ้วโป้ง (บวก) หรือกดนิ้วโป้งลง (ลบ) ในแต่ละคําตอบที่ได้รับจากตัวแทนของคุณ
ความสามารถของตัวแทน
ส่วนความสามารถช่วยให้คุณเข้าใจว่าผู้ใช้โต้ตอบกับเอเจนต์ของคุณอย่างไร และจุดที่ความน่าเชื่อถือของคําตอบสามารถปรับปรุงได้ รวมถึง:
- การใช้เครื่องมือ: เครื่องมือที่เอเจนต์เรียกใช้ระหว่างเซสชัน
การติดตามเซสชัน
รายการเซสชันจะแสดงเซสชันการสนทนาแต่ละครั้งกับตัวแทนของคุณ แต่ละเซสชันประกอบด้วย:
- สถานะ: ไม่ว่าเซสชันเสร็จสมบูรณ์ ล้มเหลว หรือกําลังดําเนินการอยู่
- ระยะเวลา: ระยะเวลาที่เซสชันดําเนินไป
- ข้อความผู้ใช้: จํานวนข้อความที่แลกเปลี่ยนกัน
- เครื่องมือที่ใช้: เครื่องมือที่เอเจนต์เรียกใช้ระหว่างเซสชัน
กรองเซสชันตามสถานะ เช่น ล้มเหลว เสร็จสิ้น หรือกําลังดําเนินการ เพื่อค้นหาเซสชันที่ต้องการความสนใจได้อย่างรวดเร็ว
เลือกเซสชันเพื่อดูบทถอดเสียงทั้งหมด รวมถึงข้อความของผู้ใช้ การตอบกลับของเอเจนต์ และรายละเอียดเกี่ยวกับการเรียกใช้เครื่องมือและการใช้แหล่งข้อมูลความรู้
การตรวจสอบข้อผิดพลาด
แท็บ Monitor ช่วยให้คุณระบุและวินิจฉัยปัญหาได้:
- กรองเซสชันตามสถานะ ล้มเหลว หรือ ถูกปฏิเสธ เพื่อค้นหาปฏิสัมพันธ์ที่มีปัญหา
- ทบทวนบันทึกการประชุมเพื่อเข้าใจว่ามีอะไรผิดพลาด
- ตรวจสอบสถานะการเชื่อมต่อเครื่องมือและข้อผิดพลาดการตรวจสอบสิทธิ์
- มองหารูปแบบในเซสชันที่ล้มเหลวซึ่งอาจบ่งชี้ถึงปัญหาการกําหนดค่า
สําหรับคําแนะนําทีละขั้นตอนในการใช้แท็บ Monitor ดูที่ Monitor an agent
ดาวน์โหลดบันทึกการประชุม
คุณสามารถดาวน์โหลดบทถอดเสียงเซสชันได้ไม่กี่นาทีหลังจากหมดเวลาเซสชันคุณสามารถดาวน์โหลดช่วงเวลาใดก็ได้ภายใน 29 วันที่ผ่านมา คุณสามารถดาวน์โหลดไฟล์เหล่านี้ใน Dataverse โดยใช้พอร์ทัล Power Apps และในรูปแบบ session chat transcripts โดยใช้แอป Copilot Studio อาจใช้เวลานานถึงหนึ่งชั่วโมงหลังจากเซสชันวิเคราะห์สิ้นสุดก่อนที่ข้อมูลที่เกี่ยวข้องจะปรากฏในแท็บ Monitor
เซสชันทบทวน
รายการเซสชันจะแสดงการโต้ตอบล่าสุดกับตัวแทนของคุณ
Note
รายการเซสชันจะแสดงเฉพาะเซสชันที่ผ่านมา 28 วันเท่านั้น
ขึ้นอยู่กับการโต้ตอบ รายการอาจแสดงได้ดังนี้:
- ชื่อ: ผู้ใช้ที่เกี่ยวข้องกับการโต้ตอบ
- วันที่: เมื่อเกิดการโต้ตอบ
- ช่องทาง: ช่องทางหรือพื้นที่การใช้งานใน Copilot Studio ที่มีการโต้ตอบเกิดขึ้น
- จํานวนข้อความ: จํานวนข้อความในการโต้ตอบ
- ระยะเวลา: ระยะเวลาของการโต้ตอบ
- เครดิตที่ใช้: เครดิต Copilot ที่ถูกใช้ไปกับการโต้ตอบ
เปิดหน้ารายละเอียดเซสชันเพื่อดูเมตริกเซสชันรวม กรองรายการ ค้นหาเซสชัน และดาวน์โหลดข้อมูลเซสชัน
สําหรับตัวเลือกการส่งออกถอดความอื่น ๆ ดูเพิ่มเติมได้ที่ ดาวน์โหลดถอดเสียงเซสชันของเอเจนต์
สําหรับคําแนะนําทีละขั้นตอน เรียนรู้เพิ่มเติมเกี่ยวกับ Monitor and analysis agent performance