الأسئلة المتداولة حول أداة استخدام الكمبيوتر

توفر هذه الأسئلة الشائعة (FAQ) رؤى حول القدرات والاستخدام والقيود والضمانات التي يجب أن تكون على دراية بها عند إضافة أداة استخدام الكمبيوتر إلى عوامل Copilot Studio الخاص بك.

ما هي أداة استخدام الكمبيوتر؟

استخدام الكمبيوتر هو أداة يمكنك إضافتها إلى عوامل Copilot Studio الخاص بك مصممة لأتمتة المهام على المواقع والتطبيقات. تقوم بتوفير أوصاف المهام باللغة الطبيعية، وتقوم الأداة بأتمتة نقرات الفأرة وضغطات لوحة المفاتيح بناءً عليها. على سبيل المثال، يمكنك أن تطلب مِنْ الأداة فتح ملف PDF واستخدام محتواه لتعبئة نموذج على الإنترنت. تحلل الأداة الشاشة بصريًا وتنفذ النقرات والضغطات اللازمة على لوحة المفاتيح، بشكل يحاكي تفاعل الإنسان.

تحذير

يعد استخدام الكمبيوتر أداة قوية تؤتمت التفاعلات عبر المواقع الإلكترونية وتطبيقات سطح المكتب، لكنه يأتي أيضًا مَعَ اعتبارات أمنية مهمة. في بعض الحالات، قد يتخذ الذكاء الاصطناعي إجراءات غير مقصودة بسبب تعليمات غامضة أو محتوى غير متوقع على الشاشة. يمكن أن تؤثر هذه الإجراءات على أمان جهازك أو بياناتك أو حساباتك المتصلة، بما فِي ذلك الوصول إلى الأنظمة الشخصية أو المالية أو المؤسسية.

ما الذي يمكن أن تفعله أداة استخدام الكمبيوتر؟

تقوم أداة استخدام الكمبيوتر بمعالجة بيانات بكسل الشاشة لفهم محتوى الشاشة، وتنفذ المهام باستخدام نقرات الفأرة الافتراضية ومدخلات لوحة المفاتيح. يمكن للأداة إدارة سير العمل متعدد الخطوات، والتعامل مَعَ السيناريوهات غير المتوقعة، والتكيف ديناميكياً مَعَ تغييرات الشاشة. كما يمكنها تنفيذ مهام رقمية متنوعة مثل التنقل بين المواقع وملء النماذج دون الحاجة إلى واجهات برمجة تطبيقات متخصصة.

تتبع أداة استخدام الكمبيوتر حلقة تكرارية تعتمد على ثلاث خطوات:

• الإدراك: يلتقط لقطات شاشة لفهم وضع الشاشة الحالي بصرياً.

• الاستدلال: يقوم بتقييم الحالة الحالية والإجراءات السابقة ولقطات الشاشة مِنْ خلال نهج التفكير المتسلسل، مما يسمح له بتكييف إجراءاته بشكل فعال.

• الإجراء: ينفذ أفعالاً مثل النقر أو الكتابة أو التمرير حتى تكتمل المهمة أو تتطلب تدخل المستخدم.

ما هي الاستخدامات المقصودة لأداة استخدام الكمبيوتر؟

تهدف أداة استخدام الكمبيوتر إلى أتمتة تفاعل المستخدم مَعَ المواقع والتطبيقات مِنْ خلال فأرة ولوحة مفاتيح افتراضية. هذا مفيد بشكل خاص فِي الحالات التي لا تتوفر فيها واجهات برمجة التطبيقات (APIs).

كيف تم تقييم أداة استخدام الكمبيوتر؟ ما هي المقاييس المستخِدْمَةٌ لقياس الأداء؟

خضعت أداة استخدام الكمبيوتر لتقييم صارم باستخدام سيناريوهات واقعية طوال مراحل التصميم والتطوير والنشر. شملت طرق التقييم البحث، ودراسات التأثير، والاختبارات عبر سيناريوهات مختلفة لقياس الدقة وثقة المستخدمين والفائدة. يتم مراقبة كل مِنْ المقاييس النوعية والكمية بانتظام للحفاظ على أداء عال وتجربة مستخدم إيجابية. كما يتم ضمان توفر الأداة مِنْ خلال الالتزام باتفاقيات مستوى الخدمة المعتمدة.

ما حدود أداة استخدام الكمبيوتر؟ كيف يمكن للمستخدمين تقليل تأثير قيود أداة استخدام الكمبيوتر عند استخدام النظام؟

استخدام الكمبيوتر هو تقنية جديدة معروفة بمخاطرها الأمنية وقيودها الوظيفية. نحن نمنحك القوة لتجربة ذلك. تتيح هذه القدرة فِي المراحل المبكرة أتمتة بعض المهام المعتمدة على الحاسوب، رغم أن أدائها يختلف بشكل كبير حسب حالة الاستخدام. لاستخدامه بفعالية ومسؤولية، افهم حدوده الحالية.

القيود المعروفة

• تختلف نسبة النجاح حسب المهمة: تؤدي الأداة أفضل أداء فِي المهام القائمة على الويب (حوالي 80٪ نجاح) لكنها تنخفض بشكل كبير على تطبيقات سطح المكتب (حوالي 35٪ نجاح).
• تفاوت الأداء: قد تؤدي نفس المهمة إلى نتائج مختلفة حسب التغيرات البصرية أو الزمنية.
• صعوبات فِي بعض عناصر واجهة المستخدم: استخدام الكمبيوتر قد يواجه صعوبة فِي التعامل مَعَ عناصر واجهة المستخدم غير القياسية أو الديناميكية: مثل القوائم المنسدلة، محددات التواريخ، أو الويدجت المخصصة.
• الحلقات والحالات العالقة: قد يدخل العامل فِي حلقة أو ينحشر عندما لا تتطابق الشاشة مَعَ التوقعات أو تتغير بشكل غير متوقع.
• الصعوبات فِي المهام المعقدة: رغم فعاليتها فِي الإجراءات البسيطة، قد تواجه الأداة صعوبة عند التعامل مَعَ واجهات رسومية مفصلة أو مهام تتضمن معالجة نصية دقيقة.
• ليست للحالات الحساسة أو عالية الخطورة: الأداة ليست مخصصة ل:
  • التوصية أو التقييم فِي مجالات حساسة مثل التوظيف، الرعاية الصحية أو المالية
  • إجراء المعاملات المالية
  • أفعال ضارة مثل الرسائل المزعجة أو المعلومات المضللة
  • مشاركة البيانات خارج مؤسستك دون تفويض مناسب

كيفية تقليل القيود

لتحسين الموثوقية، يجب عليك تقديم تعليمات واضحة ومفصلة عند تكوين المهام لتقليل الأخطاء وزيادة معدلات نجاح المهام.

ما هي ميزة الإشراف البشري؟

مهم

قد تواجه عوامل استخدام الكمبيوتر تعليمات ضارة أو خبيثة، تُعرف غالبًا باسم هجمات حقن المطالبات، حيث تحاول أوامر مخفية فِي لقطات الشاشة أو صفحات الويب أو المدخلات الأخرى التأثير على الإجراءات بطرق غير مقصودة. لتقليل هذه المخاطر، شغّل أداة استخدام الكمبيوتر فِي بيئات موثوقة ومعزولة، وطبّق عمليات تحقق قوية قبل تنفيذ أي تعليمات.

قد تواجه عمليات استخدام الكمبيوتر غموضًا أو معلومات مفقودة. على سبيل المثال، القيمة المطلوبة غير موجودة أو أن تفسيرات متعددة ممكنة. في تلك الحالات، تتيح ميزة الإشراف البشري لعامل استخدام الكمبيوتر إيقاف التنفيذ مؤقتاً وإصدار طلب توضيح إلى مراجع بشري مخول ومهيأ. يمكن للمراجعين الرد عبر البريد الإلكتروني أو ضمن Copilot Studio باستخدام خريطة نشاط تشغيل العامل. بمجرد أن يتلقى عامل استخدام الكمبيوتر رد، يستأنف تشغيله مِنْ الخطوة المعلقة على الخريطة.

الموثوقية والحدود

تشير التقييمات المستندة إلى المنتج إلى أن ميزة الإشراف البشري تعمل غالبًا كما هو متوقع، ولكنها قد تفشل أو تتصرف بطرق غير متوقعة بالنسبة للمستخدمين. نظرًا لأن طلبات التوضيح يتم تفعيلها نتيجة لسلوك النموذج الاحتمالي، فقد لا يتم تفعيلها فِي جميع الحالات التي يفضل فيها المستخدم التوقف. قد تُفعّل أيضًا عندما لا يكون التوقف ضروريًا. لا ينبغي الاعتماد على طلبات التوضيح كآلية أمان مضمونة أو كضمان بأن النظام سيطلب دائمًا تدخلًا بشريًا قبل المتابعة.

ليست آلية تطبيق القواعد المخصصة

طلبات الإشراف البشري لا تضمن فرض القواعد أو السياسات أو القيود المعرّفة مِنْ قبلك. يجب عليك تطبيق المزيد مِنْ الضوابط المناسبة لكل سيناريو ممكن (على سبيل المثال: تعليمات واضحة، بيئات مقيدة، حسابات بأقل صلاحيات ممكنة، قوائم الصلاحيات، وغيرها مِنْ الضمانات التشغيلية) بدلاً مِنْ الاعتماد على طلبات التوضيح لتوفير المعلومات أو منع الإجراءات غير المرغوب فيها.

ما العوامل التشغيلية والإعدادات التي تتيح الاستخدام الفعّال والمسؤول لأداة استخدام الكمبيوتر؟

تحقق أداة استخدام الكمبيوتر أفضل أداء إذا تم تزويدها بتعليمات واضحة ومفصلة. يجب على المستخدمين تقديم تعليمات واضحة ومحددة حول كيفية التفاعل مَعَ المواقع أو التطبيقات لتعزيز الموثوقية والدقة أثناء تنفيذ المهمة. لإضفاء مزيد مِنْ الشفافية والتحكم، قم بتمكين الإشراف البشري مِنْ خلال تعيين واحد أو أكثر مِنْ المراجعين المخولين فِي صفحة إعداد الأدوات. عندما يكتشف النموذج تعليمات قد تكون ضارة، يتلقى هؤلاء المراجعون إشعارات لمراجعتها واتخاذ قرار بشأن استمرار أو إيقاف التشغيل.

كيف يمكنني تقديم ملاحظات حول أداة استخدام الكمبيوتر؟

هل لديك ملاحظات حول أداة استخدام الكمبيوتر؟ Email computeruse-feedback@microsoft.com.