مشاركة عبر


فئات الضرر في Azure الذكاء الاصطناعي Content Safety

يصف هذا الدليل جميع فئات الضرر والتقييمات التي يستخدمها Azure الذكاء الاصطناعي Content Safety لوضع علامة على المحتوى. يستخدم كل من محتوى النص والصورة نفس مجموعة العلامات.

فئات الضرر

يتعرف "أمان المحتوى" على أربع فئات مميزة من المحتوى غير القابل للاعتراض.

الفئة وصف مصطلح واجهة برمجة التطبيقات
الكراهية والإنصاف تشير أضرار الكراهية والإنصاف إلى أي محتوى يهاجم أو يستخدم لغة تمييزية مع الإشارة إلى شخص أو مجموعة هوية استنادا إلى سمات تمييزية معينة لهذه المجموعات.

ويشمل ذلك، على سبيل المثال لا الحصر:
  • العرق والعرق والجنسية
  • مجموعات الهوية الجنسانية والتعبير
  • التوجه الجنسي
  • الدين
  • المظهر الشخصي وحجم الجسم
  • حالة الإعاقة
  • المضايقة والتسلط
Hate
جنسي يصف النشاط الجنسي اللغة المتعلقة بالأعضاء التشريحية والأعضاء التناسلية، والعلاقات الرومانسية والأعمال الجنسية، والأفعال التي يتم تصويرها بعبارات جنسية أو حنونية، بما في ذلك تلك التي تصور على أنها اعتداء أو فعل عنيف جنسي قسري ضد إرادة الشخص. 

 ويشمل ذلك على سبيل المثال لا الحصر:
  • محتوى فولغاري
  • بغاء
  • العري والمواد الإباحية
  • أهان
  • استغلال الأطفال، إساءة معاملة الأطفال، استمالة الأطفال
Sexual
عنف العنف يصف اللغة المتعلقة بالإجراءات البدنية التي تهدف إلى الإيذاء أو الإصابة أو الضرر أو قتل شخص ما أو شيء ما؛ يصف الأسلحة والبنادق والكيانات ذات الصلة.

يتضمن ذلك، على سبيل المثال لا الحصر:
  • قناع
  • التنمر والتخويف
  • التطرف الإرهابي والعنفي
  • المطارده
Violence
إيذاء النفس يصف إيذاء النفس اللغة المتعلقة بالإجراءات البدنية التي تهدف إلى الإيذاء أو الإصابة أو الإضرار بجسم الشخص أو قتل نفسه عن قصد.

يتضمن ذلك، على سبيل المثال لا الحصر:
  • اضطرابات الأكل
  • التنمر والتخويف
SelfHarm

يمكن أن يكون التصنيف متعدد التسميات. على سبيل المثال، عندما يمر نموذج النص بنموذج الإشراف على النص، يمكن تصنيفه على أنه محتوى جنسي وعنف.

مستويات الخطورة

تأتي كل فئة ضرر تطبقها الخدمة أيضا مع تصنيف مستوى الخطورة. يهدف مستوى الخطورة إلى الإشارة إلى خطورة عواقب عرض المحتوى الذي تم وضع علامة عليه.

النص: يدعم الإصدار الحالي من نموذج النص مقياس الخطورة الكامل من 0 إلى 7. يكتشف المصنف بين جميع الخطورة على طول هذا المقياس. إذا حدد المستخدم، يمكنه إرجاع الخطورة في المقياس المقتسم من 0 و2 و4 و6؛ يتم تعيين كل مستويين متجاورة إلى مستوى واحد.

  • [0,1] ->0
  • [2,3] ->2
  • [4,5] ->4
  • [6,7] ->6

الصورة: يدعم الإصدار الحالي من نموذج الصورة الإصدار المقتطاع من مقياس الخطورة الكامل من 0 إلى 7. يقوم المصنف بإرجاع الخطورة 0 و2 و4 و6 فقط.

  • 0
  • 2
  • 4
  • 6

صورة ذات نص: يدعم الإصدار الحالي من النموذج متعدد الوسائط مقياس الخطورة الكامل من 0 إلى 7. يكتشف المصنف بين جميع الخطورة على طول هذا المقياس. إذا حدد المستخدم، يمكنه إرجاع الخطورة في المقياس المقتسم من 0 و2 و4 و6؛ يتم تعيين كل مستويين متجاورة إلى مستوى واحد.

  • [0,1] ->0
  • [2,3] ->2
  • [4,5] ->4
  • [6,7] ->6

محتوى نصي

تحذير

تحتوي علامة التبويب تعريفات الخطورة في هذا المستند على أمثلة للمحتوى الضار الذي قد يكون مزعجا لبعض القراء.

محتوى الصورة

تحذير

تحتوي علامة التبويب تعريفات الخطورة في هذا المستند على أمثلة للمحتوى الضار الذي قد يكون مزعجا لبعض القراء.

محتوى متعدد الوسائط (صورة مع نص)

تحذير

تحتوي علامة التبويب تعريفات الخطورة في هذا المستند على أمثلة للمحتوى الضار الذي قد يكون مزعجا لبعض القراء.

الخطوة التالية

اتبع التشغيل السريع لبدء استخدام Azure الذكاء الاصطناعي Content Safety في التطبيق الخاص بك.