Συνήθεις ερωτήσεις για το εργαλείο χρήσης υπολογιστή

Αυτές οι συνήθεις ερωτήσεις (FAQ) παρέχουν πληροφορίες σχετικά με τις δυνατότητες, τη χρήση, τους περιορισμούς και τα μέτρα ασφαλείας που πρέπει να γνωρίζετε όταν προσθέτετε το εργαλείο χρήσης υπολογιστή στους παράγοντες του Copilot Studio.

Τι είναι το εργαλείο χρήσης υπολογιστή;

Η χρήση υπολογιστή είναι ένα εργαλείο που μπορείτε να προσθέσετε στους παράγοντες του Copilot Studio που έχουν σχεδιαστεί για να αυτοματοποιούν εργασίες σε ιστότοπους και εφαρμογές. Παρέχετε περιγραφές εργασιών σε φυσική γλώσσα και το εργαλείο αυτοματοποιεί ανάλογα τα κλικ του ποντικιού και τις ενέργειες του πληκτρολογίου. Για παράδειγμα, μπορείτε να δώσετε εντολή στο εργαλείο να ανοίξει ένα PDF και να χρησιμοποιήσει τα περιεχόμενά του για να συμπληρώσει μια φόρμα ιστού. Το εργαλείο οπτικά ερμηνεύει την οθόνη και εκτελεί τα απαραίτητα κλικ και πατήματα πλήκτρων, μιμούμενος τις ανθρώπινες αλληλεπιδράσεις.

Προειδοποίηση

Η χρήση υπολογιστή είναι ένα ισχυρό εργαλείο που αυτοματοποιεί τις αλληλεπιδράσεις μεταξύ τοποθεσιών web και εφαρμογών επιτραπέζιου υπολογιστή, αλλά συνοδεύεται επίσης από σημαντικά ζητήματα ασφάλειας. Σε ορισμένες περιπτώσεις, η τεχνητή νοημοσύνη μπορεί να προβεί σε ακούσιες ενέργειες λόγω ασαφών οδηγιών ή απρόβλεπτου περιεχομένου στην οθόνη. Αυτές οι ενέργειες μπορούν να επηρεάσουν την ασφάλεια της συσκευής, των δεδομένων ή των συνδεδεμένων λογαριασμών σας, συμπεριλαμβανομένης της πρόσβασης σε προσωπικά, οικονομικά ή εταιρικά συστήματα.

Τι μπορεί να κάνει το εργαλείο χρήσης υπολογιστή;

Το εργαλείο χρήσης υπολογιστή επεξεργάζεται δεδομένα pixel οθόνης για να κατανοήσει το περιεχόμενο της οθόνης και εκτελεί εργασίες χρησιμοποιώντας εικονικά κλικ του ποντικιού και εισαγωγές πληκτρολογίου. Το εργαλείο μπορεί να διαχειριστεί ροές εργασίας πολλαπλών βημάτων, να χειριστεί απροσδόκητα σενάρια και να προσαρμοστεί δυναμικά στις αλλαγές της οθόνης. Μπορεί να εκτελέσει διάφορες ψηφιακές εργασίες, όπως πλοήγηση σε ιστότοπους και συμπλήρωση φορμών χωρίς να χρειάζεται εξειδικευμένα API.

Το εργαλείο χρήσης υπολογιστή ακολουθεί έναν επαναληπτικό βρόχο που βασίζεται σε τρία βήματα:

• Αντίληψη: Καταγράφει στιγμιότυπα οθόνης για να κατανοήσει οπτικά την τρέχουσα κατάσταση της οθόνης του υπολογιστή.

• Συλλογιστική: Αξιολογεί την τρέχουσα κατάσταση, τις προηγούμενες ενέργειες και τα στιγμιότυπα οθόνης μέσω μιας προσέγγισης αλυσίδας σκέψης, η οποία του επιτρέπει να προσαρμόζει αποτελεσματικά τις ενέργειές του.

• Ενέργεια: Εκτελεί ενέργειες όπως κλικ, πληκτρολόγηση ή κύλιση μέχρι να ολοκληρωθεί η εργασία ή να απαιτήσει περαιτέρω εισαγωγή στοιχείων από τον χρήστη.

Ποιες είναι οι προοριζόμενες χρήσεις του εργαλείου χρήσης υπολογιστή;

Το εργαλείο χρήσης υπολογιστή προορίζεται για την αυτοματοποίηση των αλληλεπιδράσεων των χρηστών με τοποθεσίες web και εφαρμογές μέσω εικονικού ποντικιού και πληκτρολογίου. Είναι ιδιαίτερα χρήσιμο σε σενάρια όπου τα API δεν είναι διαθέσιμα.

Πώς αξιολογήθηκε το εργαλείο χρήσης υπολογιστή; Ποια μετρικά χρησιμοποιούνται για τη μέτρηση των επιδόσεων;

Το εργαλείο χρήσης υπολογιστή αξιολογήθηκε αυστηρά χρησιμοποιώντας σενάρια πραγματικού κόσμου καθ' όλη τη διάρκεια των φάσεων σχεδιασμού, ανάπτυξης και υλοποίησής του. Οι μέθοδοι αξιολόγησης περιελάμβαναν έρευνα, μελέτες για τις επιπτώσεις και δοκιμές σε διάφορα σενάρια ώστε να μετρηθεί η ακρίβεια, η εμπιστοσύνη των χρηστών και η χρησιμότητα. Τόσο οι ποιοτικές όσο και οι ποσοτικές μετρικές παρακολουθούνται συστηματικά ώστε να διατηρείται υψηλή απόδοση και θετική εμπειρία χρήστη. Η διαθεσιμότητα του εργαλείου διασφαλίζεται επίσης με την τήρηση των καθιερωμένων SLA.

Ποιοι είναι οι περιορισμοί του εργαλείου χρήσης υπολογιστή; Πώς μπορούν οι χρήστες να ελαχιστοποιήσουν τον αντίκτυπο των περιορισμών του εργαλείου χρήσης υπολογιστή κατά τη χρήση του συστήματος;

Η τεχνολογία χρήσης υπολογιστή είναι μια καινοτόμα τεχνολογία με γνωστούς κινδύνους ασφαλείας και λειτουργικούς περιορισμούς. Σας δίνουμε τη δυνατότητα να πειραματιστείτε με αυτό. Αυτή η τεχνολογία σε αρχικό στάδιο επιτρέπει την αυτοματοποίηση ορισμένων εργασιών στον υπολογιστή, αν και η απόδοσή της διαφέρει σημαντικά ανάλογα με το σενάριο χρήσης. Για να το χρησιμοποιήσετε αποτελεσματικά και υπεύθυνα, κατανοήστε τους τρέχοντες περιορισμούς του.

Γνωστοί περιορισμοί

• Το ποσοστό επιτυχίας ποικίλλει ανάλογα με την εργασία: Το εργαλείο αποδίδει καλύτερα σε εργασίες που βασίζονται στον ιστό (περίπου 80% επιτυχία), αλλά πέφτει σημαντικά στις εφαρμογές επιτραπέζιου υπολογιστή (περίπου 35% επιτυχία).
• Ασυνεπής απόδοση: Η ίδια εργασία μπορεί να έχει διαφορετικά αποτελέσματα ανάλογα με αλλαγές στην εμφάνιση ή στο χρονισμό.
• Δυσκολίες με ορισμένα στοιχεία ελέγχου: Η χρήση υπολογιστή μπορεί να αντιμετωπίσει δυσκολίες στην αλληλεπίδραση με μη τυπικά ή δυναμικά στοιχεία διεπαφής, όπως αναπτυσσόμενα μενού, επιλογείς ημερομηνιών ή προσαρμοσμένα widgets.
• Βρόχοι και κολλημένες καταστάσεις: Σε ορισμένες περιπτώσεις, ο παράγοντας εισέρχεται σε έναν βρόχο ή κολλάει όταν η οθόνη δεν ανταποκρίνεται στις προσδοκίες ή αλλάζει απρόβλεπτα.
• Προκλήσεις με σύνθετες εργασίες: Αν και είναι αποτελεσματικό για απλές ενέργειες, το εργαλείο μπορεί να δυσκολευτεί με σύνθετες γραφικές διεπαφές ή εργασίες που περιλαμβάνουν περίπλοκη επεξεργασία κειμένου.
• Όχι για ευαίσθητες περιπτώσεις χρήσης ή περιπτώσεις υψηλού κινδύνου: Το εργαλείο δεν προορίζεται για:
  • Συστάσεις ή βαθμολόγηση σε ευαίσθητους τομείς, όπως οι προσλήψεις, η υγειονομική περίθαλψη ή τα οικονομικά
  • Πραγματοποίηση οικονομικών συναλλαγών
  • Επιβλαβείς ενέργειες, όπως spam ή παραπληροφόρηση
  • Κοινή χρήση δεδομένων εκτός του οργανισμού σας χωρίς την κατάλληλη εξουσιοδότηση

Πώς να ελαχιστοποιήσετε τους περιορισμούς

Για να βελτιώσετε την αξιοπιστία, θα πρέπει να παρέχετε σαφείς, λεπτομερείς οδηγίες όταν διαμορφώνετε εργασίες, ώστε να μειώσετε τα σφάλματα και να αυξήσετε τα ποσοστά επιτυχίας των εργασιών.

Τι είναι η δυνατότητα ανθρώπινης επίβλεψης;

Σημαντικό

Οι παράγοντες χρήσης υπολογιστών μπορεί να αντιμετωπίσουν επιβλαβείς ή κακόβουλες οδηγίες, που συχνά αναφέρονται ως προτροπές για επιθέσεις με ένεση, όπου κρυφές εντολές σε στιγμιότυπα οθόνης, ιστοσελίδες ή άλλες εισόδους επιχειρούν να επηρεάσουν ενέργειες με ακούσιους τρόπους. Για να μειώσετε αυτούς τους κινδύνους, να λειτουργείτε τη χρήση υπολογιστή σε αξιόπιστα, απομονωμένα περιβάλλοντα και εφαρμόστε ισχυρούς ελέγχους επικύρωσης πριν από την εκτέλεση τυχόν οδηγιών.

Οι διαδικασίες χρήσης υπολογιστή μπορεί να αντιμετωπίσουν ασάφεια ή ελλιπείς πληροφορίες. Για παράδειγμα, μπορεί να λείπει μία απαιτούμενη τιμή ή να υπάρχουν πολλαπλές πιθανές ερμηνείες. Σε αυτές τις περιπτώσεις, η δυνατότητα ανθρώπινης επίβλεψης επιτρέπει στον παράγοντα που χρησιμοποιεί υπολογιστή να διακόψει την εκτέλεση και να εκδώσει ένα αίτημα διευκρίνισης σε έναν εξουσιοδοτημένο και ρυθμισμένο ανθρώπινο αναθεωρητή. Οι αναθεωρητές μπορούν να απαντήσουν μέσω ηλεκτρονικού ταχυδρομείου ή εντός του Copilot Studio χρησιμοποιώντας τον χάρτη δραστηριότητας του παράγοντα. Μόλις ο παράγοντας που χρησιμοποιεί υπολογιστή λάβει μια απάντηση, συνεχίζει την εκτέλεσή του από το βήμα παύσης στον χάρτη δραστηριότητας.

Αξιοπιστία και όρια

Οι αξιολογήσεις βάσει προϊόντων δείχνουν ότι η δυνατότητα ανθρώπινης επίβλεψης λειτουργεί γενικά όπως αναμένεται, αλλά μπορεί να αποτύχει ή να συμπεριφερθεί με τρόπους που οι χρήστες μπορεί να μην περιμένουν. Επειδή τα αιτήματα διευκρίνισης ενεργοποιούνται από πιθανολογική συμπεριφορά του μοντέλου, ενδέχεται να μην ενεργοποιούνται σε κάθε περίπτωση όπου ένα άτομο θα ήθελε μια παύση. Μπορεί επίσης να ενεργοποιηθούν όταν δεν είναι απαραίτητη η παύση. Δεν πρέπει να βασίζεστε σε αιτήματα διευκρίνισης ως δικλείδα ασφαλείας ή ως εγγύηση ότι το σύστημα θα ζητά πάντα ανθρώπινη παρέμβαση πριν προχωρήσει.

Δεν είναι μηχανισμός επιβολής προσαρμοσμένων κανόνων

Τα αιτήματα για ανθρώπινη επίβλεψη δεν εγγυώνται την επιβολή των καθορισμένων κανόνων, πολιτικών ή περιορισμών σας. Θα πρέπει να εφαρμόζετε περισσότερους ελέγχους κατάλληλους για κάθε πιθανό σενάριο (για παράδειγμα: σαφείς οδηγίες, περιορισμένα περιβάλλοντα, λογαριασμούς με ελάχιστα δικαιώματα, λίστες επιτρεπόμενων και άλλες λειτουργικές διασφαλίσεις) αντί να βασίζεστε σε αιτήματα διευκρίνισης για την παροχή πληροφοριών ή την αποτροπή ανεπιθύμητων ενεργειών.

Ποιοι λειτουργικοί παράγοντες και ρυθμίσεις επιτρέπουν την αποτελεσματική και υπεύθυνη χρήση του εργαλείου χρήσης υπολογιστή;

Το εργαλείο χρήσης υπολογιστή αποδίδει καλύτερα όταν ο χρήστης παρέχει σαφείς και λεπτομερείς οδηγίες. Οι χρήστες θα πρέπει να δίνουν συγκεκριμένες ενδείξεις σχετικά με τις αλληλεπιδράσεις με ιστότοπους ή εφαρμογές, ώστε να ενισχύσουν την αξιοπιστία και την ακρίβεια κατά την εκτέλεση των εργασιών. Για πρόσθετη ορατότητα και έλεγχο, ενεργοποιήστε την ανθρώπινη επίβλεψη αναθέτοντας έναν ή περισσότερους εξουσιοδοτημένους αναθεωρητές στη σελίδα διαμόρφωσης εργαλείων. Όταν το μοντέλο εντοπίσει δυνητικά κακόβουλες οδηγίες, αυτοί οι αναθεωρητές λαμβάνουν ειδοποιήσεις για να επικυρώσουν και να αποφασίσουν εάν θα συνεχίσουν ή θα σταματήσουν την εκτέλεση.

Πώς μπορώ να παρέχω σχόλια σχετικά με το εργαλείο χρήσης υπολογιστή;

Έχετε σχόλια σχετικά με το εργαλείο χρήσης υπολογιστή; Ηλεκτρονικό ταχυδρομείο computeruse-feedback@microsoft.com.