Bagikan melalui


Alur desktop rekaman

Power Automate memungkinkan Anda mendesain alur desktop secara otomatis dengan mereplikasi tugas yang ingin Anda otomatisasi.

Merekam alur desktop dan web

Untuk merekam alur yang mengotomatiskan aplikasi desktop dan/atau web:

  1. Buat alur desktop baru, dan pilih Perekam di toolbar desainer alur.

    Tangkapan layar tombol perekam.

  2. Pilih Rekam di jendela perekam, dan mulailah melakukan tindakan yang diinginkan di aplikasi atau halaman web yang sesuai.

    Cuplikan layar tombol Rekam.

    Perekam melacak aktivitas mouse dan keyboard dalam kaitannya dengan elemen UI, dan merekam setiap tindakan secara terpisah. Selama setiap sesi perekaman, perekam dapat menghasilkan tindakan otomatisasi UI dan browser.

    Catatan

    Saat Anda melakukan klik kiri atau kanan pada elemen UI selama perekaman, penyorot menampilkan pesan Tunggu tindakan , menginstruksikan Anda untuk menunggu perekam merekam dan memasukkan tindakan.

    Cuplikan layar dari beberapa langkah yang direkam.

    Untuk melihat tindakan yang tersedia untuk elemen tertentu, klik kanan padanya untuk membuka menu konteksnya. Opsi yang tersedia tergantung pada sifat elemen yang dipilih.

    Cuplikan layar menu konteks perekaman.

  3. Saat proses perekaman selesai, pilih Selesai untuk mengonversi langkah-langkah yang direkam menjadi tindakan alur desktop. Semua elemen UI yang digunakan dalam UI yang dihasilkan dan tindakan otomatisasi web ditambahkan secara otomatis ke panel elemen UI. Anda dapat menemukan informasi lebih lanjut mengenai elemen UI di Automate menggunakan elemen UI.

    Cuplikan layar tindakan yang dihasilkan dari aliran yang direkam.

Untuk menjeda proses perekaman sementara, pilih Jeda. Untuk menambahkan komentar ke tindakan yang direkam, pilih Tambahkan komentar.

Tangkapan layar tombol komentar.

Mereplikasi langkah seret dan lepas

Perekam mendukung langkah-langkah yang terkait dengan menyeret dan menjatuhkan penunjuk mouse; oleh karena itu, perekam dapat menghasilkan tindakan seperti Ubah ukuran jendela dan Pindahkan jendela. Namun, saat ini, elemen UI Seret dan lepas dari tindakan jendela tidak didukung.

Menangani daftar turun bawah

Saat mengotomatiskan aplikasi desktop dan web menggunakan perekam, Anda mungkin perlu menangani daftar drop-down.

Perekam Power Automate menampilkan layar khusus setiap kali Anda memilih daftar drop-down, dan ini membantu Anda memilih nilai yang diinginkan. Layar kustom ini memungkinkan Anda untuk memilih satu atau beberapa nilai tergantung pada apakah daftar drop-down multi-pilih.

Selama runtime, Power Automate secara otomatis memilih nilai yang ditentukan dan memilih tombol OK .

Cuplikan layar layar kustom untuk daftar drop-down.

Luncurkan browser web

Untuk meluncurkan instans browser web saat merekam alur web, Anda dapat menggunakan tiga pendekatan berbeda berdasarkan skenario otomatisasi.

Metode pertama adalah memilih ikon titik di sisi kanan dialog perekam dan kemudian Luncurkan browser web baru. Anda dapat memilih antara Microsoft Edge, Google Chrome, Mozilla Firefox, dan Microsoft Internet Explorer.

Setelah Anda memilih browser yang tepat, perekam akan mendeteksi halaman web yang dimuat secara otomatis dan mengonfigurasi langkah penjelajahan peluncuran yang sesuai.

Cuplikan layar opsi Luncurkan browser web baru.

Cara alternatif untuk meluncurkan browser adalah mulai merekam di browser web yang sudah terbuka. Perekam akan secara otomatis mendeteksi halaman yang dimuat dan akan membuat tindakan browser peluncuran.

Metode terakhir untuk meluncurkan browser adalah meluncurkannya secara manual melalui pintasannya di desktop, menu mulai, bilah tugas, atau folder. Jika Anda menerapkan pendekatan ini, perekam akan menghasilkan tindakan otomatisasi UI yang mengklik pintasan browser dan meluncurkannya.

Menangani pemilih tanggal dan warna di halaman web

Seperti daftar drop-down, Power Automate perekam menampilkan layar khusus untuk membantu Anda menangani pemilih tanggal dan warna di halaman web.

Saat Anda berinteraksi dengan pemilih tanggal, perekam membuka bidang teks tempat Anda dapat memasukkan tanggal yang diinginkan dalam format yang ditentukan.

Layar kustom muncul untuk jenis input HTML berikut:

  • date
  • datetime-local
  • bulan
  • waktu
  • minggu

Cuplikan layar layar kustom pemilih tanggal.

Demikian pula, ketika Anda berinteraksi dengan pemilih warna, perekam membuka bidang teks di mana Anda dapat mengisi kode hex warna yang diinginkan.

Cuplikan layar kustom pemilih warna.

Menambahkan teks menggunakan Editor Metode Input (IMEs)

Input Method Editors (IMEs) adalah komponen perangkat lunak yang memungkinkan pengguna untuk memasukkan teks dalam bahasa yang tidak dapat diwakili dengan mudah pada keyboard QWERTY standar. Pengguna dapat mengetik kombinasi tombol, dan IME akan menghasilkan karakter atau daftar karakter kandidat yang cocok dengan kumpulan penekanan tombol.

Power Automate untuk desktop mendukung penggunaan IME selama prosedur perekaman aliran. Untuk mengisi bidang teks menggunakan IME:

  1. Klik kanan pada bidang teks, dan pilih Isi bidang teks pada menu yang ditampilkan.

    Cuplikan layar opsi menu Isi bidang teks.

  2. Isi dialog popup dengan teks yang diinginkan menggunakan IME.

    Cuplikan layar dialog Tambahkan teks dengan IME.

  3. Pilih Tambahkan teks untuk menghasilkan langkah masing-masing di jendela Perekam Suara .

    Cuplikan layar teks yang dihasilkan dari IME di perekam desktop.

Perekaman berbasis gambar

Dalam beberapa kasus, perekam mungkin tidak merekam tindakan dalam aplikasi tertentu yang tidak memenuhi persyaratan teknis yang sesuai. Aplikasi ini mungkin tidak mengekspos API aksesibilitasnya atau memiliki batasan teknis lainnya yang menghalangi proses perekaman.

Sebagai cara alternatif untuk merekam aliran, Power Automate untuk desktop menyediakan perekaman berbasis gambar. Perekaman berbasis gambar menggunakan pengenalan gambar dan OCR untuk menemukan elemen tertentu di layar dan mengekstrak teks.

Untuk merekam alur menggunakan gambar:

  1. Buat alur desktop baru dan pilih Perekam di toolbar desainer alur.

    Tangkapan layar tombol perekam.

  2. Pilih ikon titik di sisi kanan dialog perekam, lalu aktifkan Perekaman gambar. Setelah mengaktifkan opsi ini, pilih Rekam untuk mulai merekam tindakan menggunakan pengenalan gambar.

    Cuplikan layar tombol Perekaman gambar.

    Setelah mengklik elemen, gambar diambil secara otomatis dan disimpan dengan nama default yang dapat diedit. Untuk melihat pratinjau gambar yang diambil, arahkan kursor, atau pilih ikon pratinjau .

    Cuplikan layar tombol gambar pratinjau.

Ekstrak teks dengan perekaman berbasis gambar

Untuk mengekstrak nilai teks saat menggunakan perekaman gambar:

  1. Lakukan klik kanan pada layar, dan pilih Ekstrak teks dari gambar.

    Cuplikan layar dari opsi Ekstrak teks dari gambar.

  2. Tunggu pesan popup yang akan meminta Anda untuk memilih area teks.

    Cuplikan layar pesan yang meminta pengguna untuk memilih area teks.

  3. Pilih area teks dari mana teks akan diekstraksi menggunakan mesin OCR Tesseract.

    Cuplikan layar area teks yang dipilih.

  4. Tunggu pesan popup yang akan meminta Anda untuk memilih area jangkar.

    Cuplikan layar pesan yang meminta pengguna untuk memilih area jangkar.

  5. Pilih area jangkar yang diperkirakan tidak akan berubah, seperti label di samping bidang.

    Cuplikan layar area teks jangkar.

Merekam vs membangun alur desktop

Anda dapat mengedit secara manual tindakan apa pun yang dibuat melalui perekam setelah perekaman selesai. Gunakan perekam dalam alur desktop yang sudah dalam pengembangan untuk menambahkan langkah-langkah yang direkam ke dalamnya.

Catatan

Gunakan perekam untuk membuat tulang punggung aliran Anda. Tugas sederhana tertentu mungkin tidak memerlukan pengeditan lebih lanjut; Namun, sebagian besar tugas yang direkam harus dimodifikasi untuk mencapai hasil yang optimal. Jenis tindakan tertentu, seperti kondisional dan loop, tidak dapat direkam. Selain itu, mungkin ada tindakan berlebihan dalam rekaman yang harus dihapus.

Masalah dan batasan umum

  • Masalah: Perekam mungkin tidak merekam semua langkah dari menu Mulai Windows atau baki sistem.

    Solusi: Tidak ada

  • Masalah: Saat menjalankan alur yang dibuat melalui perekaman berbasis gambar, klik mungkin dikirim ke tempat yang salah.

    Solusi: Edit tindakan yang dibuat secara otomatis Gerakkan mouse ke gambar melalui desainer alur dan kurangi parameter toleransi di pengaturan tingkat lanjut.

  • Masalah: Itu Ekstrak teks dari popup gambar yang muncul setelah mengirim klik kanan menggunakan perekam dapat bersembunyi di balik popup aplikasi.

    Solusi: Kirim klik kanan ke tempat lain di layar.

  • Masalah: Setiap penekanan tombol yang dikirim ke jendela RDP yang dimaksimalkan melalui perekaman berbasis gambar tidak akan direkam.

    Penanganan masalah: Ubah ukuran jendela RDP sehingga tidak menutupi layar penuh.