Bagikan melalui

Memilih teknologi pemrosesan bahasa yang ditargetkan Azure AI

Layanan Azure AI membantu pengembang dan organisasi dengan cepat membuat aplikasi cerdas, mutakhir, siap pasar, dan bertanggung jawab dengan API dan model yang siap pakai dan bawaan serta dapat disesuaikan.

Artikel ini mencakup layanan AI yang menyediakan kemampuan pemrosesan bahasa yang ditargetkan seperti pemrosesan bahasa alami (NLP), analitik teks, pemahaman bahasa, terjemahan, dan ekstraksi data dokumen. Bahasa AI Microsoft Azure adalah salah satu kategori terluas dalam layanan AI. Anda dapat menggunakan API dalam beban kerja Anda untuk menggabungkan fitur bahasa seperti pengenalan entitas bernama (NER), analisis sentimen, deteksi bahasa, dan ringkasan teks.

Layanan

Layanan berikut menyediakan kemampuan pemrosesan bahasa yang ditargetkan untuk layanan AI:

  • Bahasa menyediakan NLP untuk analisis teks.

    • Pakai Bahasa saat Anda perlu bekerja dengan dokumen terstruktur atau tidak terstruktur untuk beragam tugas terkait bahasa yang dijelaskan dalam artikel ini.

    • Jangan gunakan Bahasa jika Anda perlu mencari dokumen dengan obrolan, memeriksa keamanan konten, atau menerjemahkannya.

  • Microsoft Azure AI Translator adalah layanan terjemahan mesin. Ini dapat melakukan terjemahan teks real-time, terjemahan dokumen batch dan file tunggal, dan terjemahan khusus yang dapat Anda gunakan untuk menggabungkan terminologi khusus atau bahasa khusus industri untuk skenario Anda. Penerjemah mendukung banyak bahasa.

    • Pakai Penerjemah ketika Anda perlu melakukan terjemahan secara khusus. Anda dapat menggunakan model bahasa dasar tujuan umum lainnya untuk melakukan terjemahan. Tetapi menggunakan Penerjemah untuk tujuan khususnya bisa lebih efektif dan hemat biaya karena model terjemahannya yang ditargetkan.

    • Jangan gunakan Penerjemah jika Anda perlu terlibat dengan obrolan, menganalisis konten untuk sentimen, atau memoderasi konten. Untuk analisis sentimen, gunakan Language sebagai gantinya. Untuk moderasi konten, gunakan Keamanan Konten AI Microsoft Azure.

  • Azure AI Document Intelligence adalah layanan yang dapat mengonversi gambar langsung menjadi bentuk elektronik. Anda dapat menentukan bidang yang diharapkan, lalu mencari gambar yang Anda berikan untuk menangkap bidang tersebut tanpa campur tangan manusia. Document Intelligence menghosting banyak model bawaan dan juga memungkinkan Anda membuat model kustom Anda sendiri.

    • Pakai Kecerdasan Dokumen ketika Anda tahu persis bidang mana yang perlu Anda ekstrak dari dokumen yang dipindai untuk mengisi formulir elektronik dengan tepat.

    • Pakai Kecerdasan Dokumen untuk mengidentifikasi struktur utama, seperti header, footer, dan jeda bab, dalam berbagai koleksi dokumen untuk berinteraksi lebih lanjut secara terprogram dengan dokumen, seperti dalam implementasi pengambilan generasi tambahan (RAG).

    • Jangan gunakan Document Intelligence sebagai API pencarian real-time.

Layanan Azure OpenAI

Azure OpenAI Service menyediakan akses REST API ke model bahasa OpenAI yang canggih. Model-model ini termasuk O3-Mini, O1, O1-Mini, GPT-4o, GPT-4o Mini, GPT-4 Turbo dengan Vision, GPT-4, GPT-3.5-Turbo, dan seri model Embeddings. Model-model ini sangat mudah beradaptasi, yang memungkinkan Anda menyesuaikannya untuk tugas-tugas seperti pembuatan konten, peringkasan, analisis gambar, dan pencarian semantik. Mereka juga mendukung terjemahan bahasa alami ke kode, yang membuatnya serbaguna untuk berbagai aplikasi.

Kemampuan

Tabel berikut menyediakan daftar kemampuan yang tersedia di Azure OpenAI.

Kemampuan Deskripsi
Pembuatan dan penyelesaian teks Menghasilkan teks seperti manusia berdasarkan petunjuk, secara otomatis menyelesaikan kalimat atau paragraf, meringkas dokumen panjang menjadi ringkasan ringkas, dan menjawab pertanyaan berdasarkan konteks.
Mengobrol Bangun chatbot dan asisten virtual, pertahankan konteks dalam percakapan beberapa giliran, dan personalisasi respons berdasarkan interaksi pengguna.
Asisten Ciptakan pengalaman seperti copilot yang mempertahankan kepribadian yang konsisten di seluruh interaksi pengguna. Aktifkan penggunaan beberapa alat secara bersamaan, seperti implementasi kode dan pencarian pengetahuan.
Embedding Ubah teks menjadi vektor numerik di mana makna serupa diposisikan berdekatan dalam ruang vektor. Proses ini memungkinkan pencarian kesamaan yang kuat dalam layanan seperti Azure AI Search, Azure Cosmos DB, Azure SQL Database, dan Azure Database for PostgreSQL.
Pemfilteran konten Menyaring input pengguna dan output AI untuk konten berbahaya dalam kategori seperti kebencian, konten seksual, kekerasan, dan menyakiti diri sendiri, dengan dukungan untuk berbagai bahasa. Ini juga memantau pola penggunaan untuk membantu memastikan kepatuhan.
Kustomisasi LLM Menyediakan teknik adaptasi model, termasuk rekayasa cepat untuk penyesuaian cepat, RAG untuk menggabungkan informasi eksternal, dan penyesuaian halus untuk melatih model pada tugas-tugas khusus. Anda dapat menggabungkan metode ini untuk mengoptimalkan performa untuk kasus penggunaan tertentu.

Bahasa

Language adalah layanan berbasis cloud yang menyediakan fitur NLP untuk memahami dan menganalisis teks. Gunakan layanan ini untuk membantu membangun aplikasi cerdas dengan menggunakan Language Studio berbasis web, REST API, dan pustaka klien.

Kemampuan

Tabel berikut menyediakan daftar kemampuan yang tersedia dalam Bahasa.

Kemampuan Deskripsi
Jawaban atas pertanyaan kustom Menemukan jawaban yang paling tepat untuk input dari pengguna Anda. Ini biasanya digunakan untuk membangun aplikasi klien percakapan, seperti aplikasi media sosial, bot obrolan, dan aplikasi desktop berkemampuan ucapan.
Klasifikasi teks kustom Membangun model AI kustom untuk mengklasifikasikan dokumen teks tidak terstruktur ke dalam kelas kustom yang Anda tentukan.
Pemahaman bahasa percakapan (CLU) Bangun model pemahaman bahasa alami kustom untuk memprediksi maksud keseluruhan pesan masuk dan mengekstrak informasi penting darinya.
Penautan entitas Mendisambiguasi identitas kata atau frasa yang ditemukan dalam teks tidak terstruktur dan mengembalikan pranala ke Wikipedia.
Deteksi bahasa Mendeteksi bahasa yang digunakan untuk menulis dokumen dan mengembalikan kode bahasa untuk berbagai bahasa, varian, dialek, dan beberapa bahasa daerah atau budaya.
Ekstraksi frasa kunci Mengevaluasi dan mengembalikan konsep utama dalam teks tidak terstruktur dan mengembalikannya sebagai daftar.
NER Mengkategorikan kata atau frasa dalam teks tidak terstruktur di beberapa grup kategori yang telah ditentukan sebelumnya, seperti orang, peristiwa, tempat, dan tanggal.
Alur kerja Orkestrasi Gunakan untuk menghubungkan CLU.
Informasi pengenal pribadi (PII) dan deteksi informasi kesehatan pengenal pribadi Mengidentifikasi, mengkategorikan, dan menyunting informasi sensitif dalam dokumen teks tidak terstruktur dan transkrip percakapan, seperti nomor telepon, alamat email, dan bentuk identifikasi. Untuk informasi selengkapnya, lihat Kategori entitas PII yang didukung.
Analisis sentimen dan penggalian opini Membantu Anda memahami pendapat orang tentang merek atau topik Anda dengan menganalisis teks untuk tanda-tanda sentimen positif atau negatif dan menautkannya ke aspek tertentu dari konten.
Ringkasan Menggunakan ringkasan teks ekstraktif untuk menghasilkan ringkasan dokumen dan transkripsi percakapan. Ringkasan teks ini mengambil kalimat yang secara kolektif merepresentasikan informasi paling penting atau relevan dalam konten asli.
Analisis teks untuk kesehatan Mengekstrak dan memberi label informasi medis yang relevan dari teks yang tidak terstruktur seperti catatan dokter, ringkasan pelepasan, dokumen klinis, dan catatan kesehatan elektronik. Saat Anda merancang beban kerja, evaluasi lokasi pemrosesan dan residensi data fitur yang dihosting cloud ini untuk memastikannya selaras dengan ekspektasi kepatuhan Anda. Beberapa beban kerja mungkin dibatasi dalam kapasitasnya untuk mengirim data layanan kesehatan ke platform yang dihosting cloud. Anda dapat menggunakan API ini sebagai kontainer Docker untuk menghosting di komputasi Anda sendiri di cloud atau lokal. Proses ini dapat membantu mengatasi masalah kepatuhan yang mencakup platform sebagai layanan. Untuk informasi selengkapnya, lihat Menggunakan Analisis Teks untuk kontainer kesehatan.

Kasus penggunaan

Tabel berikut menyediakan daftar kemungkinan kasus penggunaan untuk Bahasa.

Kasus penggunaan Dapat disesuaikan.
Memprediksi niat input pengguna dan mengekstrak informasi dari mereka. Ya
Mengidentifikasi dan menyunting informasi sensitif seperti PII.
Identifikasi bahasa tempat teks ditulis.
Ekstrak informasi medis dari dokumen klinis atau medis tanpa membuat model.
Ekstrak informasi medis dari dokumen klinis atau medis dengan menggunakan model yang dilatih berdasarkan data Anda. Ya
Ekstrak kategori informasi tanpa membuat model kustom.
Ekstrak kategori informasi dengan menggunakan model khusus untuk data Anda. Ya
Menarik topik utama dan frasa-frasa penting.
Ringkas dokumen.
Mengklasifikasikan teks dengan menggunakan analisis sentimen. Ya
Mengklasifikasikan teks dengan menggunakan kelas kustom. Ya
Mengklasifikasikan item ke dalam kategori yang disediakan pada waktu pemrosesan.
Tautkan entitas dengan artikel basis pengetahuan.
Memahami pertanyaan dan jawaban (generik). Ya
Buat aplikasi percakapan yang merespons input pengguna.
Hubungkan aplikasi dari CLU dan menjawab pertanyaan. Ya

Jika fitur dapat disesuaikan, Anda dapat melatih model AI dengan menggunakan alat kami agar sesuai dengan data spesifik Anda. Jika tidak, fitur ini telah dikonfigurasi sebelumnya, yang berarti bahwa model AI-nya tetap tidak berubah. Anda menyediakan data dan menggunakan output fitur dalam aplikasi Anda.

Penerjemah

Penerjemah adalah layanan terjemahan mesin yang merupakan bagian dari layanan AI. Penerjemah mendukung banyak produk dan layanan Microsoft.

Kemampuan

Tabel berikut menyediakan daftar kemampuan yang tersedia di Penerjemah.

Kemampuan Deskripsi
Terjemahan Teks Azure Lakukan terjemahan teks antara bahasa sumber dan target yang didukung secara real time. Buat kamus dinamis dan pelajari cara mencegah terjemahan dengan menggunakan Translator API.
Terjemahan dokumen Terjemahan batch asinkron: Terjemahkan file batch dan kompleks sambil mempertahankan struktur dan format dokumen asli. Proses terjemahan batch memerlukan akun Azure Blob Storage yang memiliki kontainer untuk dokumen sumber dan terjemahan Anda.
Terjemahan file tunggal sinkron: Terjemahkan satu file dokumen sendiri atau dengan file glosarium sambil mempertahankan struktur dan format dokumen asli. Proses terjemahan file tidak memerlukan akun Blob Storage. Respons akhir berisi dokumen yang diterjemahkan dan dikembalikan langsung ke klien panggilan.
Penerjemah Kustom Membuat model yang disesuaikan untuk menerjemahkan bahasa, terminologi, dan gaya khusus domain dan industri. Buat kamus (frasa atau kalimat) untuk terjemahan kustom.

Kasus penggunaan

Tabel berikut menyediakan daftar kemungkinan kasus penggunaan untuk Penerjemah.

Kasus penggunaan Dokumentasi
Menerjemahkan teks khusus industri. Penerjemah Kustom
Terjemahkan teks generik yang tidak spesifik untuk industri. Terjemahan Teks Azure

Kecerdasan Dokumen

Language adalah layanan berbasis cloud yang menyediakan fitur NLP untuk memahami dan menganalisis teks. Gunakan layanan ini untuk membantu membangun aplikasi cerdas dengan menggunakan Language Studio berbasis web, REST API, dan pustaka klien.

Kemampuan

Tabel berikut menyediakan daftar beberapa kemampuan yang tersedia di Document Intelligence.

Kemampuan Deskripsi
Ekstraksi kartu nama Model kartu nama Kecerdasan Dokumen menggabungkan kemampuan Pengenalan Karakter Optik (OCR) dengan model pembelajaran mendalam untuk menganalisis dan mengekstrak data dari gambar kartu nama. API menganalisis kartu nama yang dicetak, mengekstrak informasi penting seperti nama depan, nama keluarga, nama perusahaan, alamat email, dan nomor telepon, lalu mengembalikan representasi data JSON terstruktur.
Ekstraksi model kontrak Model kontrak Intelijen Dokumen menggunakan kemampuan OCR untuk menganalisis dan mengekstrak bidang utama dan item baris dari grup entitas kontrak penting tertentu. Kontrak dapat dalam berbagai format dan kualitas, termasuk gambar yang diambil melalui ponsel, dokumen yang dipindai, dan PDF digital. API menganalisis teks dokumen, mengekstrak informasi penting seperti pihak, yurisdiksi, ID kontrak, dan judul, lalu mengembalikan representasi data JSON terstruktur. Model saat ini mendukung format dokumen dalam bahasa Inggris.
Pengambilan data kartu kredit Model kartu kredit/debit Document Intelligence menggunakan kemampuan OCR untuk menganalisis dan mengekstrak bidang kunci dari kartu kredit dan debit. Kartu kredit dan debit dapat muncul dalam berbagai format dan kualitas, termasuk gambar yang diambil melalui ponsel, dokumen yang dipindai, dan PDF digital. API menganalisis teks dokumen, mengekstrak informasi penting seperti nomor kartu, bank penerbit, dan tanggal kedaluwarsa, lalu mengembalikan representasi data JSON terstruktur. Model saat ini mendukung format dokumen dalam bahasa Inggris.
Ekstraksi kartu asuransi kesehatan Model kartu asuransi kesehatan Document Intelligence menggabungkan kemampuan OCR dengan model pembelajaran mendalam untuk menganalisis dan mengekstrak informasi penting dari kartu asuransi kesehatan AS. Kartu asuransi kesehatan adalah dokumen kunci untuk pemrosesan perawatan dan dapat dianalisis secara digital untuk onboarding pasien, informasi cakupan keuangan, pembayaran tanpa uang tunai, dan pemrosesan klaim asuransi. Model kartu asuransi kesehatan menganalisis gambar kartu kesehatan, mengekstrak informasi penting seperti perusahaan asuransi, anggota, resep, dan nomor grup, lalu mengembalikan representasi JSON terstruktur. Kartu asuransi kesehatan dapat muncul dalam berbagai format dan kualitas, termasuk gambar yang diambil melalui ponsel, dokumen yang dipindai, dan PDF digital.
Ekstraksi dokumen pajak di AS Model kontrak Document Intelligence menggunakan kemampuan OCR untuk menganalisis dan mengekstrak bidang utama dan item baris dari grup dokumen pajak tertentu. Dokumen pajak dapat dalam berbagai format dan kualitas, termasuk gambar yang diambil oleh ponsel, dokumen yang dipindai, dan PDF digital. API menganalisis teks dokumen, mengekstrak informasi penting seperti nama pelanggan, alamat penagihan, tanggal jatuh tempo, dan jumlah jatuh tempo, lalu mengembalikan representasi data JSON terstruktur. Model saat ini mendukung format dokumen pajak tertentu dalam bahasa Inggris.
Perpustakaan Klien Document Intelligence mendukung berbagai model yang memungkinkan Anda menambahkan pemrosesan dokumen cerdas ke aplikasi dan alur Anda. Anda dapat menggunakan model khusus domain bawaan atau melatih model kustom yang disesuaikan dengan kebutuhan bisnis dan kasus penggunaan spesifik Anda. Kecerdasan Dokumen dapat digunakan dengan pustaka klien REST API atau Python, C#, Java, dan JavaScript.

Untuk informasi selengkapnya tentang skenario model, lihat Model mana yang harus saya pilih?

Langkah berikutnya