Azure OpenAI GPT-4 Turbo dengan alat Visi di portal Azure AI Foundry

Penting

Item-item yang ditandai (pratinjau) dalam artikel ini saat ini sedang berada dalam pratinjau publik. Pratinjau ini disediakan tanpa kesepakatan tingkat layanan, dan kami tidak merekomendasikannya untuk penggunaan dalam lingkungan produksi. Fitur tertentu mungkin tidak didukung atau mungkin memiliki kemampuan terbatas. Untuk informasi lebih lanjut, lihat Supplemental Terms of Use for Microsoft Azure Previews.

Alur prompt Azure OpenAI GPT-4 Turbo dengan alat Visi memungkinkan Anda menggunakan Azure OpenAI GPT-4 Turbo dengan penyebaran model Visi untuk menganalisis gambar dan memberikan respons tekstual terhadap pertanyaan tentang mereka.

Prasyarat

Nota

Anda harus menggunakan proyek berbasis hub untuk fitur ini. Proyek Foundry tidak didukung. Lihat Bagaimana cara mengetahui jenis proyek mana yang saya miliki? dan Membuat proyek berbasis hub.

• Sebuah langganan Azure. Jika Anda tidak memiliki langganan Azure, buat akun gratis.
• Jika Anda tidak memilikinya, buat proyek berbasis hub.

• Sebuah langganan Azure. Anda dapat membuatnya secara gratis.
• Hub Azure AI Foundry dengan GPT-4 Turbo dengan model Visi yang disebarkan di salah satu wilayah yang mendukung GPT-4 Turbo dengan Visi. Saat Anda menyebarkan dari halaman Penyebaran proyek, pilih gpt-4 sebagai nama model dan vision-preview sebagai versi model.

Bangun dengan Azure OpenAI GPT-4 Turbo dengan alat Visi

1. Membuat atau membuka alur di Azure AI Foundry. Untuk informasi selengkapnya, lihat Membuat alur.

2. Pilih + Alat>lainnya Azure OpenAI GPT-4 Turbo dengan Visi untuk menambahkan Azure OpenAI GPT-4 Turbo dengan alat Visi ke alur Anda.

   

3. Pilih koneksi ke Azure OpenAI Anda di Model Azure AI Foundry. Misalnya, Anda dapat memilih koneksi Default_AzureOpenAI . Untuk informasi selengkapnya, lihat Prasyarat.

4. Masukkan nilai untuk Azure OpenAI GPT-4 Turbo dengan parameter input alat Visi yang dijelaskan dalam tabel Input. Misalnya, Anda dapat menggunakan perintah contoh ini:

   # system:
   As an AI assistant, your task involves interpreting images and responding to questions about the image.
   Remember to provide accurate answers based on the information present in the image.
   
   # user:
   Can you tell me what the image depicts?
   ![image]({{image_input}})
   

5. Pilih Validasi dan uraikan input untuk memvalidasi input alat.

6. Tentukan gambar yang akan dianalisis dalam image_input parameter input. Misalnya, Anda dapat mengunggah gambar atau memasukkan URL gambar untuk dianalisis. Jika tidak, Anda dapat menempelkan atau menyeret dan meletakkan gambar ke dalam alat.

7. Tambahkan lebih banyak alat ke alur Anda, sesuai kebutuhan. Atau pilih Jalankan untuk menjalankan alur.

Output dijelaskan dalam tabel Output.

Berikut adalah contoh respons output:

{
    "system_metrics": {
        "completion_tokens": 96,
        "duration": 4.874329,
        "prompt_tokens": 1157,
        "total_tokens": 1253
    },
    "output": "The image depicts a user interface for Azure's OpenAI GPT-4 service. It is showing a configuration screen where settings related to the AI's behavior can be adjusted, such as the model (GPT-4), temperature, top_p, frequency penalty, etc. There's also an area where users can enter a prompt to generate text, and an option to include an image input for the AI to interpret, suggesting that this particular interface supports both text and image inputs."
}

Masukan

Parameter input berikut tersedia.

Nama	Tipe	Deskripsi	Diperlukan
koneksi	AzureOpenAI	Koneksi Azure OpenAI yang akan digunakan dalam alat.	Ya
nama_penerapan	benang	Model bahasa yang akan digunakan.	Ya
isyarat	benang	Perintah teks yang digunakan model bahasa untuk menghasilkan responsnya. Templat Jinja untuk menyusun perintah dalam alat ini mengikuti struktur yang mirip dengan API obrolan di alat model bahasa besar (LLM). Untuk mewakili input gambar dalam perintah Anda, Anda dapat menggunakan sintaks . Input gambar dapat diteruskan dalam userpesan , system, dan assistant .	Ya
maksimum token	bilangan bulat	Jumlah maksimum token yang dihasilkan dalam respons. Defaultnya adalah 512.	Tidak.
suhu	mengapung	Keacakan teks yang dihasilkan. Pengaturan awal adalah 1.	Tidak.
berhenti	daftar	Urutan penghentian untuk teks yang dihasilkan. Defaultnya adalah null.	Tidak.
top_p	mengapung	Probabilitas menggunakan pilihan teratas dari token yang dihasilkan. Pengaturan awal adalah 1.	Tidak.
presence_penalty (penalti kehadiran)	mengapung	Nilai yang mengontrol perilaku model mengenai frasa berulang. Nilai bawaan adalah 0.	Tidak.
penalti frekuensi	mengapung	Nilai yang mengontrol perilaku model mengenai menghasilkan frasa langka. Nilai bawaan adalah 0.	Tidak.

Output

Parameter output berikut tersedia.

Tipe pengembalian	Deskripsi
benang	Teks dari satu respons percakapan

Langkah selanjutnya

• Pelajari selengkapnya tentang cara memproses gambar dalam alur perintah.
• Pelajari selengkapnya tentang cara membuat alur.