Görüntü İşleme ile GPT-4 Turbo kullanan görüntülerle Azure OpenAI kurumsal sohbeti

Önemli

Bu makalede açıklanan özelliklerden bazıları yalnızca önizleme aşamasında kullanılabilir. Bu önizleme, hizmet düzeyi sözleşmesi olmadan sağlanır ve üretim iş yükleri için önerilmez. Bazı özellikler desteklenmiyor olabileceği gibi özellikleri sınırlandırılmış da olabilir. Daha fazla bilgi için bkz. Microsoft Azure Önizlemeleri Ek Kullanım Koşulları.

Azure OpenAI'nin görüntü modeli olan Görüntü İşleme ile GPT-4 Turbo için kendi görüntü verilerinizi sağlamayı öğrenmek için bu makaleyi kullanın. Vision ile GPT-4 Turbo kurumsal sohbet, modelin kendi görüntülerinize ve görüntü meta verilerinize göre alınan artırılmış nesil kullanarak daha özelleştirilmiş ve hedefli yanıtlar oluşturmasına olanak tanır.

İpucu

Bu makale, GÖRÜNTÜ İşlemeli GPT-4 Turbo modelinde görüntü verilerinizi kullanmaya yöneliktir. Metin verilerinizi kullanarak sohbet web uygulaması dağıtma öğreticisi için bkz. Kurumsal sohbet web uygulaması dağıtma.

Önkoşullar

• Azure aboneliği - Ücretsiz bir abonelik oluşturun.
• Görüntü İşleme modeli dağıtılan GPT-4 Turbo'ya sahip bir Azure OpenAI kaynağı. Model dağıtımı hakkında daha fazla bilgi için bkz. kaynak dağıtım kılavuzu.
• Azure OpenAI kaynağı için en azından Bilişsel Hizmetler Katkıda Bulunanı rolüne atandığınızdan emin olun.
• Azure AI Search kaynağı. Bkz. Portalda Azure AI Arama hizmeti oluşturma. Azure AI Search kaynağınız yoksa, bu kılavuzun devamında veri kaynağınızı eklerken bir kaynak oluşturmanız istenir.
• Azure OpenAI kaynağınız ve Azure AI Search kaynağınızın bağlantı olarak eklendiği bir AI Studio hub'ı.

Görüntü İşlemeli GPT-4 Turbo modeli dağıtma

1. Azure AI Studio'da oturum açın ve çalışmak istediğiniz hub'ı seçin.
2. Sol gezinti menüsünde AI Hizmetleri'ni seçin. GPT-4 Turbo panelini deneyin'i seçin.
3. gpt-4 sayfasında Dağıt'ı seçin. Görüntülenen pencerede Azure OpenAI kaynağınızı seçin. Model sürümü olarak seçin vision-preview .
4. Dağıt'ı seçin.
5. Ardından yeni modelinizin sayfasına gidin ve Oyun alanında aç'ı seçin. Sohbet oyun alanında, oluşturduğunuz GPT-4 dağıtımı Dağıtım açılan listesinde seçilmelidir.

Görüntü veri kaynağınızı seçin

1. Sol bölmede Veri ekle sekmesini ve ardından Veri kaynağı ekle'yi seçin.
2. Görüntülenen pencerede bir veri kaynağı seçeneği belirleyin. Her seçenek, görüntüleriniz üzerinde eğitilmiş bir Azure AI Search dizini kullanır ve sohbet oyun alanında artırılmış nesil almak için kullanılabilir.
   • Azure AI Search: Mevcut bir Azure AI Search dizininiz varsa bunu veri kaynağı olarak kullanabilirsiniz.
   • Azure Blob Depolama: Azure Blob depolama seçeneği özellikle çok sayıda görüntü dosyanız varsa ve her birini el ile karşıya yüklemek istemiyorsanız kullanışlıdır. Azure AI Studio sizin için bir görüntü arama dizini oluşturur.
   • Görüntü dosyalarını ve meta verileri karşıya yükleme: Oyun alanı kullanarak görüntü dosyalarını ve meta verileri karşıya yükleyebilirsiniz. Bu seçenek, az sayıda görüntü dosyanız varsa kullanışlıdır. Azure AI Studio sizin için bir görüntü arama dizini oluşturur.

Görüntü verilerinizi ekleme

Azure AI Arama

Mevcut bir Azure AI Arama dizininiz varsa bunu veri kaynağı olarak kullanabilirsiniz. Henüz bir arama dizininiz yoksa ancak kendi başınıza bir dizin oluşturmak istiyorsanız GitHub'daki yapay zeka Arama vektör arama deposunu izleyin. Bu depo, görüntü dosyalarınızı içeren bir dizin oluşturmak için betikler sağlar.

1. Oyun alanının Veri kaynağı seçin veya ekleyin penceresinde Azure AI Arama'yı seçin ve dizininizin ayrıntılarını girin. Dağıtımların ve bağlantıların hesabınızda kullanıma neden olduğunu onaylamak için kutuları seçin.
2. İsteğe bağlı olarak Özel alan eşlemesi kullan seçeneğini etkinleştirin. Bu, arama dizininizdeki özel alanlar ile Azure OpenAI sohbet modellerinin artırılmış oluşturma sırasında kullandığı standart alanlar arasındaki eşlemeyi denetlemenize olanak tanır.
3. İleri'yi seçin ve sonraki sayfada ayarlarınızı gözden geçirin. Ardından Kaydet ve kapat'ı seçin.
4. Sohbet oyun alanında verilerinizin eklendiğini görebilirsiniz.

Azure Blob Depolama

Görüntüler içeren mevcut bir Azure Blob Depolama kapsayıcınız varsa, bunu kullanarak bir görüntü arama dizini oluşturabilirsiniz. Yeni bir blob depolama hesabı oluşturmak istiyorsanız Azure Blob depolama hızlı başlangıç belgelerine bakın.

Azure Blob depolama hesabınız hem görüntü dosyalarını hem de görüntü dosyası yollarını ve meta verileri içeren bir JSON dosyası içermelidir.

Meta veri JSON dosyanız:

• Sözcüğüyle metadata başlayan bir dosya adı olmalıdır (tümü boşluk olmadan küçük harfle).
• En fazla 10.000 resim dosyasını listeleyin. Kapsayıcınızda daha fazla dosya varsa, her biri bu üst sınıra kadar olan birden çok JSON dosyanız olabilir.

JSON meta veri dosyası şu şekilde biçimlendirilmelidir:

[
    {
        "image_blob_path": "image1.jpg",
        "description": "description of image1"
    },
    {
        "image_blob_path": "image2.jpg",
        "description": "description of image2"
    },
    ...
    {
        "image_blob_path": "image50.jpg",
        "description": "description of image50"
    }
]

Görüntü dosyaları ve en az bir meta veri JSON dosyasıyla doldurulmuş bir blob depolama kapsayıcınız olduktan sonra blob depolamayı veri kaynağı olarak eklemeye hazır olursunuz.

1. Oyun alanının Veri kaynağı seçin veya ekleyin penceresinde Azure Blob Depolama seçin ve veri kaynağı ayrıntılarınızı girin. Ayrıca oluşturulacak Azure AI Search dizini için bir ad seçin.

   Not

   Azure OpenAI'ın verilerinize erişmek ve verileri dizine eklemek için hem depolama hesabı kaynağına hem de arama kaynağına ihtiyacı vardır. Verileriniz Azure aboneliğinizde güvenli bir şekilde depolanır.

   Azure Yapay Zeka Stüdyosu'nda seçili depolama hesabına ilk kez veri eklerken çıkış noktaları arası kaynak paylaşımını (CORS) açmanız istenebilir. Azure Yapay Zeka Stüdyosu ve Azure OpenAI'ın Azure Blob depolama hesabınıza erişmesi gerekir.

   

2. Dağıtımların ve bağlantıların hesabınızda kullanıma neden olduğunu onaylamak için kutuları seçin. Sonra İleri'yi seçin.

3. Girdiğiniz ayrıntıları gözden geçirin ve Kaydet ve kapat'ı seçin.

   

4. Artık sohbet oyun alanında veri alımınızın devam ettiğini görebilirsiniz. Devam etmeden önce, durum yerine veri kaynağını ve dizin adını görene kadar bekleyin.

Görüntü dosyalarını ve meta verileri karşıya yükleme

1. Veri kaynağı seçin veya ekleyin sayfasında Veri kaynağı seç açılan listesinden Dosyaları karşıya yükle'yi seçin.

2. Veri kaynağı ayrıntılarınızı girin. Ayrıca oluşturulacak Azure AI Search dizini için bir ad seçin.

   Not

   Azure OpenAI'ın verilerinize erişmek ve verileri dizine eklemek için hem depolama hesabı kaynağına hem de arama kaynağına ihtiyacı vardır. Verileriniz Azure aboneliğinizde güvenli bir şekilde depolanır.

   Azure Yapay Zeka Stüdyosu'nda seçili depolama hesabına ilk kez veri eklerken çıkış noktaları arası kaynak paylaşımını (CORS) açmanız istenebilir. Azure Yapay Zeka Stüdyosu ve Azure OpenAI'ın Azure Blob depolama hesabınıza erişmesi gerekir.

   

3. Dağıtımların ve bağlantıların hesabınızda kullanıma neden olduğunu onaylamak için kutuları seçin. Sonra İleri'yi seçin.

4. Dosyaları karşıya yükle sayfasında Dosyaya gözat'ı seçin ve karşıya yüklemek istediğiniz dosyaları seçin. Birden fazla dosyayı karşıya yüklemek istiyorsanız, şimdi yükleyin. Daha sonra aynı oyun alanı oturumunda daha fazla dosya ekleyemezsiniz.

   Boyutu 16 MB'a kadar olan görüntü dosyalarınız için aşağıdaki dosya türleri desteklenir:

   • .jpg
   • .png
   • .gif
   • .bmp
   • .tiff

5. Dosyaları Azure Blob depolama hesabınıza yüklemek için Karşıya Yükle'yi seçin. Sonra İleri'yi seçin.

   

6. Meta veri ekle sayfasında, ilgili metin alanlarındaki her resim için bir metin açıklaması girin. Sonra İleri'yi seçin.

   

7. Girdiğiniz ayrıntıları gözden geçirin. Sizin için oluşturulacak depolama kapsayıcısının ve arama dizininin adlarını görebilirsiniz. Kaydet ve kapat'ı seçin.

   

8. Artık sohbet oyun alanında veri alımınızın devam ettiğini görebilirsiniz. Devam etmeden önce, durum yerine veri kaynağını ve dizin adını görene kadar bekleyin.

Görüntü İşlemeli GPT-4 Turbo modelinizle verilerinizi kullanma

Görüntü verilerinizi ekledikten sonra, görüntü verilerinizi temel alan bir sohbet konuşmasını deneyebilirsiniz.

1. Yeni bir resim yüklemek için sohbet penceresindeki ek düğmesini kullanın. Veri kümenizdeki diğer görüntülerle ilişkisi hakkında bir soru sorun.

2. Model, görüntü verilerinizi temel alan bir yanıtla yanıt verir.

Veri kaynakları ekleme ve kaldırma

Azure OpenAI, sohbet oturumu başına yalnızca bir veri kaynağının kullanılmasına izin verir. Yeni bir veri kaynağı eklemek istiyorsanız, önce mevcut veri kaynağını kaldırmanız gerekir. Bunu yapmak için veri kaynağı bilgilerinizin altındaki Veri kaynağını kaldır'ı seçin.

Bir veri kaynağını kaldırdığınızda bir uyarı iletisi görürsünüz. Veri kaynağının kaldırılması sohbet oturumunu temizler ve tüm oyun alanı ayarlarını sıfırlar.

Sonraki adımlar

• Azure AI Studio'da proje oluşturmayı öğrenin.
• Kurumsal sohbet web uygulaması dağıtma