Melacak orang yang diamati dalam video

Penting

Karena pengumuman penghentian Azure Media Services, Azure AI Video Indexer mengumumkan penyesuaian fitur Azure AI Video Indexer. Lihat Perubahan yang terkait dengan penghentian Azure Media Service (AMS) untuk memahami apa artinya ini untuk akun Azure AI Video Indexer Anda. Lihat panduan Mempersiapkan penghentian AMS: Pembaruan VI dan migrasi.

Pengindeks Video Azure AI mendeteksi orang yang diamati dalam video dan memberikan informasi seperti lokasi orang dalam bingkai video dan tanda waktu yang tepat (mulai, berakhir) saat seseorang muncul. API mengembalikan koordinat kotak pembatas (dalam piksel) untuk setiap instans orang yang terdeteksi, termasuk keyakinan deteksi.

Beberapa skenario saat fitur ini bermanfaat:

  • Analisis pascaperistiwa—mendeteksi dan melacak pergerakan seseorang untuk menganalisis pascaperistiwa kecelakaan atau kejahatan (misalnya, ledakan, perampokan bank, insiden) dengan lebih baik.
  • Meningkatkan efisiensi saat membuat data mentah untuk pembuat konten, seperti iklan video, berita, atau pertandingan olahraga (misalnya, menemukan orang yang mengenakan kemeja merah dalam arsip video).
  • Membuat ringkasan dari video panjang, seperti bukti pengadilan tentang penampilan orang tertentu dalam video, menggunakan ID yang sama dari orang yang terdeteksi.
  • Mempelajari dan menganalisis tren dari waktu ke waktu, misalnya—bagaimana pelanggan bergerak melintasi lorong di pusat perbelanjaan atau berapa banyak waktu yang mereka habiskan di antrean kasir.

Misalnya, jika video berisi seseorang, operasi deteksi akan mencantumkan penampilan orang tersebut bersama dengan koordinat mereka dalam bingkai video. Anda dapat menggunakan fungsi ini untuk menentukan jalur orang tersebut dalam video. Fungsi ini juga memungkinkan Anda menentukan apakah ada beberapa instans orang yang sama dalam video.

Fitur pelacakan orang yang diamati yang baru ditambahkan tersedia saat mengindeks file Anda dengan memilih opsi Tingkat Lanjut ->Video tingkat lanjut atau Preset video + audio tingkat lanjut (di bawah Pengindeksan Video + audio). Pengindeksan standar tidak akan menyertakan model tingkat lanjut baru ini.

Cuplikan layar pelacakan orang yang diamati

Saat Anda memilih untuk melihat Insight video Anda di situs web Video Indexer, Pelacakan Orang yang Diamati akan muncul di halaman dengan semua gambar mini orang yang terdeteksi. Anda dapat memilih video gambar kecil seseorang dan melihat tempat orang tersebut muncul di pemutar video.

Respons JSON berikut mengilustrasikan apa yang dikembalikan Video Indexer saat melacak orang yang diamati:

    {
    ...
    "videos": [
        {
            ...
            "insights": {
                ...
                "observedPeople": [{
                    "id": 1,
                    "thumbnailId": "560f2cfb-90d0-4d6d-93cb-72bd1388e19d",
                    "instances": [
                        {
                            "adjustedStart": "0:00:01.5682333",
                            "adjustedEnd": "0:00:02.7027",
                            "start": "0:00:01.5682333",
                            "end": "0:00:02.7027"
                        }
                    ]
                },
                {
                    "id": 2,
                    "thumbnailId": "9c97ae13-558c-446b-9989-21ac27439da0",
                    "instances": [
                        {
                            "adjustedStart": "0:00:16.7167",
                            "adjustedEnd": "0:00:18.018",
                            "start": "0:00:16.7167",
                            "end": "0:00:18.018"
                        }
                    ]
                },]
            }
            ...
            }
    ]
}

Batasan dan asumsi

Untuk informasi selengkapnya, lihat Pertimbangan dan batasan saat memilih kasus penggunaan.