Отслеживание наблюдаемых людей в видео

Внимание

Из-за объявления об Службы мультимедиа Azure выхода на пенсию Индексатор видео Azure объявляет корректировки функций Индексатора видео Azure. Ознакомьтесь с изменениями, связанными с выходом на пенсию службы мультимедиа Azure (AMS), чтобы понять, что это означает для учетной записи Индексатора видео Azure. Ознакомьтесь с руководством по обновлению и миграции AMS: VI.

Индексатор видео Azure AI обнаруживает наблюдаемых людей в видео и предоставляет такие сведения, как расположение человека в видеокадре и точный метка времени (начало, конец) при появлении человека. API возвращает координаты ограничивающего прямоугольника (в пикселях) для каждого обнаруженного человека, включая уверенность в обнаружении.

Вот некоторые сценарии, в которых эта функция может быть полезна.

• Анализ после событий — обнаружение и отслеживание движения человека, чтобы лучше анализировать несчастный случай или преступление постфактум (например, взрыв, ограбление банка, инцидент).
• Повышение эффективности при создании необработанных данных для составителей содержимого, такого как рекламное видео, новости или спортивные игры (например, поиск людей в красных футболках в видеоархиве).
• Создание сводки из длинного видео, такого как судебное свидетельство появления определенного человека в видео, с использованием одинакового идентификатора обнаруженного человека.
• Изучите и анализируйте тенденции с течением времени, например, как клиенты переходят по проходам в супермаркетах или сколько времени они тратят в очередях.

Например, если видео содержит человека, операция обнаружения выведет список его появлений вместе с координатами в видеокадре. Эту функцию можно использовать для определения пути перемещения пользователя в видео. Также она позволяет определить, присутствует ли в видеоролике один и тот же человек несколько раз.

Добавленная функция отслеживания наблюдаемых пользователей доступна при индексировании файла, выбрав расширенный параметр ->Advanced video или Advanced video + Advanced audio preset (в разделе "Видео + аудио индексирование"). Стандартная индексация не будет включать эту новую расширенную модель.

При выборе Аналитика видео на веб-сайте Индексатора видео на странице будет отображаться отслеживание наблюдаемых Люди со всеми обнаруженными эскизами людей. Можно выбрать эскиз человека и увидеть, где он отображается в видеопроигрывателе.

Следующий ответ JSON иллюстрирует, что индексатор видео возвращает при отслеживании наблюдаемых пользователей:

    {
    ...
    "videos": [
        {
            ...
            "insights": {
                ...
                "observedPeople": [{
                    "id": 1,
                    "thumbnailId": "560f2cfb-90d0-4d6d-93cb-72bd1388e19d",
                    "instances": [
                        {
                            "adjustedStart": "0:00:01.5682333",
                            "adjustedEnd": "0:00:02.7027",
                            "start": "0:00:01.5682333",
                            "end": "0:00:02.7027"
                        }
                    ]
                },
                {
                    "id": 2,
                    "thumbnailId": "9c97ae13-558c-446b-9989-21ac27439da0",
                    "instances": [
                        {
                            "adjustedStart": "0:00:16.7167",
                            "adjustedEnd": "0:00:18.018",
                            "start": "0:00:16.7167",
                            "end": "0:00:18.018"
                        }
                    ]
                },]
            }
            ...
            }
    ]
}

Допущения и ограничения

Дополнительные сведения см. в разделе "Рекомендации и ограничения" при выборе варианта использования.