Activer la fonctionnalité de vêtements détectés

Important

En raison de l’annonce de mise hors service d’Azure Media Services, Azure AI Video Indexer annonce les ajustements des fonctionnalités d’Azure AI Video Indexer. Consultez les modifications relatives à la mise hors service Azure Media Service (AMS) pour comprendre ce que cela signifie pour votre compte Azure AI Video Indexer. Consultez le guide de préparation de la mise hors service AMS : Mise à jour et migration vi.

Azure AI Video Indexer détecte les vêtements associés à la personne qui le porte dans la vidéo et fournit des informations telles que le type de vêtements détectés et l’horodatage de l’apparence (début, fin). L’API retourne le niveau de confiance de la détection. Les types de vêtements détectés sont des pantalons longs, pantalons courts, manches longues, manches courtes, jupe ou robe.

Voici deux exemples pour lesquels cette fonctionnalité peut être utile :

  • Améliorez l’efficacité lors de la création de données brutes pour des créateurs de contenu, comme la publicité par vidéo, des actualités ou des rencontres sportives (par exemple, rechercher des personnes portant un maillot rouge dans une archive vidéo).
  • Analyse post-événement : détectez et suivez l’action d’une personne pour mieux analyser un événement postérieur à un accident ou un crime (par exemple, une explosion, un cambriolage de banque, un incident).

La fonctionnalité de détection des vêtements récemment ajoutée est disponible quand vous indexez votre fichier en choisissant la présélection Option avancée ->Vidéo avancée ou Vidéo + audio avancés (sous Indexation vidéo + audio). L’indexation standard n’inclut pas ce nouveau modèle avancé.

Cette capture d’écran représente une option d’indexation de la vidéo

Lorsque vous choisissez de voir Recommandations de votre vidéo sur le site web Azure AI Video Indexer, les vêtements détectés par Personnes peuvent être affichés à partir de l’insight de suivi Personnes observé. Quand vous choisissez une miniature d’une personne, les vêtements détectés deviennent disponibles.

Capture d’écran de personnes observées

Si vous souhaitez afficher les vêtements détectés par Personnes dans la chronologie de votre vidéo sur le site web d’Azure AI Video Indexer, accédez à Afficher ->Afficher Recommandations et sélectionnez l’option All, ou View ->Custom View, puis sélectionnez Observed Personnes.

Capture d’écran d’une personne observée

La recherche d’un vêtement spécifique pour retourner toutes les personnes observées qu’elle porte est activée à l’aide de la barre de recherche de l’Recommandations ou de la chronologie de votre vidéo sur le site web Azure AI Video Indexer.

La réponse JSON suivante illustre ce qu’Azure AI Video Indexer retourne lors du suivi des personnes observées ayant détecté des vêtements associés :

"observedPeople": [
    {
        "id": 1,
        "thumbnailId": "68bab0f2-f084-4c2b-859b-a951ed03c209",
        "clothing": [
            {
                "id": 1,
                "type": "sleeve",
                "properties": {
                    "length": "short"
                }
            },
            {
                "id": 2,
                "type": "pants",
                "properties": {
                    "length": "long"
                }
            }
        ],
        "instances": [
            {
                "adjustedStart": "0:00:05.5055",
                "adjustedEnd": "0:00:09.9766333",
                "start": "0:00:05.5055",
                "end": "0:00:09.9766333"
            }
        ]
    },
    {
        "id": 2,
        "thumbnailId": "449bf52d-06bf-43ab-9f6b-e438cde4f217",
        "clothing": [
            {
                "id": 1,
                "type": "sleeve",
                "properties": {
                    "length": "short"
                }
            },
            {
                "id": 2,
                "type": "pants",
                "properties": {
                    "length": "long"
                }
            }
        ],
        "instances": [
            {
                "adjustedStart": "0:00:07.2072",
                "adjustedEnd": "0:00:10.5105",
                "start": "0:00:07.2072",
                "end": "0:00:10.5105"
            }
        ]
    },
]

Limitations et hypothèses

Étant donné que la fonctionnalité de vêtements détectée utilise le suivi des personnes observées, la qualité du suivi est importante. Pour connaître les considérations et limitations relatives au suivi, consultez Considérations et limitations lors du choix d’un cas d’usage.

  • Étant donné que la détection des vêtements dépend de la visibilité du corps de la personne, la précision est plus élevée si une personne est entièrement visible.
  • Il y a peut-être des erreurs quand une personne est sans vêtements.
  • Dans ce scénario ou d’autres d’une mauvaise visibilité, les résultats peuvent être donnés tels que des pantalons longs et jupe ou robe.