启用检测到的服装功能

重要

由于Azure 媒体服务停用公告,Azure AI 视频索引器会宣布 Azure AI 视频索引器功能调整。 请参阅 与 Azure 媒体服务(AMS)停用 相关的更改,了解 Azure AI 视频索引器帐户的含义。 请参阅 AMS 停用准备:VI 更新和迁移指南

Azure AI 视频索引器可检测与视频中佩戴者关联的服装,并提供检测到的服装类型和外观时间戳(开始、结束)等信息。 API 返回检测置信度。 检测到的服装类型为长裤、短裤、长袖、短袖和裙子或连衣裙。

此功能可能发挥作用的场景的两个示例如下:

  • 创建原始数据(如视频广告、新闻或运动比赛)时为内容创建者提高效率(例如在视频存档中查找穿红色衬衫的人)。
  • 事件后分析 - 检测并跟踪人员的移动,以更好地分析事故或犯罪事件后(例如爆炸、银行抢劫、暴力事件)。

通过选择“高级选项”->“高级视频”或“高级视频 + 音频”预设(在“视频 + 音频索引”下),可在编制文件索引时使用新添加的服装检测功能。 标准索引不包括此新的高级模型。

此屏幕截图代表一个索引视频选项

选择在 Azure AI 视频索引器网站上查看视频见解时,可以从观察的人员跟踪见解中查看人员检测到的服装。 如果选择一个人的缩略图,检测到的服装随即可用。

观察到的人员屏幕截图

如果你有兴趣在 Azure AI 视频索引器网站上的视频时间线中查看人员检测到的服装,请转到“查看 ->Show Insights”并选择“所有”选项,或“查看 ->自定义视图”并选择“观察人员”。

被观察者屏幕截图

搜索特定服装以返回使用见解的搜索栏或 Azure AI 视频索引器网站上的视频时间线返回所有已观察的人。

以下 JSON 响应说明了跟踪检测到的服装关联的人员时 Azure AI 视频索引器返回的内容:

"observedPeople": [
    {
        "id": 1,
        "thumbnailId": "68bab0f2-f084-4c2b-859b-a951ed03c209",
        "clothing": [
            {
                "id": 1,
                "type": "sleeve",
                "properties": {
                    "length": "short"
                }
            },
            {
                "id": 2,
                "type": "pants",
                "properties": {
                    "length": "long"
                }
            }
        ],
        "instances": [
            {
                "adjustedStart": "0:00:05.5055",
                "adjustedEnd": "0:00:09.9766333",
                "start": "0:00:05.5055",
                "end": "0:00:09.9766333"
            }
        ]
    },
    {
        "id": 2,
        "thumbnailId": "449bf52d-06bf-43ab-9f6b-e438cde4f217",
        "clothing": [
            {
                "id": 1,
                "type": "sleeve",
                "properties": {
                    "length": "short"
                }
            },
            {
                "id": 2,
                "type": "pants",
                "properties": {
                    "length": "long"
                }
            }
        ],
        "instances": [
            {
                "adjustedStart": "0:00:07.2072",
                "adjustedEnd": "0:00:10.5105",
                "start": "0:00:07.2072",
                "end": "0:00:10.5105"
            }
        ]
    },
]

限制和假设

由于检测到的服装功能使用观察的人跟踪,跟踪质量很重要。 有关跟踪注意事项和限制,请参阅 选择用例时的注意事项和限制。

  • 由于服装检测取决于人的身体的可见性,如果一个人完全可见,准确性更高。
  • 当一个人没有衣服时,也许有错误。
  • 在这种情况下,或者其他可见性不佳的场景,可能会给出结果,例如长裤、裙子或裙子或连衣裙。