레이블 식별 인사이트 가져오기

아티클
07/26/2024

Important

Azure Media Services 사용 중지로 인한 Azure Video Indexer 콘텐츠 마이그레이션 마감일이 지났습니다. 자세한 내용은 사용 중지 가이드를 참조하세요.

레이블 식별

레이블 식별은 미디어 파일의 동영상 장면에 나타나는 선글라스 또는 수영과 같은 작업과 같은 시각적 개체를 식별하는 Azure AI Video Indexer AI 기능입니다. 많은 레이블 식별 범주가 있으며 일단 추출되면 레이블 식별 인스턴스가 Insights 탭에 표시되고 50개 이상의 언어로 번역될 수 있습니다. 레이블을 클릭하면 미디어 파일의 인스턴스가 열리고 이전 재생 또는 다음 재생을 선택하여 더 많은 인스턴스를 볼 수 있습니다.

레이블 식별 사용 사례

컨텍스트 보급 또는 브랜딩을 위해 프레임에서 레이블을 추출합니다. 예를 들어, 해변에서 장면에 따라 맥주 광고를 게재합니다.
예를 들어, 영화의 백그라운드 스토리텔러와 같이 시각 장애인을 위한 접근성을 향상시키기 위해 장면의 구두 설명을 만듭니다.
뉴스에 대한 특집 기사를 만들기 위해 특정 개체에 대한 인사이트를 얻기 위해 미디어 보관을 심층적으로 검색합니다.
관련 레이블을 사용하여 예고편에 대한 콘텐츠를 만들고, 릴, 소셜 미디어 또는 새 클립을 강조 표시합니다.

웹 포털을 사용하여 인사이트 JSON 보기

비디오를 업로드하고 인덱싱한 후에는 웹 포털을 사용하여 JSON 형식으로 인사이트를 다운로드할 수 있습니다.

라이브러리 탭을 선택합니다.
작업할 미디어를 선택합니다.
다운로드 및 인사이트(JSON)를 선택합니다. JSON 파일이 새 브라우저 탭에서 열립니다.
예제 응답에 설명된 키 쌍을 찾습니다.

API 사용

비디오 인덱스 가져오기 요청을 사용합니다. 을 전달하는 &includeSummarizedInsights=false것이 좋습니다.
예제 응답에 설명된 키 쌍을 찾습니다.

예제 응답

    "labels": [
        {
        "id": 1,
        "name": "human face",
        "language": "en-US",
        "instances": [
            {
            "confidence": 0.9987,
            "adjustedStart": "0:00:00",
            "adjustedEnd": "0:00:25.6",
            "start": "0:00:00",
            "end": "0:00:25.6"
            },
            {
            "confidence": 0.9989,
            "adjustedStart": "0:01:21.067",
            "adjustedEnd": "0:01:41.334",
            "start": "0:01:21.067",
            "end": "0:01:41.334"
            }
        ]
        },
        {
        "id": 2,
        "name": "person",
        "referenceId": "person",
        "language": "en-US",
        "instances": [
            {
            "confidence": 0.9959,
            "adjustedStart": "0:00:00",
            "adjustedEnd": "0:00:26.667",
            "start": "0:00:00",
            "end": "0:00:26.667"
            },
            {
            "confidence": 0.9974,
            "adjustedStart": "0:01:21.067",
            "adjustedEnd": "0:01:41.334",
            "start": "0:01:21.067",
            "end": "0:01:41.334"
            }
        ]
        },

구성 요소

레이블 절차 중에 미디어 파일의 개체는 다음과 같이 처리됩니다.

구성 요소	정의
원본	사용자는 인덱싱을 위해 원본 파일을 업로드합니다.
태깅	이미지에 태그가 지정되고 레이블이 지정됩니다. 예를 들어, 문, 의자, 여자, 헤드폰, 청바지.
필터링 및 집계	태그는 신뢰 수준에 따라 필터링되고 범주에 따라 집계됩니다.
신뢰 수준	각 레이블의 예상 신뢰 수준은 0에서 1 사이의 범위로 계산됩니다. 신뢰도 점수는 결과의 정확도에 대한 확실성을 나타냅니다. 예를 들어 82% 확실성은 0.82 점수로 표시됩니다.

투명성 메모

Important

모든 VI 기능에 대한 투명도 참고 개요를 읽는 것이 중요합니다. 각 인사이트에는 자체의 투명성 메모도 있습니다.

결과의 정확도를 신중하게 고려하고, 보다 정확한 검색을 촉진하고, 비디오의 품질을 확인하며, 저품질 비디오는 검색된 인사이트에 영향을 줄 수 있습니다.
레이블이 비디오의 일부를 검색할 수 없는 법 집행에 사용할 때 신중하게 고려합니다. 공정하고 고품질의 결정을 내리려면 레이블을 사람의 감독과 결합합니다.
심각한 부정적인 영향을 미칠 수 있는 결정에 레이블 식별을 사용하지 마세요. 기계 학습 모델은 검색되지 않거나 잘못된 분류를 출력할 수 있습니다. 잘못된 출력에 기반한 결정은 심각한 역효과를 초래할 수 있습니다. 또한 개인에게 심각한 영향을 미칠 가능성이 있는 결정에 대한 사용자 검토를 포함하는 것이 좋습니다.

샘플 코드

VI에 대한 모든 샘플 보기

다음을 통해 공유