Azure AI Content Understanding은 문서, 이미지, 비디오 및 오디오와 같은 다중 모달 콘텐츠에서 구조화된 인사이트를 파생하도록 설계된 고급 생성 AI 서비스입니다. 버전 2025-05-01-preview가 도입됨에 따라, 서비스는 이제 두 가지 다른 모드, 즉 standard와 pro를 제공합니다.
표준: 이 모드는 다양한 콘텐츠 형식을 처리하기 위한 기본 솔루션으로 사용됩니다. 모든 데이터 형식의 특정 작업에 맞게 효율적인 스키마 추출을 제공하도록 최적화되었습니다. 이 모드는 비용 효율성과 감소된 대기 시간을 강조하여 일반적인 처리 요구 사항에 맞게 구조화된 인사이트에 액세스할 수 있도록 합니다.
Pro: 이 모드는 고급 사용 사례, 특히 다단계 추론 및 복잡한 의사 결정이 필요한 경우(예: 불일치 식별, 추론 그리기 및 정교한 의사 결정)를 위해 설계되었습니다. pro 모드는 여러 콘텐츠 파일의 입력을 허용하고 분석기 생성 시 참조 데이터를 제공하는 옵션을 포함합니다. 현재 pro 모드는 문서 기반 데이터에 대해서만 제공됩니다.
표준 모드 개요
Content Understanding 표준 모드는 문서, 비디오, 이미지, 오디오 및 텍스트를 비롯한 다양한 데이터 형식에 걸쳐 구조화된 인사이트를 제공합니다. 데이터 추론은 지원하지 않지만 비용 및 대기 시간을 최소화하므로 광범위한 데이터 중심 시나리오에 이상적입니다. 이 모드를 사용하면 스키마를 만들거나 사용자 지정하여 요구 사항에 맞는 정확한 인사이트를 추출할 수 있습니다. 또한 문서 데이터에 대한 데이터 레이블 지정을 통합하여 사용자 입력을 통해 출력 품질을 향상시킬 수 있습니다.
표준 모드: 사용 사례
표준은 모든 유형의 데이터에 필요한 정확한 인사이트를 추출하는 데 이상적인 서비스입니다. 데이터 콘텐츠의 잠금을 해제하려는 경우 시나리오에 복잡한 추론 또는 의사 결정이 필요하지 않을 수 있습니다. 표준 모드가 적합한 시나리오는 다음과 같습니다.
- RAG 검색 워크플로를 구동하도록 데이터를 구조화하고 AI Search와 통합합니다.
- Microsoft Fabric과 통합할 데이터 추출
- 광고 비디오를 분석하여 콘텐츠 지침을 확인합니다.
- 비디오 영상을 분할하여 장을 만들고 이상적인 광고 중단을 식별합니다.
- 스포츠 게임에서 중요한 데이터 요소를 추출하고 경기 후 요약을 제공합니다.
Pro 모드 개요
Content Understanding Pro 모드는 복잡한 사용 사례가 있는 고객을 위해 조정되어 다단계 추론 기능 및 다중 입력 문서 지원을 제공합니다. 입력 콘텐츠와 참조 데이터를 둘 다 추론할 수 있으므로 복잡한 분석이 필요한 시나리오에 적합합니다. 프로 모드는 참조 데이터를 통합하여 각 요청에 컨텍스트를 추가하여 유효성 검사 및 보강과 같은 작업을 지원합니다. 현재 pro 모드는 문서 데이터에만 사용할 수 있습니다.
Pro 모드 참조 데이터
분석기를 만드는 동안 유추 시간에 서비스를 참조하는 컨텍스트를 제공하는 데 도움이 되는 문서를 제공할 수 있습니다. 예를 들어 청구서가 계약 계약과 일치하는지 확인하기 위해 청구서를 분석하려는 경우 청구서 및 기타 관련 문서(예: 구매 주문)를 입력으로 제공하고 계약 파일을 참조 데이터로 제공할 수 있습니다. 서비스는 스키마에 따라 입력 문서의 유효성을 검사하는 추론을 적용합니다. 이는 추가 검토를 위해 플래그를 지정하는 불일치를 식별하는 것일 수 있습니다. 문서가 pro 모드의 입력 문서 서비스 제한 내에 있는 경우, 품질 문제가 발생하면 모든 문서를 입력 문서로 제공하는 것을 시도해보는 것이 좋습니다.
다단계 추론
다단계 추론은 복잡한 문제를 간단한 작업으로 분해하는 기능을 제공합니다. 다단계 추론은 데이터 분석을 구조화된 데이터를 추출 및 집계하는 것보다 한 단계 더 나아가 해당 데이터에 대한 결론을 도출하여 사용자 검토의 필요성을 최소화할 수 있도록 합니다. 프로 모드가 다단계 추론을 통해 답변할 수 있는 질문 유형의 예는 다음과 같습니다.
- x가 y와 일치하나요?
- x가 설명된 조건을 통과하나요?
- x 문서는 필요한 지침을 따르나요?
- 합계가 항목의 합계와 같습니까?
- 청구서와 계약 간의 모든 불일치를 찾습니다.
표준 및 프로 모드 기능
시나리오에 적합한 모드를 잘 모르시나요? 다음 차트에서는 표준 모드와 pro 모드 기능을 비교합니다.
| 특징 | 표준 모드 | Pro 모드 |
|---|---|---|
| 큰 문서 | ✓ | ✓ |
| 필드 모드 | ✓ | ✓ |
| 필드 추출, 분류 및 생성 | ✓ | ✓ |
| 근거 및 신뢰도 점수 | ✓ | ✗ |
| 입력 문서 형식 | 문서, 이미지, 비디오, 오디오 | 문서 |
| 최대 필드 | 100 | 100 |
| 여러 입력 문서 처리 | ✗ | ✓ |
| 참조 데이터 세트 통합 | ✗ | ✓ |
| 다단계 추론 | ✗ | ✓ |
시나리오에 표준 또는 프로 모드 적용
Content Understanding 표준 모드와 Pro 모드를 거의 모든 시나리오에 모두 적용할 수 있지만 솔루션을 빌드하는 방법은 답변하려는 질문에 따라 달라집니다. 다음 시나리오에서는 표준 모드와 pro 모드를 데이터에 적용하는 방법에 대한 예제를 제공합니다.
| 시나리오 | 표준 모드 | Pro 모드 |
|---|---|---|
| 청구서 분석 | 대규모 청구서 데이터에 대한 인사이트를 추출하고 RAG 검색 및 추가 데이터 분석 및 시각화를 사용하도록 설정합니다. 다음과 같은 질문에 답변합니다. • 구매 주문 번호, 합계, 기한 및 품목을 추출하여 데이터베이스에 입력합니다. |
클라이언트와 청구서 및 계약 계약을 분석하고 다단계 추론을 적용하여 해당 데이터에 대한 결론을 도출합니다. 다음과 같은 질문에 답변합니다. • 이 청구서가 이 클라이언트와 체결한 계약 계약을 이행하나요? • 이 청구서에 추가 검토가 필요한가요? |
| 콜 센터 기록 분석 | 많은 양의 콜 센터 데이터에 대한 인사이트를 추출하여 감정에 대한 귀중한 인사이트를 얻고, 고객 문제를 이해하고, 주요 문제를 해결하기 위한 대상 교육을 만듭니다. 다음과 같은 질문에 답변합니다. • 고객이 호출하는 주요 문제는 무엇인가요? • x 문제에 대한 호출의 평균 길이는 무엇인가요? |
콜 센터 기록 데이터를 분석하고 다단계 추론을 적용하여 콜 센터 직원이 고객의 요구를 해결하는 방법과 지침을 따르는지 이해합니다. 다음과 같은 질문에 답변합니다. • 콜 센터 직원이 자신을 소개했습니까? • 이 답변이 특정 기준을 통과 했나요? |
| 모기지 애플리케이션 처리 | 모기지 애플리케이션 데이터에서 키 값을 추출하고 검색 가능하고 쉽게 액세스할 수 있도록 합니다. 다음과 같은 질문에 답변합니다. • 모기지 신청서가 제출된 연도는 몇 년입니까? • 애플리케이션의 이름은 무엇인가요? |
예비 주택 구매자가 모기지를 확보하기 위해 필요한 모든 문서를 제공하는지 여부를 결정하기 위해 보조 지원 설명서 및 모기지 응용 프로그램을 분석합니다. 다음과 같은 질문에 답변합니다. • 모기지 신청의 이름 및 사회 보장 번호가 지원 설명서와 일치합니까? |
Pro 모드 사용해 보기
Azure AI Foundry를 사용하여 Content Understanding 표준 모드와 Pro 모드의 기능을 모두 사용해 볼 수 있습니다. 이 서비스를 사용하면 고유한 데이터를 가져오고 두 모드의 모든 기능을 간단한 코드 없는 접근 방식으로 실험하여 고유한 시나리오에 가장 적합한 방법을 찾을 수 있습니다.
Pro 모드 알려진 제한 사항 및 모범 사례
Content Understanding 프로 모드는 현재 신뢰도 점수나 기반을 제공하지 않습니다. 현재 필드의 생성 및 분류를 지원하지만 추출만 지원하지는 않습니다.
Content Understanding pro 모드는 현재 문서에만 사용할 수 있습니다.
시스템은 문서를 참조할 때 조회 모드 에서 작동합니다. 따라서 포괄적인 정보 검색은 예상할 수 없습니다. 데이터의 철저한 복구가 필요한 경우 문서를 입력 집합에 통합하는 것이 좋습니다.
스키마는 가능한 가장 높은 수준의 특이성으로 설계해야 합니다. 예를 들어 일반화된 불일치 목록을 제시하는 대신 각 유형의 불일치에 대한 고유 필드를 만들고 자세한 설명과 함께 만드는 것이 좋습니다. 또한 가능한 경우 검토해야 하는 관련 문서의 특정 섹션에 대한 참조를 포함해야 합니다.
참조 문서는 간결하고 집중해야 합니다. 필수 문서의 우선 순위를 지정하고 보존 및 회수를 향상시키기 위해 가능한 한 간략하게 설명합니다.
다음 단계
문서 처리에 대한 자세한 내용은 문서 처리 개요를 참조하세요.