(외부) 참조 데이터 기술 자료를 사용하여 데이터 정리 - DQS(Data Quality Services)

적용 대상: SQL Server

이 항목에서는 참조 데이터 공급자의 기술 자료를 사용하여 데이터를 정리하는 방법에 대해 설명합니다. 정리 작업을 실행하는 모든 단계는 DQS(내부) 지식을 사용하여 데이터 정리에서 설명한 대로 참조 데이터 공급자의 지식을 사용하여 데이터를 정리하는 경우와 동일하지만, 이 항목에서는 DQS(Data Quality Services)에서 참조 데이터 서비스를 사용하여 데이터를 정리하는 경우와 관련된 정보를 제공합니다.

Important

이 문서에서는 이전에 Azure DataMarket에서 사용할 수 있었던 타사 참조 데이터 서비스에 대해 설명합니다. 예를 들어 Melissa 주소 데이터를 포함한 DataMarket 및 Data Services는 2016년 12월 31일 이후에 중단되었습니다. 따라서 DataMarket에서 지정된 서비스를 사용하여 이 문서의 예제를 더 이상 실행할 수 없습니다. 타사 참조 데이터 공급자로부터 직접 온라인으로 사용할 수 있는 참조 데이터 서비스는 계속 사용할 수 있습니다.

DQS의 참조 데이터 서비스 기능을 사용하여 데이터를 정리하는 경우 DQS 정리 프로세스는 매핑된 도메인 값을 일괄 처리 요청으로 참조 데이터 서비스 공급자에게 보냅니다. 참조 데이터 서비스에서 응답하는 정보는 다음과 같습니다.

• 제안된 수정

• 신뢰

• 매핑된 도메인에 대한 추가 정보. 참조 데이터는 추가 데이터를 사용하여 원본을 표준화, 구문 분석 또는 보강할 수도 있습니다. 이 정보는 응답의 추가 필드에 제공됩니다.

참조 데이터 서비스에서 응답을 받은 후 정리 작업 중에 DQS에서 다음 상황이 발생합니다.

• 참조 데이터 서비스를 사용하여 도메인을 매핑하는 동안 지정된 자동 수정 임계값 및 최소 신뢰도 값에 따라 도메인 값이 신뢰 수준에 따라 자동으로 수정되거나 제안됩니다.

  참고 항목

  도메인을 참조 데이터 서비스에 매핑하는 동안 지정하는 임계값은 참조 데이터 서비스의 지식을 사용하여 데이터를 정리하는 동안 적용돠며. 구성 섹션의 일반 설정 탭에서 지정되는 임계값이 아닙니다. 참조 데이터 정리에 대한 임계값을 지정하는 방법에 대한 자세한 내용은 참조 데이터에 도메인 또는 복합 도메인 연결의 9단계를 참조하세요.

• 도메인 값은 제안됨, 새로 만들기, 잘못됨, 수정됨 및 수정으로 분류됩니다.

• 추가 데이터가 원본에 추가되고, 정보는 내보내기 위해 정리된 데이터와 함께 사용할 수 있습니다.

시작하기 전에

필수 조건

DQS 기술 자료에 필요한 도메인은 적절한 참조 데이터 서비스에 매핑해야 합니다. 또한 기술 자료에 정리하려는 데이터 형식에 대한 지식이 포함되어야 합니다. 예를 들어 미국 주소가 포함된 원본 데이터를 정리하려면 미국 주소에 대한 고품질 데이터를 제공하는 참조 데이터 서비스 공급자에 도메인을 매핑해야 합니다. 자세한 내용은 참조 데이터에 도메인 또는 복합 도메인 연결을 참조하세요.

보안

사용 권한

데이터 정리를 수행하려면 DQS_MAIN 데이터베이스에 대한 dqs_kb_editor 또는 dqs_kb_operator 역할이 있어야 합니다.

참조 데이터 지식을 사용하여 데이터 정리

이전의 참조 데이터에 도메인 또는 복합 도메인 연결 항목에서 매핑한 도메인을 Azure Marketplace의 Melissa Data 서비스와 함께 사용하는 동일한 예제를 계속 진행하겠습니다. 이제 동일한 도메인을 사용하여 몇 가지 일부 미국 주소 샘플을 정리하겠습니다. 데이터를 정리하는 단계는 DQS(내부) 지식을 사용하여 데이터 정리에서 설명한 것과 동일합니다. 그러나 프로세스를 진행하는 동안 필요할 때마다 다시 설명하겠습니다.

1. 데이터 품질 프로젝트를 만들고 정리 작업을 선택합니다. 데이터 품질 프로젝트 만들기를 참조하세요.

2. 맵 페이지에서 4개 도메인(Address Line(주소 줄), City(도시), State(주) 및 Zip(우편 번호)을 원본 데이터의 해당 열과 매핑합니다. 다음을 클릭합니다.

   참고 항목

   Address Verification(주소 확인) 복합 도메인에 있는 4개 도메인을 모두 매핑했으므로 이제 데이터 정리가 개별 도메인 수준이 아닌 복합 도메인 수준에서 수행됩니다.

3. 정리 페이지에서 시작을 클릭하여 컴퓨터 지원 정리 프로세스를 실행합니다. 정리 프로세스가 끝난 후 다음을 클릭합니다.

   참고 항목

   정리 페이지에 다음 두 가지 방법으로 참조 데이터 서비스에 연결된 도메인에 대한 정보가 표시됩니다.

   • 시작 단추 아래에 "<Domain1>, <Domain2>,... <DomainN> 도메인이 참조 데이터 서비스 공급자를 사용하여 정리됩니다."라는 메시지가 표시됩니다. 이 예제에서는 "Domain Address Verification(도메인 주소 확인)이 참조 데이터 서비스 공급자를 사용하여 정리됩니다."라는 메시지가 표시됩니다.
   • 아이콘이 참조 데이터 서비스 공급자에 연결된 도메인에 대한 프로파일러 영역에 표시됩니다. 이 예제에서는 Address Verification 복합 도메인에 대한 아이콘이 표시됩니다.

4. 결과 관리 및 보기 페이지에서 도메인 값을 검토합니다. 참조 데이터 서비스는 도메인을 참조 데이터 서비스에 매핑하는 동안 제안된 후보 상자에 지정된 최대 제안 수에 따라 값에 대해 사용 가능한 경우 둘 이상의 제안을 표시할 수 있습니다. 예를 들어 다음 미국 주소에 대해 두 가지 제안이 표시됩니다.

   원래 값:

   주소란	시/군/구	시	우편번호
   1 msft way	Redmond		98052

   제안된 값:

   주소란	시/군/구	시	우편번호
   1 Microsoft Way	Redmond	WA	98052
   PO Box 1	Redmond	WA	98073

   

   참고 항목

   복합 도메인의 경우 DQS는 컴퓨터 지원 정리 프로세스 중에 개별 도메인을 수정된 다른 색으로 강조 표시합니다. 예를 들어 이 경우에는 Address Line 및 State 도메인이 수정되었으므로 녹청으로 강조 표시됩니다.

5. 모든 도메인 값 검토가 완료되면 다음을 클릭하여 데이터를 내보냅니다.

6. 내보내기 페이지에서 각 도메인(원본, 이유, 신뢰도 및 상태)에 대한 정리 작업과 관련된 일반 정보 외에도 Melissa Data 참조 데이터 서비스에서 제공하는 주소 데이터에 대한 추가 정보(예: 주소의 위도 및 경도, 카운티 이름, 주소 유형(고층 건물, 대로 등) 등)가 있음을 알 수 있습니다.

7. 데이터를 필요한 대상(SQL Server, CSV 또는 Excel)로 내보내고 마침을 클릭하여 프로젝트를 닫습니다.

   Important

   64비트 버전의 Excel을 사용하는 경우 정리된 데이터를 Excel 파일로 내보낼 수 없습니다. SQL Server 데이터베이스 또는 .csv 파일로만 내보낼 수 있습니다.