Azure Databricks on Microsoft Azure Government

Important

Azure Databricks on Azure Government는 베타 단계입니다. 가입하려면 Azure Databricks New GovCloud 환경 미리보기 기능을 위한 새로운 Azure Government 구독을 등록하세요. 베타 시작하기를 참조하세요.

이 문서에서는 Microsoft Azure Government 위의 Azure Databricks에 대해 규정 준수 제어, 새로운 Azure Government 환경의 베타 참여 방법, 지원되는 리전 및 URL, 데이터 레지던시, 지원되는 시스템 테이블 등을 설명합니다.

Azure Government 개요

Azure Government는 미국 정부 기관과 그 파트너를 위한 전용 Microsoft Azure 클라우드입니다. 이 시스템은 글로벌 Azure 클라우드와 물리적으로 격리되어 있으며, 미국 연방, 주, 지방, 부족 정부의 준수 요건을 충족하기 위해 심사를 받은 미국인들이 운영합니다. 자세한 내용은 Microsoft Azure Government를 참조하세요.

Azure Government의 Azure Databricks는 규정 준수 및 보안 제어 기능을 갖춘 Azure Government에 배포된 Azure Databricks 플랫폼입니다. Azure Government usgovva 및 usgovaz 리전에서 제공됩니다.

모든 작업 공간은 기본적으로 컴플라이언스 보안 프로필과 향상된 보안 모니터링이 켜져 있으며, 프론트엔드 및 백엔드 연결을 위해 Azure Private Link가 필요하고, 고객 콘텐츠는 미국 정부 클라우드 지역에서만 저장 및 처리됩니다.

베타 작업 공간은 기존 Azure Databricks 작업 공간과 분리된 새로운 환경에서 Azure Government에서 실행됩니다. 기존 작업 공간은 마이그레이션되지 않습니다. 통제된 비분류 정보(CUI) 또는 기타 규제된 데이터의 처리는 허용되지 않습니다.

Requirements

  • Azure Government 구독으로, Azure Databricks 작업 공간이 포함된 적이 없습니다. Azure Databricks 작업 공간이 포함되어 있거나, 이전에 삭제된 Azure Databricks 작업 공간이 있었거나, 기존 Azure Databricks 환경과 연관된 구독은 Azure Government에서 등록하지 마십시오.
  • 구독에 대한 미리보기 기능 등록 권한.

Important

작업 영역 이름, 컴퓨팅 리소스 이름, 태그, 작업 이름, 작업 실행 이름, 네트워크 이름, 자격 증명 이름, 스토리지 계정 이름, Git 리포지토리 ID 또는 URL과 같은 중요한 정보가 고객 정의 입력 필드에 입력되지 않는지 확인하는 것은 전적으로 책임이 있습니다. 이러한 필드는 규정 준수 경계 외부에서 저장, 처리 또는 액세스할 수 있습니다.

Compliance

Microsoft Azure Government 위의 Azure Databricks는 베타 단계입니다. Azure Databricks는 규정 준수 체계에 대한 승인을 확보하기 위해 노력하고 있습니다. 승인이 완료될 때까지는 통제된 비분류 정보(CUI) 또는 이 표준에 의해 규제되는 기타 데이터를 처리하지 마십시오.

Note

Azure Private Link는 백엔드 및 프론트엔드 연결 모두에 필요합니다. 자세한 내용은 Private Link 개념을 참조하세요.

베타부터 시작하세요

등록하기 전에

Azure Databricks 작업 공간을 생성하는 데 한 번도 사용된 적 없는 전용 Azure Government 구독을 사용하세요. 다음과 같은 구독을 등록하지 마십시오:

  • 기존의 Azure Databricks 작업 공간을 포함합니다.
  • 이전에는 Azure Databricks 작업 공간이 있었으나 이후 삭제되었습니다.
  • 이미 Azure Government의 기존 Azure Databricks 환경과 연결되어 있습니다.

베타는 구독 수준의 기능 등록을 사용하여 어떤 환경이 워크스페이스 작업을 받는지 결정합니다. 새 환경 기능을 등록한 후, 해당 구독에서 새로 생성한 Azure Databricks 작업 공간은 새 환경으로 라우팅됩니다. 기능을 등록하려면 구독에 미리보기 기능을 등록할 권한이 필요합니다. 자세한 내용은 Azure 구독에서 미리보기 기능 설정하기를 참조하세요.

Important

구독 내에서 Azure Databricks 작업 공간을 생성하기 전에 Azure Databricks New GovCloud 환경 기능을 반드시 등록해야 합니다. 기능이 등록되기 전에 생성된 작업 공간은 새 환경에서 생성된 것이 아닙니다.

미리 보기 기능 등록

  1. Azure Government 포털에 로그인하세요.
  2. 구독을 엽니다.
  3. 베타에 사용할 Azure Government 구독을 선택하세요.
  4. 설정에서 미리보기 기능을 선택하세요.
  5. Azure Databricks의 New GovCloud 환경 기능을 검색하세요.
  6. 기능을 선택한 후 등록을 선택합니다.
  7. 등록 상태에 ' 등록됨'이 표시될 때까지 기다리세요.
  8. 표준 Azure Government 작업 공간 생성 경험을 사용하여 새로운 Azure Databricks 작업 공간을 만드세요. Azure Portal을 사용하여 작업 영역 배포를 참조하세요.

Note

구독은 Azure Government 내에서 기존 환경 또는 새 환경 중 하나의 Azure Databricks 환경에만 연결할 수 있습니다. 구독은 Azure Databricks 작업 공간을 만드는 데 사용되거나 existing-environment 기능이 등록되면 기존 환경과 연결됩니다. Azure Resource Manager는 이 연관성을 사용해 작업 공간 작업을 어디로 라우팅할지 결정하므로, 단일하고 명확한 목적지가 필요합니다. 기존 환경과 이미 연결된 구독에 Azure Databricks New GovCloud 환경 기능을 등록하면, 기존 리소스를 보호하기 위해 작업 공간 생성 및 기타 작업 공간 작업이 차단됩니다.

등록 충돌 해결

Azure Government의 기존 Azure Databricks 환경과 연결된 구독에서 워크스페이스 생성 또는 기타 작업 공간 작업이 실패하면, 해당 구독은 Azure Databricks New GovCloud 환경 기능에 등록될 수도 있습니다. 구독은 두 환경 모두에 연결할 수 없습니다. Azure Resource Manager는 워크스페이스 작업에 단일 대상이 필요하므로 기존 리소스를 보호하기 위해 해당 작업을 차단합니다.

작업 공간 생성을 다시 시도하지 마세요. 대신 상충되는 등록을 제거하세요.

Warning

활성 베타 작업 공간이 있는 구독에서 해당 기능을 등록 취소하지 마세요. Microsoft 지원에서 지시하지 않는 한 말입니다.

  1. Azure Government 포털에서 구독> 사용자의 구독 >설정>미리 보기 기능으로 이동하여 Azure Databricks New GovCloud environment가 등록되어 있는지 확인하세요. 미리 보기 기능 목록을 참조하세요.

  2. Azure CLI를 Azure Government로 설정하고 로그인하세요:

    az cloud set --name AzureUSGovernment
    az login
    
  3. 기능 등록을 해제합니다. <subscription-id>를 사용자의 구독 ID로 바꿉니다.

    az feature unregister --namespace Microsoft.Databricks --name UseEverGreenControlPlane --subscription <subscription-id>
    

    대신 포털을 사용하려면 미 리보기 기능 등록 해제를 참조하세요.

  4. 해당 기능이 더 이상 등록되지 않았는지 확인합니다:

    az feature show --namespace Microsoft.Databricks --name UseEverGreenControlPlane --subscription <subscription-id>
    
  5. 워크스페이스 작업을 다시 시도하세요.

구독이 이전에 Azure Databricks와 함께 사용되었는지 알 수 없거나 충돌이 계속된다면, 지원 받기 안내에 따라 지원에 문의하세요.

베타에 참여하려면 Azure Databricks 작업 공간이 포함된 적이 없는 새로운 Azure Government 구독을 등록하세요.

베타 제한 사항

베타 기간 동안:

  • 접근은 구독 수준에서 활성화됩니다.
  • 구독은 현재 또는 이전의 Azure Databricks 작업 공간 사용 기록이 없어야 합니다.
  • 등록된 구독의 새 작업 공간은 새 환경을 사용합니다.
  • 기존 작업 공간은 마이그레이션되지 않습니다.
  • 프로덕션 및 통제된 비분류 정보(CUI) 워크로드는 지원되지 않습니다.
  • 기능 제공 여부는 일반적으로 제공되는 Azure Databricks 서비스와 다릅니다. 예를 들어, 시스템 테이블의 일부만 사용할 수 있습니다. 지원되는 시스템 테이블을 참조하세요.
  • 각 고객은 프로덕션 사용 전에 자체 내부 권한 부여 및 운영 승인(ATO) 요건에 대해 책임을 집니다.

기존 작업 공간

기존 작업 공간은 생성된 환경에 계속 연관된 상태로 유지됩니다. 베타 등록은 기존 작업 공간, 노트북, 데이터, 구성 또는 기타 작업 공간 리소스를 마이그레이션하지 않습니다. 새 환경 기능을 등록하는 것은 마이그레이션 방법이 아닙니다. 기존 또는 이전에 삭제된 Azure Databricks 작업 공간이 포함된 구독에서는 이를 활성화하지 마십시오.

지원받기

표준 Azure Government 지원 프로세스를 사용하세요. 지원 요청서에는 해당 구독 또는 작업 공간이 Microsoft Azure Government 환경에서 새로운 Azure Databricks의 베타 프로그램에 참여하고 있음을 명시하세요. 구독 ID, 작업 공간 이름, ID 및 URL, 지역, 기능 등록 상태, 오류 메시지, 그리고 시도하던 작업을 포함하세요.

규정 준수 보안 프로필

컴플라이언스 보안 프로파일은 기본적으로 Azure Government의 모든 Azure Databricks 작업 공간에서 활성화되어 있습니다. 컴플라이언스 보안 프로파일에는 추가 모니터링, 노드 간 암호화를 위한 강제 인스턴스 유형, 강화된 컴퓨트 이미지 및 컴플라이언스 요구사항을 충족하는 데 도움이 되는 기타 기능이 포함되어 있습니다. 자동 클러스터 업데이트 와 향상된 보안 모니터링 도 자동으로 활성화됩니다.

컴플라이언스 보안 프로파일은 클러스터 노드 간에 하드웨어로 구현된 네트워크 암호화를 제공하는 Azure Virtual Network 암호화를 지원하는 VM 인스턴스 유형의 사용을 강제합니다. 요구 사항은 컴플라이언스 보안 프로필 요구 사항을 참조하세요.

Azure Databricks on Azure Government 리전 및 URL

Azure Databricks는 Azure Government의 usgovva 및 usgovaz 지역에서 제공됩니다. Azure Databricks 지역을 참조하세요.

Azure Databricks on Azure Government URL은 상업용 서비스의 Azure Databricks URL과 다릅니다. Azure Government에서 Azure Databricks에 사용할 때 다음 URL을 사용하세요:

  • REST API용 계정 콘솔 URL 및 기본 URL: https://accounts.usgov.databricks.azure.us/
  • 작업 영역 URL 및 작업 공간 수준 REST API의 기본 URL: https://adb-<workspace-id>.<random-number>.usgov.databricks.azure.us/

작업 공간을 생성한 후에는 Azure Government 포털의 작업 공간 개요 페이지에서 URL을 확인할 수 있습니다.

계정 콘솔 URL을 사용하여 첫 번째 계정 관리자를 설정하세요. 단계에 대해서는 '첫 번째 계정 관리자 설정'을 참조하세요. 이 단계를 완료하려면 접근 권한이 상승된 Microsoft Entra ID 글로벌 관리자여야 합니다. 자세한 내용은 글로벌 관리자의 액세스 상승을 참조하세요.

데이터 저장 위치

Azure Government 작업 공간에서 Azure Databricks에 대해 데이터 레지던시는 항상 적용됩니다. 고객 콘텐츠는 미국 정부 클라우드 지역에서만 저장 및 처리됩니다. 크로스-지오 처리 설정은 Azure Government 작업 공간에는 적용되지 않으며 미국 정부 클라우드 지역 외의 데이터를 처리할 수 없습니다.

지원되는 시스템 테이블

다음 시스템 테이블은 모니터링, 거버넌스 및 비용 관리를 위해 새로운 Azure Databricks on Azure Government 환경(베타)에서 제공됩니다:

  • system.access 스키마: assistant_events, inbound_network, audit, outbound_network, workspaces_latest
  • system.billing 스키마: list_prices, usage
  • system.compute 스키마: clusters, node_timeline, node_types, warehouse_events, warehouses
  • system.lakeflow 스키마: job_run_timeline, job_tasks, job_task_run_timeline, jobs, pipeline_update_timeline, pipelines
  • System.mlflow 스키마: experiments_latest, , run_metrics_historyruns_latest
  • system.query 스키마: history
  • system.storage schema: predictive_optimization_operations_history, table_auto_upgrade_operations_history

시스템 테이블 참조를 참조하세요.