패브릭 환경의 Spark 컴퓨팅 구성 설정

Microsoft Fabric 데이터 엔지니어 및 데이터 과학 환경은 완전히 관리되는 Spark 컴퓨팅 플랫폼에서 작동합니다. 이 플랫폼은 탁월한 속도와 효율성을 제공하도록 설계되었습니다. 여기에는 시작 풀 및 사용자 지정 풀이 포함됩니다.

패브릭 환경에는 사용자가 Notebook 및 Spark 작업에 연결된 후 Spark 세션을 구성할 수 있도록 하는 Spark 컴퓨팅 속성을 비롯한 구성 컬렉션이 포함되어 있습니다. 환경을 사용하면 Spark 작업을 실행하기 위한 컴퓨팅 구성을 유연하게 사용자 지정할 수 있습니다. 환경에서 컴퓨팅 섹션을 사용하면 워크로드 요구 사항에 따라 실행기의 메모리 및 코어를 사용자 지정하도록 Spark 세션 수준 속성을 구성할 수 있습니다.

작업 영역 관리자는 작업 영역 설정 화면의 데이터 엔지니어/과학 섹션의 풀 탭에서 항목에 대한 컴퓨팅 구성 사용자 지정 스위치를 사용하여 컴퓨팅 사용자 지정을 사용하거나 사용하지 않도록 설정할 수 있습니다.

작업 영역 관리자는 이 설정을 사용하도록 설정하여 멤버 및 기여자 위임하여 s Fabric 환경에서 기본 세션 수준 컴퓨팅 구성을 변경할 수 있습니다.

작업 영역 관리자가 작업 영역 설정에서 이 옵션을 사용하지 않도록 설정하면 환경의 컴퓨팅 섹션이 비활성화되고 작업 영역에 대한 기본 풀 컴퓨팅 구성이 Spark 작업 실행에 사용됩니다.

환경에서 세션 수준 컴퓨팅 속성 사용자 지정

사용자는 패브릭 작업 영역에서 사용할 수 있는 풀 목록에서 환경에 대한 풀을 선택할 수 있습니다. Fabric 작업 영역 관리자는 기본 시작 풀 및 사용자 지정 풀을 만듭니다.

컴퓨팅 섹션에서 풀을 선택한 후 선택한 풀의 노드 크기 및 제한 범위 내에서 실행기의 코어와 메모리를 조정할 수 있습니다.

예를 들어 노드 크기가 큰 사용자 지정 풀(16개의 Spark vCore)을 환경 풀로 선택합니다. 그런 다음, 작업 수준 요구 사항에 따라 드라이버/실행기 코어를 4, 8 또는 16으로 선택할 수 있습니다. 드라이버 및 실행기에 할당된 메모리의 경우 모두 큰 노드 메모리 제한 범위 내에 있는 28g, 56g 또는 112g를 선택할 수 있습니다.

Spark 컴퓨팅 크기 및 해당 코어 또는 메모리 옵션에 대한 자세한 내용은 Microsoft Fabric의 Spark 컴퓨팅이란?을 참조하세요.

관련 콘텐츠

• Microsoft Fabric에서 환경을 만들고 구성하고 사용합니다.