시작 및 끝 오프셋이 지정된 개체 목록을 InputPartition 반환합니다.
각각 InputPartition 은 하나의 Spark 작업에서 처리할 수 있는 데이터 분할을 나타냅니다. 빈 오프셋 범위로 호출되는 경우 start == end이 메서드는 빈 시퀀스를 반환해야 합니다.
Databricks Runtime 15.2에 추가됨
문법
partitions(start: dict, end: dict)
매개 변수
| 매개 변수 | 유형 | 설명 |
|---|---|---|
start |
사전 | 분할을 계획하는 마이크로배치의 시작 오프셋입니다. |
end |
사전 | 분할을 계획하기 위한 마이크로배치의 끝 오프셋입니다. |
Returns
Sequence[InputPartition]
이 데이터 원본에 대한 파티션 시퀀스입니다. 각 파티션 값은 해당 파티션의 InputPartition 인스턴스 또는 하위 클래스여야 합니다.