다음 문서에서는 Azure Databricks의 데이터 엔지니어링에 대한 모범 사례를 제공합니다.
- Azure Databricks에서 조인 성능 최적화
- 데이터 모델링
- Azure Databricks에서 RocksDB 상태 저장소 구성
- 상태 저장 쿼리를 위한 비동기 상태 체크포인팅
- 비동기 진행률 추적
- 구조적 스트리밍에 대한 프로덕션 고려 사항
- 일괄 처리 또는 스트림 처리를 사용하여 데이터 정리 및 유효성 검사
- 작업, Lakeflow Spark 선언적 파이프라인 및 Lakeflow Connect에 대한 Azure Databricks의 관찰 가능성
- Lakeflow Spark 선언적 파이프라인의 팬인 및 팬아웃 아키텍처
- Lakeflow Spark 선언적 파이프라인에 대한 모범 사례
CI/CD 워크플로 모범 사례를 비롯한 다른 모범 사례 문서에 대한 링크는 모범 사례를 참조하세요.