2021년 10월

이러한 기능 및 Azure Databricks 플랫폼 개선 사항은 2021년 10월에 릴리스되었습니다.

참고 항목

릴리스가 준비되었습니다. Azure Databricks 계정은 초기 릴리스 날짜 후 일주일 이상까지 업데이트되지 않을 수 있습니다.

Databricks Runtime 8.2 시리즈 지원 종료

2021년 10월 22일

Databricks Runtime 8.2 및 Machine Learning용 Databricks Runtime 8.2에 대한 지원이 10월 22일에 종료되었습니다. Databricks Runtime 지원 수명 주기를 참조하세요.

Databricks Runtime 10.0 및 10.0 ML은 GA이며 10.0 Photon은 공개 미리 보기입니다.

2021년 10월 20일

이제 Databricks Runtime 10.0 및 10.0 ML이 일반 공급됩니다. 10.0 Photon은 공개 미리 보기로 제공됩니다.

Databricks Runtime 10.0(지원되지 않음) 및 ML용 Databricks Runtime 10.0(지원되지 않음)의 릴리스 정보를 참조하세요.

Delta Live Tables의 사용자 인터페이스 개선 사항(공개 미리 보기)

2021년 10월 18~25일: 버전 3.57

이 릴리스에는 Delta Live Tables UI에 대한 다음과 같은 개선 사항이 포함되어 있습니다.

• 잘못된 Notebook 경로가 제공되면 이제 Notebook을 찾을 수 없음 메시지가 파이프라인 만들기 대화 상자 또는 데이터 세트 세부 정보 패널에 표시됩니다.
• 이제 Pipelines 페이지 또는 파이프라인 세부 정보 페이지에서 피드백 제공 링크를 클릭하여 Delta Live Tables에 대한 피드백을 제공할 수 있습니다. 피드백 제공 링크를 클릭하면 새 창에서 고객 피드백 설문 조사가 열립니다.

델타 라이브 테이블에서 새 파이프라인을 만들 때 고정 크기 클러스터 지정(공개 미리 보기)

2021년 10월 18~25일: 버전 3.57

이제 고정된 수의 작업자 노드가 있는 Delta Live Tables 파이프라인에 대한 클러스터를 만들어 파이프라인에서 사용하는 클러스터 리소스를 더 자세히 제어할 수 있습니다. 고정된 수의 노드가 있는 클러스터를 만들려면 자동 크기 조정 사용을 비활성화고 새 파이프라인을 만들 때 작업자 필드에 노드 수를 입력합니다.

Delta Live Tables 트리거 파이프라인에서 테이블에 대한 데이터 품질 메트릭 보기(공개 미리 보기)

2021년 10월 18~25일: 버전 3.57

이제 파이프라인이 트리거된 모드로 실행될 때 기록된 레코드 수, 삭제된 레코드 수 및 각 데이터 품질 제약 조건을 통과하거나 실패한 레코드 수를 포함하여 테이블에 대한 데이터 품질 메트릭을 볼 수 있습니다. 데이터 품질 메트릭을 보려면 파이프라인 세부 정보 페이지의 Graph 탭에서 테이블을 선택합니다.

작업 오케스트레이션은 이제 GA입니다.

2021년 10월 14일

Databricks는 Azure Databricks 작업 오케스트레이션의 일반 공급에 대해 발표하게 되어 기쁘게 생각합니다. 작업 오케스트레이션을 사용하면 여러 작업으로 작업을 정의하고 실행하여 복잡한 데이터 및 기계 학습 애플리케이션의 생성, 예약, 실행 및 모니터링을 간소화할 수 있습니다. 작업 오케스트레이션은 관리자가 사용하도록 설정해야 하며 기본적으로 사용하지 않도록 설정되어 있습니다. Azure Databricks 작업 만들기 및 실행을 참조 하세요.

Databricks는 작업 API 버전 2.1의 일반 공급도 발표하게 되어 기쁘게 생각합니다. 이 버전에는 Azure Databricks 작업을 사용하여 여러 작업의 오케스트레이션을 완전하게 지원하는 업데이트가 포함되어 있습니다. 여러 작업을 오케스트레이션하는 작업을 지원하도록 클라이언트를 업데이트하는 방법에 대한 자세한 내용은 작업 API 2.0에서 2.1로 업데이트하는 방법을 참조하세요.

Power BI용 Databricks Connector

** 2021년 10월 13일**

이제 새 버전의 Power BI 커넥터를 사용할 수 있습니다. 이 릴리스에서는 Unity 카탈로그의 3개 수준 네임스페이스를 통한 탐색 지원을 추가하고, 쿼리 실행을 취소할 수 있도록 하고, Databricks SQL 및 Databricks Runtime 8.3 이상에서 대기 시간을 줄이기 위해 네이티브 쿼리 통과를 사용하도록 설정합니다.

이제 Repos 임의의 파일 형식을 지원합니다.

2021년 10월 7일

원격 Git 리포지토리와 Notebook을 동기화하는 것 외에도 Repos 파일을 사용하면 .py 파일, .csv 또는 .json 형식의 데이터 파일 또는 .yaml 구성 파일과 같은 모든 유형의 파일을 동기화할 수 있습니다. Databricks 리포지토리 내에서 이러한 파일을 가져오고 읽을 수 있습니다. UI에서 텍스트로 인코딩된 파일을 보고 편집할 수도 있습니다. 자세한 내용은 Databricks Git 폴더와 Git 통합을 참조 하세요.

Jobs API로 더 자세한 작업 실행 출력

2021년 10월 4~11일: 버전 3.56

작업 API 실행 가져오기 출력 요청의 응답은 작업 실행에 대한 추가 출력, 로깅 및 오류 세부 정보를 반환하기 위해 새 필드로 업데이트됩니다.

작업 UI에서 Notebook 경로의 가독성 향상

2021년 10월 4~11일: 버전 3.56

이제 작업 UI에서 작업 세부 정보를 볼 때 Notebook 경로가 왼쪽에서 잘리기 때문에 Notebook 이름을 표시할 수 있습니다. 이전에는 Notebook 경로가 오른쪽에서 잘렸으며 종종 Notebook 이름을 가리기도 했습니다.

새 탭 또는 창에서 Delta Live Tables 파이프라인 열기

2021년 10월 4~11일: 버전 3.56

이제 파이프라인 이름은 델타 라이브 테이블 UI에서 파이프라인 목록을 볼 때 링크로 렌더링되어 새 탭 또는 창에서 파이프라인 세부 정보를 여는 것과 같은 상황에 맞는 메뉴 옵션에 액세스할 수 있습니다.

SQL의 레거시 입력 위젯에서 $에 대한 새로운 이스케이프 시퀀스

2021년 10월 4~11일: 버전 3.56

SQL의 레거시 입력 위젯에서 $ 문자를 이스케이프하려면 \$를 사용합니다. 기존 위젯에서 $\를 사용한 경우 계속 작동하지만 Databricks에서는 새 이스케이프 시퀀스를 사용하도록 위젯을 업데이트하는 것이 좋습니다. Databricks 위젯을 참조하세요.

자동으로 생성된 일괄 처리 유추 Notebook을 사용하여 더 빠른 모델 배포

2021년 10월 4~11일: 버전 3.56

모델 레지스트리에 모델을 등록한 후에는 모델을 일괄 처리 유추에 사용할 Notebook을 자동으로 생성하거나 실시간 제공을 위해 모델을 사용할 엔드포인트를 만들 수 있습니다. 자세한 내용은 유추에 모델 사용을 참조하세요.