feature-engineering 명령 그룹

비고

Databricks CLI 사용은 Databricks 라이선스 및 Databricks 개인 정보 보호 고지, 그리고 모든 사용 데이터 관련 조항의 적용을 받습니다.

feature-engineering Databricks CLI 내의 명령 그룹을 사용하면 Databricks 기능 저장소의 기능을 관리할 수 있습니다.

databricks 특성 엔지니어링에서 특성 생성하기

기능을 만듭니다.

databricks feature-engineering create-feature FULL_NAME SOURCE INPUTS FUNCTION TIME_WINDOW [flags]

Arguments

FULL_NAME

    기능의 세 부분으로 구성된 전체 이름(카탈로그, 스키마, 이름)입니다.

SOURCE

    기능의 데이터 원본입니다.

INPUTS

    기능이 계산되는 입력 열입니다.

FUNCTION

    기능이 계산되는 함수입니다.

TIME_WINDOW

    기능이 계산되는 시간 창입니다.

Options

--description string

    기능에 대한 설명입니다.

--json JSON

    요청 본문은 인라인 JSON 문자열이거나 JSON 파일에 @path을 포함한 것입니다.

전역 플래그

예시

다음 예제에서는 기능을 만듭니다.

databricks feature-engineering create-feature my_catalog.my_schema.my_feature my_source my_inputs my_function my_time_window --description "My feature description"

Databricks feature-engineering create-kafka-config

Kafka 설정을 만드세요.

databricks feature-engineering create-kafka-config NAME BOOTSTRAP_SERVERS SUBSCRIPTION_MODE AUTH_CONFIG [flags]

Arguments

NAME

    메타스토어 내에서 이 Kafka 설정을 고유하게 식별하는 이름입니다. 이 식별자는 Feature 객체에서 해당 기능에 대한 이러한 구성을 참조하는 데 사용됩니다. 주제 이름과 구별될 수 있습니다.

BOOTSTRAP_SERVERS

    Kafka 클러스터를 가리키는 호스트/포트 쌍의 쉼표로 구분된 목록입니다.

SUBSCRIPTION_MODE

    어떤 Kafka 주제에서 데이터를 가져올지 설정할 수 있는 옵션들.

AUTH_CONFIG

    주제 연결을 위한 인증 설정.

Options

--json JSON

    요청 본문은 인라인 JSON 문자열이거나 JSON 파일에 @path을 포함한 것입니다.

전역 플래그

데이터브릭스 기능-엔지니어링, 생성-물질화-기능

구체화된 특징을 만드세요.

databricks feature-engineering create-materialized-feature FEATURE_NAME [flags]

Arguments

FEATURE_NAME

    Unity 카탈로그에 있는 기능의 전체 명칭입니다.

Options

--cron-schedule string

    물질화 파이프라인의 일정을 정의하는 쿼츠 크론 표현식입니다.

--json JSON

    요청 본문은 인라인 JSON 문자열이거나 JSON 파일에 @path을 포함한 것입니다.

--materialized-feature-id string

    서버가 물질화된 기능에 대해 고유 식별자를 할당합니다.

--pipeline-schedule-state MaterializedFeaturePipelineScheduleState

    물화(materialization) 파이프라인의 일정 상태. 지원되는 값: ACTIVE, PAUSED, SNAPSHOT.

전역 플래그

Databricks 기능-엔지니어링 생성-스트림

스트림을 만드세요.

databricks feature-engineering create-stream NAME SOURCE_CONFIG CONNECTION_CONFIG SCHEMA_CONFIG INGESTION_CONFIG [flags]

Arguments

NAME

    스트림의 전체 3부분 이름(catalog.schema.stream)입니다.

SOURCE_CONFIG

    소스별 구성. 스트리밍 플랫폼의 출처를 결정합니다.

CONNECTION_CONFIG

    스트림 플랫폼에 연결 및 인증하는 방법을 명시합니다.

SCHEMA_CONFIG

    스트림의 스키마 정의. 현재는 직접 스키마만 지원됩니다. 향후 중요한 이정표에서는 UC Connection을 통해 스키마 등록부를 지원할 예정입니다.

INGESTION_CONFIG

    스트리밍 데이터 수집 구성: 순방향 채우기 데이터의 오프라인 복사본과 선택적 과거 백필을 저장하는 관리 테이블.

Options

--description string

    사용자가 제공한 설명입니다.

--json JSON

    요청 본문은 인라인 JSON 문자열이거나 JSON 파일에 @path을 포함한 것입니다.

전역 플래그

databricks 기능 엔지니어링 삭제 기능

기능을 삭제합니다.

databricks feature-engineering delete-feature FULL_NAME [flags]

Arguments

FULL_NAME

    삭제할 기능의 이름입니다.

전역 플래그

예시

다음 예제에서는 기능을 삭제합니다.

databricks feature-engineering delete-feature my_catalog.my_schema.my_feature

DataBricks feature-Engineering Delete-Kafka-config

Kafka 설정을 삭제하세요.

databricks feature-engineering delete-kafka-config NAME [flags]

Arguments

NAME

    삭제할 Kafka 설정 이름.

전역 플래그

데이터브릭 기능-엔지니어링 삭제-물질화 기능

물질화된 특징을 삭제하세요.

databricks feature-engineering delete-materialized-feature MATERIALIZED_FEATURE_ID [flags]

Arguments

MATERIALIZED_FEATURE_ID

    삭제할 물질화된 특징의 ID입니다.

전역 플래그

Databricks 기능 엔지니어링 삭제 스트림

스트림을 삭제하세요.

databricks feature-engineering delete-stream NAME [flags]

Arguments

NAME

    삭제할 스트림의 전체 3부분 이름(catalog.schema.stream)을 지정할 수 있습니다.

전역 플래그

데이터브릭스 특성 엔지니어링 기능 가져오기

기능을 획득합니다.

databricks feature-engineering get-feature FULL_NAME [flags]

Arguments

FULL_NAME

    가져올 기능의 이름입니다.

전역 플래그

예시

다음 예제에서는 기능을 가져옵니다.

databricks feature-engineering get-feature my_catalog.my_schema.my_feature

Databricks feature-engineering get-kafka-config

Kafka 설정을 구하세요.

databricks feature-engineering get-kafka-config NAME [flags]

Arguments

NAME

    Kafka 설정 이름을 얻으세요.

전역 플래그

Databricks feature-engineering get-materialized-feature

구체화된 특징을 얻으세요.

databricks feature-engineering get-materialized-feature MATERIALIZED_FEATURE_ID [flags]

Arguments

MATERIALIZED_FEATURE_ID

    물질화된 특징의 ID입니다.

전역 플래그

Databricks feature-engineering get-stream

스트림을 받으세요.

databricks feature-engineering get-stream NAME [flags]

Arguments

NAME

    스트림의 전체 세 부분 이름(catalog.schema.stream)을 얻을 수 있습니다.

전역 플래그

databricks 피처 엔지니어링 특성 목록

기능을 나열합니다.

databricks feature-engineering list-features [flags]

Options

--page-size int

    반환할 결과의 최대 수입니다.

--page-token string

    이전 쿼리를 기반으로 다음 페이지로 이동하는 페이지 매김 토큰입니다.

전역 플래그

예시

다음 예제에서는 모든 기능을 나열합니다.

databricks feature-engineering list-features

Databricks feature-engineering list-kafka-configs

Kafka 설정을 나열하세요.

databricks feature-engineering list-kafka-configs [flags]

Options

--limit int

    반환할 최대 결과 수입니다.

--page-size int

    반환할 결과의 최대 수입니다.

전역 플래그

데이터브릭 특징-엔지니어링 목록-물질화된 특징

구현된 특징들을 나열하세요.

databricks feature-engineering list-materialized-features [flags]

Options

--feature-name string

    기능명으로 필터링하세요.

--limit int

    반환할 최대 결과 수입니다.

--page-size int

    반환할 결과의 최대 수입니다.

전역 플래그

데이터브릭 특징-엔지니어링 리스트-스트림

스트림 목록.

databricks feature-engineering list-streams [flags]

Options

--limit int

    반환할 최대 결과 수입니다.

--page-size int

    반환할 결과의 최대 수입니다.

--parent string

    스트림을 나열할 수 있는 상위 이름의 두 부분 이름(catalog.schema).

전역 플래그

databricks 특성 엔지니어링 업데이트 기능

기능의 설명을 업데이트합니다(다른 모든 필드는 변경할 수 없음).

databricks feature-engineering update-feature FULL_NAME UPDATE_MASK SOURCE INPUTS FUNCTION TIME_WINDOW [flags]

Arguments

FULL_NAME

    기능의 세 부분으로 구성된 전체 이름(카탈로그, 스키마, 이름)입니다.

UPDATE_MASK

    업데이트할 필드 목록입니다.

SOURCE

    기능의 데이터 원본입니다.

INPUTS

    기능이 계산되는 입력 열입니다.

FUNCTION

    기능이 계산되는 함수입니다.

TIME_WINDOW

    기능이 계산되는 시간 창입니다.

Options

--description string

    기능에 대한 설명입니다.

--json JSON

    요청 본문은 인라인 JSON 문자열이거나 JSON 파일에 @path을 포함한 것입니다.

전역 플래그

예시

다음 예제에서는 기능의 설명을 업데이트합니다.

databricks feature-engineering update-feature my_catalog.my_schema.my_feature description my_source my_inputs my_function my_time_window --description "Updated description"

Databricks feature-engineering update-kafka-config

Kafka 설정을 업데이트하세요.

databricks feature-engineering update-kafka-config NAME UPDATE_MASK BOOTSTRAP_SERVERS SUBSCRIPTION_MODE AUTH_CONFIG [flags]

Arguments

NAME

    메타스토어 내에서 이 Kafka 설정을 고유하게 식별하는 이름입니다. 이 식별자는 Feature 객체에서 해당 기능에 대한 이러한 구성을 참조하는 데 사용됩니다. 주제 이름과 구별될 수 있습니다.

UPDATE_MASK

    업데이트할 필드 목록입니다.

BOOTSTRAP_SERVERS

    Kafka 클러스터를 가리키는 호스트/포트 쌍의 쉼표로 구분된 목록입니다.

SUBSCRIPTION_MODE

    어떤 Kafka 주제에서 데이터를 가져올지 설정할 수 있는 옵션들.

AUTH_CONFIG

    주제 연결을 위한 인증 설정.

Options

--json JSON

    요청 본문은 인라인 JSON 문자열이거나 JSON 파일에 @path을 포함한 것입니다.

전역 플래그

Databricks 기능-엔지니어링 업데이트-물질화-기능

구체화된 기능을 업데이트하세요.

databricks feature-engineering update-materialized-feature MATERIALIZED_FEATURE_ID UPDATE_MASK FEATURE_NAME [flags]

Arguments

MATERIALIZED_FEATURE_ID

    서버가 물질화된 기능에 대해 고유 식별자를 할당합니다.

UPDATE_MASK

    업데이트해야 할 물질화 특징 필드를 제공하세요. 현재는 pipeline_state 필드만 업데이트할 수 있습니다.

FEATURE_NAME

    Unity 카탈로그에 있는 기능의 전체 명칭입니다.

Options

--cron-schedule string

    물질화 파이프라인의 일정을 정의하는 쿼츠 크론 표현식입니다.

--json JSON

    요청 본문은 인라인 JSON 문자열이거나 JSON 파일에 @path을 포함한 것입니다.

--materialized-feature-id string

    서버가 물질화된 기능에 대해 고유 식별자를 할당합니다.

--pipeline-schedule-state MaterializedFeaturePipelineScheduleState

    물화(materialization) 파이프라인의 일정 상태. 지원되는 값: ACTIVE, PAUSED, SNAPSHOT.

전역 플래그

Databricks 기능-엔지니어링 업데이트-스트림

스트림을 업데이트하세요.

databricks feature-engineering update-stream NAME UPDATE_MASK SOURCE_CONFIG CONNECTION_CONFIG SCHEMA_CONFIG INGESTION_CONFIG [flags]

Arguments

NAME

    스트림의 전체 3부분 이름(catalog.schema.stream)입니다.

UPDATE_MASK

    업데이트할 필드 목록입니다.

SOURCE_CONFIG

    소스별 구성. 스트리밍 플랫폼의 출처를 결정합니다.

CONNECTION_CONFIG

    스트림 플랫폼에 연결 및 인증하는 방법을 명시합니다.

SCHEMA_CONFIG

    스트림의 스키마 정의. 현재는 직접 스키마만 지원됩니다. 향후 중요한 이정표에서는 UC Connection을 통해 스키마 등록부를 지원할 예정입니다.

INGESTION_CONFIG

    스트리밍 데이터 수집 구성: 순방향 채우기 데이터의 오프라인 복사본과 선택적 과거 백필을 저장하는 관리 테이블.

Options

--description string

    사용자가 제공한 설명입니다.

--json JSON

    요청 본문은 인라인 JSON 문자열이거나 JSON 파일에 @path을 포함한 것입니다.

전역 플래그

전역 표시기

--debug

  디버그 로깅을 사용할지 여부입니다.

-h 또는 --help

    Databricks CLI 또는 관련 명령 그룹 또는 관련 명령에 대한 도움말을 표시합니다.

--log-file 문자열

    출력 로그를 쓸 파일을 나타내는 문자열입니다. 이 플래그가 지정되지 않으면 출력 로그는 기본적으로 stderr에 기록됩니다.

--log-format 포맷

    로그 형식 형식 text 또는 json. 기본값은 text입니다.

--log-level 문자열

    로그 형식 수준을 나타내는 문자열입니다. 지정하지 않으면 로그 형식 수준을 사용할 수 없습니다.

-o, --output 유형

    명령 출력 형식 text 또는 json. 기본값은 text입니다.

-p, --profile 문자열

    명령을 실행하는 데 사용할 파일의 프로필 ~/.databrickscfg 이름입니다. 이 플래그를 지정하지 않으면, 존재하는 경우 DEFAULT로 명명된 프로필이 사용됩니다.

--progress-format 포맷

    진행률 로그를 표시할 형식: default, append, inplace또는 json

-t, --target 문자열

    해당하는 경우 사용할 번들 대상