feature-engineering parancscsoport

Megjegyzés:

A Databricks CLI használatára a Databricks Licenc és a Databricks adatvédelmi nyilatkozata vonatkozik, beleértve a használati adatokra vonatkozó rendelkezéseket is.

A feature-engineeringDatabricks parancssori felületén található parancscsoport lehetővé teszi a Databricks szolgáltatástároló funkcióinak kezelését.

Databricks jellemzőkészítés funkció létrehozása

Hozzon létre egy funkciót.

databricks feature-engineering create-feature FULL_NAME SOURCE INPUTS FUNCTION TIME_WINDOW [flags]

Arguments

FULL_NAME

    A szolgáltatás teljes háromrészes neve (katalógus, séma, név).

SOURCE

    A szolgáltatás adatforrása.

INPUTS

    Azok a bemeneti oszlopok, amelyekből a szolgáltatás ki van számítva.

FUNCTION

    Az a függvény, amellyel a szolgáltatás ki van számítva.

TIME_WINDOW

    Az az időablak, amelyben a szolgáltatás ki van számítva.

Beállítások

--description string

    A funkció leírása.

--json JSON

    A beágyazott JSON-sztring vagy a @path JSON-fájl a kérelem törzsével.

Globális jelzők

Példák

Az alábbi példa létrehoz egy funkciót:

databricks feature-engineering create-feature my_catalog.my_schema.my_feature my_source my_inputs my_function my_time_window --description "My feature description"

Databricks feature-engineering create-kafka-config

Hozz létre egy Kafka konfigurációt.

databricks feature-engineering create-kafka-config NAME BOOTSTRAP_SERVERS SUBSCRIPTION_MODE AUTH_CONFIG [flags]

Arguments

NAME

    Olyan név, amely egyediben azonosítja ezt a Kafka konfigurációt a metastore-ben. Ez lesz az azonosító, amelyet a Feature objektumból használnak ezekhez a konfigurációkhoz egy funkció esetében. Eltérhet a téma nevétől.

BOOTSTRAP_SERVERS

    A Kafka-fürtre mutató hoszt/port párok vesszővel tagolt listája.

SUBSCRIPTION_MODE

    Beállítások arra, hogy mely Kafka témákról vonjunk adatokat be.

AUTH_CONFIG

    Hitelesítési konfiguráció a témákhoz való csatlakozáshoz.

Beállítások

--json JSON

    A beágyazott JSON-sztring vagy a @path JSON-fájl a kérelem törzsével.

Globális jelzők

Databricks feature-engineering create-materialized-feature

Készíts egy materializált funkciót.

databricks feature-engineering create-materialized-feature FEATURE_NAME [flags]

Arguments

FEATURE_NAME

    A funkció teljes neve az Unity Catalog-ban.

Beállítások

--cron-schedule string

    A kvarc cron kifejezés, amely meghatározza a materializációs csővezeték ütemtervét.

--json JSON

    A beágyazott JSON-sztring vagy a @path JSON-fájl a kérelem törzsével.

--materialized-feature-id string

    Szerver által rendelt egyedi azonosító a materializált tulajdonsághoz.

--pipeline-schedule-state MaterializedFeaturePipelineScheduleState

    A materializációs csővezeték ütemezési állapota. Támogatott értékek: ACTIVE, PAUSED, SNAPSHOT.

Globális jelzők

Databricks feature-engineering create-stream

Készíts egy streamet.

databricks feature-engineering create-stream NAME SOURCE_CONFIG CONNECTION_CONFIG SCHEMA_CONFIG INGESTION_CONFIG [flags]

Arguments

NAME

    A sugár teljes háromrészes (catalog.schema.stream) neve.

SOURCE_CONFIG

    Forrás-specifikus konfiguráció. Meghatározza a streaming platform forrását.

CONNECTION_CONFIG

    Megadja, hogyan csatlakozzon és hitelesítse a stream platformot.

SCHEMA_CONFIG

    A stream sémadefiníciói. Jelenleg csak közvetlen sémák támogatnak. Egy jövőbeli mérföldkőként támogatni fogjuk a sémaregisztereket egy UC Connection-on keresztül.

INGESTION_CONFIG

    Streaming adatfelvétel konfigurációja: a kezelt tábla, amely offline másolatot tárol az előretöltő adatok és opcionális történelmi visszatöltés esetén.

Beállítások

--description string

    Felhasználó által megadott leírás.

--json JSON

    A beágyazott JSON-sztring vagy a @path JSON-fájl a kérelem törzsével.

Globális jelzők

Databricks jellemzők tervezése jellemző törlése

Funkció törlése.

databricks feature-engineering delete-feature FULL_NAME [flags]

Arguments

FULL_NAME

    A törölni kívánt szolgáltatás neve.

Globális jelzők

Példák

Az alábbi példa töröl egy funkciót:

databricks feature-engineering delete-feature my_catalog.my_schema.my_feature

Databricks feature-engineering delete-kafka-config

Töröld a Kafka konfigurációt.

databricks feature-engineering delete-kafka-config NAME [flags]

Arguments

NAME

    A törölendő Kafka konfiguráció neve.

Globális jelzők

Databricks feature-engineering delete-materialized-feature

Törölj egy materializált funkciót.

databricks feature-engineering delete-materialized-feature MATERIALIZED_FEATURE_ID [flags]

Arguments

MATERIALIZED_FEATURE_ID

    A materializált funkció azonosítója, amit törölni kell.

Globális jelzők

Databricks feature-engineering delete-stream

Törölj egy streamet.

databricks feature-engineering delete-stream NAME [flags]

Arguments

NAME

    A stream teljes háromrészes neve (catalog.schema.stream) törlésre kerülhet.

Globális jelzők

Databricks jellemző-mérnöki tevékenység lekérdezési-jellemző

Funkció megszerzése.

databricks feature-engineering get-feature FULL_NAME [flags]

Arguments

FULL_NAME

    A lekérendő szolgáltatás neve.

Globális jelzők

Példák

Az alábbi példa egy funkciót kap:

databricks feature-engineering get-feature my_catalog.my_schema.my_feature

Databricks feature-engineering get-kafka-config

Szerezz egy Kafka konfigurációt.

databricks feature-engineering get-kafka-config NAME [flags]

Arguments

NAME

    A Kafka konfiguráció neve, amit meg kell szerezni.

Globális jelzők

Databricks feature-engineering get-materialized-feature

Szerezz egy megvalósult funkciót.

databricks feature-engineering get-materialized-feature MATERIALIZED_FEATURE_ID [flags]

Arguments

MATERIALIZED_FEATURE_ID

    A materializált tulajdonság azonosítója.

Globális jelzők

Databricks Feature-Engineering get-stream

Szerezz egy streamet.

databricks feature-engineering get-stream NAME [flags]

Arguments

NAME

    A streamnek teljes, háromrészes neve (catalog.schema.stream) érhető el.

Globális jelzők

databricks tulajdonság-mérnöki lista-tulajdonságok

Funkciók felsorolása.

databricks feature-engineering list-features [flags]

Beállítások

--page-size int

    A visszaadandó eredmények maximális száma.

--page-token string

    Lapozási token a következő oldalra lépéshez egy korábbi lekérdezés alapján.

Globális jelzők

Példák

Az alábbi példa az összes funkciót felsorolja:

databricks feature-engineering list-features

Databricks feature-engineering list-kafka-configs

Listázd a Kafka konfigurációkat.

databricks feature-engineering list-kafka-configs [flags]

Beállítások

--limit int

    A visszaadandó eredmények maximális száma.

--page-size int

    A visszaadandó eredmények maximális száma.

Globális jelzők

Databricks Feature-Engineering lista-materialized-Features

Felsorold a megvalósuló funkciókat.

databricks feature-engineering list-materialized-features [flags]

Beállítások

--feature-name string

    Szűrj a funkció név szerint.

--limit int

    A visszaadandó eredmények maximális száma.

--page-size int

    A visszaadandó eredmények maximális száma.

Globális jelzők

Databricks feature-engineering list-streams

Listázd a streameket.

databricks feature-engineering list-streams [flags]

Beállítások

--limit int

    A visszaadandó eredmények maximális száma.

--page-size int

    A visszaadandó eredmények maximális száma.

--parent string

    Két részes név (catalog.schema) az anyról, amely alatt a Streameket kell felsorolni.

Globális jelzők

databricks jellemzők-fejlesztése funkciók-frissítése

Frissítse a szolgáltatás leírását (az összes többi mező nem módosítható).

databricks feature-engineering update-feature FULL_NAME UPDATE_MASK SOURCE INPUTS FUNCTION TIME_WINDOW [flags]

Arguments

FULL_NAME

    A szolgáltatás teljes háromrészes neve (katalógus, séma, név).

UPDATE_MASK

    A frissíteni kívánt mezők listája.

SOURCE

    A szolgáltatás adatforrása.

INPUTS

    Azok a bemeneti oszlopok, amelyekből a szolgáltatás ki van számítva.

FUNCTION

    Az a függvény, amellyel a szolgáltatás ki van számítva.

TIME_WINDOW

    Az az időablak, amelyben a szolgáltatás ki van számítva.

Beállítások

--description string

    A funkció leírása.

--json JSON

    A beágyazott JSON-sztring vagy a @path JSON-fájl a kérelem törzsével.

Globális jelzők

Példák

Az alábbi példa frissíti egy szolgáltatás leírását:

databricks feature-engineering update-feature my_catalog.my_schema.my_feature description my_source my_inputs my_function my_time_window --description "Updated description"

Databricks feature-engineering update-kafka-config

Frissítsd a Kafka konfigurációt.

databricks feature-engineering update-kafka-config NAME UPDATE_MASK BOOTSTRAP_SERVERS SUBSCRIPTION_MODE AUTH_CONFIG [flags]

Arguments

NAME

    Olyan név, amely egyediben azonosítja ezt a Kafka konfigurációt a metastore-ben. Ez lesz az azonosító, amelyet a Feature objektumból használnak ezekhez a konfigurációkhoz egy funkció esetében. Eltérhet a téma nevétől.

UPDATE_MASK

    A frissíteni kívánt mezők listája.

BOOTSTRAP_SERVERS

    A Kafka-fürtre mutató hoszt/port párok vesszővel tagolt listája.

SUBSCRIPTION_MODE

    Beállítások arra, hogy mely Kafka témákról vonjunk adatokat be.

AUTH_CONFIG

    Hitelesítési konfiguráció a témákhoz való csatlakozáshoz.

Beállítások

--json JSON

    A beágyazott JSON-sztring vagy a @path JSON-fájl a kérelem törzsével.

Globális jelzők

Databricks Feature-Engineering Update-Materialized-Feature

Frissíts egy materializált funkciót.

databricks feature-engineering update-materialized-feature MATERIALIZED_FEATURE_ID UPDATE_MASK FEATURE_NAME [flags]

Arguments

MATERIALIZED_FEATURE_ID

    Szerver által rendelt egyedi azonosító a materializált tulajdonsághoz.

UPDATE_MASK

    Adja meg a materializációs funkciómezőket, amelyeket frissíteni kell. Jelenleg csak a pipeline_state mező frissíthető.

FEATURE_NAME

    A funkció teljes neve az Unity Catalog-ban.

Beállítások

--cron-schedule string

    A kvarc cron kifejezés, amely meghatározza a materializációs csővezeték ütemtervét.

--json JSON

    A beágyazott JSON-sztring vagy a @path JSON-fájl a kérelem törzsével.

--materialized-feature-id string

    Szerver által rendelt egyedi azonosító a materializált tulajdonsághoz.

--pipeline-schedule-state MaterializedFeaturePipelineScheduleState

    A materializációs csővezeték ütemezési állapota. Támogatott értékek: ACTIVE, PAUSED, SNAPSHOT.

Globális jelzők

Databricks feature-engineering update-stream

Frissíts egy streamet.

databricks feature-engineering update-stream NAME UPDATE_MASK SOURCE_CONFIG CONNECTION_CONFIG SCHEMA_CONFIG INGESTION_CONFIG [flags]

Arguments

NAME

    A sugár teljes háromrészes (catalog.schema.stream) neve.

UPDATE_MASK

    A frissíteni kívánt mezők listája.

SOURCE_CONFIG

    Forrás-specifikus konfiguráció. Meghatározza a streaming platform forrását.

CONNECTION_CONFIG

    Megadja, hogyan csatlakozzon és hitelesítse a stream platformot.

SCHEMA_CONFIG

    A stream sémadefiníciói. Jelenleg csak közvetlen sémák támogatnak. Egy jövőbeli mérföldkőként támogatni fogjuk a sémaregisztereket egy UC Connection-on keresztül.

INGESTION_CONFIG

    Streaming adatfelvétel konfigurációja: a kezelt tábla, amely offline másolatot tárol az előretöltő adatok és opcionális történelmi visszatöltés esetén.

Beállítások

--description string

    Felhasználó által megadott leírás.

--json JSON

    A beágyazott JSON-sztring vagy a @path JSON-fájl a kérelem törzsével.

Globális jelzők

Globális jelzők

--debug

  Engedélyezze-e a hibakeresési naplózást.

-h vagy --help

    Súgó megjelenítése a Databricks parancssori felületéhez, a kapcsolódó parancscsoporthoz vagy a kapcsolódó parancshoz.

--log-file karakterlánc

    A karakterlánc, amely megadja, melyik fájlba írja az kimeneti naplókat. Ha ez a jelző nincs megadva, akkor az alapértelmezett beállítás a kimeneti naplók stderrbe írása.

--log-format formátum

    A naplóformátum típusa, text vagy json. Az alapértelmezett érték a text.

--log-level karakterlánc

    A naplóformátum szintjét képviselő karakterlánc. Ha nincs megadva, a naplóformátum szintje le van tiltva.

-o, --output típus

    A parancs kimenetének típusa: text vagy json. Az alapértelmezett érték a text.

-p, --profile karakterlánc

    A parancs futtatásához használni kívánt fájl profiljának ~/.databrickscfg neve. Ha ez a jelző nincs megadva, akkor ha létezik, a rendszer a névvel ellátott DEFAULT profilt használja.

--progress-format formátum

    A folyamatnaplók megjelenítésének formátuma: default, append, inplacevagy json

-t, --target karakterlánc

    Ha alkalmazható, a használni kívánt célcsomag