data-quality parancscsoport

Megjegyzés:

Ezek az információk a Databricks CLI 0.205-ös és újabb verzióira vonatkoznak. A Databricks parancssori felülete nyilvános előzetes verzióban érhető el.

A Databricks CLI használatára a Databricks Licenc és a Databricks adatvédelmi nyilatkozata vonatkozik, beleértve a használati adatokra vonatkozó rendelkezéseket is.

A data-qualityDatabricks parancssori felületén található parancscsoport a Unity Catalog-objektumok adatminőségének kezelésére szolgáló parancsokat tartalmaz. Lásd : Adatminőség-monitorozás.

databricks data-quality cancel-refresh

Adatminőség-figyelő frissítésének megszakítása. Jelenleg csak a tábla object_type támogatott. A hívást ugyanabban a munkaterületen kell kezdeményezni, ahol a figyelőt létrehozták.

A hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a tábla szülőkatalógusában.
  2. USE_CATALOG a tábla szülőkatalógusában, valamint a MANAGE és USE_SCHEMA a tábla szülőséma alapján.
  3. USE_CATALOG a tábla szülőkatalógusában, USE_SCHEMA a tábla szülőséma és a MANAGE a táblában.
databricks data-quality cancel-refresh OBJECT_TYPE OBJECT_ID REFRESH_ID [flags]

Arguments

OBJECT_TYPE

    A figyelt objektum típusa. A következők egyike lehet: schema vagy table.

OBJECT_ID

    A kérelemobjektum UUID azonosítója. A schema_id séma és table_id a tábla esetében használható.

    Keresse meg a schema_id következőt: (1) A Séma erőforrás schema_id . (2) A Katalóguskezelőben → válassza ki a sémát, → lépjen a Részletek lapra → a Sémaazonosító mezőre.

    Keresse meg a table_id következőt: (1) A Táblák erőforrás table_id . (2) A Katalóguskezelőben → jelölje ki a táblát, → lépjen a Részletek lapra a Táblaazonosító mező →.

REFRESH_ID

    A frissítési művelet egyedi azonosítója.

Beállítások

Globális jelzők

Examples

Az alábbi példa megszakít egy frissítési műveletet:

databricks data-quality cancel-refresh table a1b2c3d4-e5f6-7890-a1b2-c3d4e5f67890 refresh-12345

databricks data-quality create-monitor

Hozzon létre egy adatminőség-figyelőt egy Unity Catalog-objektumon. A hívónak sémafigyelőt vagy anomaly_detection_config táblafigyelőt kell megadniadata_profiling_config.

A object_type táblához a hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a tábla szülőkatalógusában, USE_SCHEMA a tábla szülőséma és SELECT a tábla.
  2. USE_CATALOG a tábla szülőkatalógusában, a MANAGE és a USE_SCHEMA a tábla szülőséma SELECT és a tábla alapján.
  3. USE_CATALOG a tábla szülőkatalógusában, USE_SCHEMA a tábla szülőséma, a MANAGE és SELECT a tábla.

A munkaterület-objektumok( például az irányítópult) abban a munkaterületen lesznek létrehozva, ahol ezt a hívást kezdeményezték.

A séma object_type a hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a séma szülőkatalógusában.
  2. USE_CATALOG a séma szülőkatalógusában, valamint a MANAGE és USE_SCHEMA a sémán.
databricks data-quality create-monitor OBJECT_TYPE OBJECT_ID [flags]

Arguments

OBJECT_TYPE

    A figyelt objektum típusa. A következők egyike lehet: schema vagy table.

OBJECT_ID

    A kérelemobjektum UUID azonosítója. A schema_id séma és table_id a tábla esetében használható.

    Keresse meg a schema_id következőt: (1) A Séma erőforrás schema_id . (2) A Katalóguskezelőben → válassza ki a sémát, → lépjen a Részletek lapra → a Sémaazonosító mezőre.

    Keresse meg a table_id következőt: (1) A Táblák erőforrás table_id . (2) A Katalóguskezelőben → jelölje ki a táblát, → lépjen a Részletek lapra a Táblaazonosító mező →.

Beállítások

--json JSON

    A beágyazott JSON-sztring vagy a @path JSON-fájl a kérelem törzsével

Globális jelzők

Examples

Az alábbi példa egy adatminőség-figyelőt hoz létre egy táblához:

databricks data-quality create-monitor table a1b2c3d4-e5f6-7890-a1b2-c3d4e5f67890 --json '{"data_profiling_config": {"enabled": true}}'

Az alábbi példa JSON-fájllal hoz létre egy monitort:

databricks data-quality create-monitor table a1b2c3d4-e5f6-7890-a1b2-c3d4e5f67890 --json @monitor-config.json

databricks data-quality create-refresh

Hozzon létre egy frissítést. A hívást ugyanabban a munkaterületen kell kezdeményezni, ahol a figyelőt létrehozták.

A hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a tábla szülőkatalógusában.
  2. USE_CATALOG a tábla szülőkatalógusában, valamint a MANAGE és USE_SCHEMA a tábla szülőséma alapján.
  3. USE_CATALOG a tábla szülőkatalógusában, USE_SCHEMA a tábla szülőséma és a MANAGE a táblában.
databricks data-quality create-refresh OBJECT_TYPE OBJECT_ID [flags]

Arguments

OBJECT_TYPE

    A figyelt objektum típusa. A következők egyike lehet: schema vagy table.

OBJECT_ID

    A kérelemobjektum UUID azonosítója. A schema_id séma és table_id a tábla esetében használható.

    Keresse meg a schema_id következőt: (1) A Séma erőforrás schema_id . (2) A Katalóguskezelőben → válassza ki a sémát, → lépjen a Részletek lapra → a Sémaazonosító mezőre.

    Keresse meg a table_id következőt: (1) A Táblák erőforrás table_id . (2) A Katalóguskezelőben → jelölje ki a táblát, → lépjen a Részletek lapra a Táblaazonosító mező →.

Beállítások

--json JSON

    A beágyazott JSON-sztring vagy a @path JSON-fájl a kérelem törzsével

Globális jelzők

Examples

Az alábbi példa egy táblafigyelő frissítését hozza létre:

databricks data-quality create-refresh table a1b2c3d4-e5f6-7890-a1b2-c3d4e5f67890

Az alábbi példa JSON használatával hoz létre frissítést:

databricks data-quality create-refresh table a1b2c3d4-e5f6-7890-a1b2-c3d4e5f67890 --json '{}'

databricks data-quality delete-monitor

Adatminőség-figyelő törlése Unity Catalog-objektumon.

A object_type táblához a hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a tábla szülőkatalógusában.
  2. USE_CATALOG a tábla szülőkatalógusában, valamint a MANAGE és USE_SCHEMA a tábla szülőséma alapján.
  3. USE_CATALOG a tábla szülőkatalógusában, USE_SCHEMA a tábla szülőséma és a MANAGE a táblában.

Fontos

A metrikatáblák és az irányítópult nem törlődik a hívás részeként; ezeket az eszközöket manuálisan kell megtisztítani (ha szükséges).

A séma object_type a hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a séma szülőkatalógusában.
  2. USE_CATALOG a séma szülőkatalógusában, valamint a MANAGE és USE_SCHEMA a sémán.
databricks data-quality delete-monitor OBJECT_TYPE OBJECT_ID [flags]

Arguments

OBJECT_TYPE

    A figyelt objektum típusa. A következők egyike lehet: schema vagy table.

OBJECT_ID

    A kérelemobjektum UUID azonosítója. A schema_id séma és table_id a tábla esetében használható.

    Keresse meg a schema_id következőt: (1) A Séma erőforrás schema_id . (2) A Katalóguskezelőben → válassza ki a sémát, → lépjen a Részletek lapra → a Sémaazonosító mezőre.

    Keresse meg a table_id következőt: (1) A Táblák erőforrás table_id . (2) A Katalóguskezelőben → jelölje ki a táblát, → lépjen a Részletek lapra a Táblaazonosító mező →.

Beállítások

Globális jelzők

Examples

Az alábbi példa egy adatminőség-figyelőt töröl:

databricks data-quality delete-monitor table a1b2c3d4-e5f6-7890-a1b2-c3d4e5f67890

databricks adatminőségi get-monitor

Adatminőség-figyelő olvasása Unity Catalog-objektumon.

A object_type táblához a hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a tábla szülőkatalógusában.
  2. USE_CATALOG a tábla szülőkatalógusában, valamint a MANAGE és USE_SCHEMA a tábla szülőséma alapján.
  3. USE_CATALOG a tábla szülőkatalógusában, USE_SCHEMA a tábla szülőséma SELECT és a tábla.

A séma object_type a hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a séma szülőkatalógusában.
  2. USE_CATALOG a séma szülőkatalógusában, és USE_SCHEMA a sémában.

A visszaadott információk tartalmazzák az entitás és a szülő entitás konfigurációs értékeit, valamint a figyelő által létrehozott eszközökre vonatkozó információkat. Bizonyos információk (például irányítópult) kiszűrhetők, ha a hívó egy másik munkaterületen van, mint ahol a figyelőt létrehozták.

databricks data-quality get-monitor OBJECT_TYPE OBJECT_ID [flags]

Arguments

OBJECT_TYPE

    A figyelt objektum típusa. A következők egyike lehet: schema vagy table.

OBJECT_ID

    A kérelemobjektum UUID azonosítója. A schema_id séma és table_id a tábla esetében használható.

    Keresse meg a schema_id következőt: (1) A Séma erőforrás schema_id . (2) A Katalóguskezelőben → válassza ki a sémát, → lépjen a Részletek lapra → a Sémaazonosító mezőre.

    Keresse meg a table_id következőt: (1) A Táblák erőforrás table_id . (2) A Katalóguskezelőben → jelölje ki a táblát, → lépjen a Részletek lapra a Táblaazonosító mező →.

Beállítások

Globális jelzők

Examples

Az alábbi példa egy adatminőség-figyelővel kapcsolatos információkat kap:

databricks data-quality get-monitor table a1b2c3d4-e5f6-7890-a1b2-c3d4e5f67890

databricks data-quality get-refresh

Adatminőség-figyelő frissítési információinak lekérése. A hívást ugyanabban a munkaterületen kell kezdeményezni, ahol a figyelőt létrehozták.

A object_type táblához a hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a tábla szülőkatalógusában.
  2. USE_CATALOG a tábla szülőkatalógusában, valamint a MANAGE és USE_SCHEMA a tábla szülőséma alapján.
  3. USE_CATALOG a tábla szülőkatalógusában, USE_SCHEMA a tábla szülőséma SELECT és a tábla.

A séma object_type a hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a séma szülőkatalógusában.
  2. USE_CATALOG a séma szülőkatalógusában, és USE_SCHEMA a sémában.
databricks data-quality get-refresh OBJECT_TYPE OBJECT_ID REFRESH_ID [flags]

Arguments

OBJECT_TYPE

    A figyelt objektum típusa. A következők egyike lehet: schema vagy table.

OBJECT_ID

    A kérelemobjektum UUID azonosítója. A schema_id séma és table_id a tábla esetében használható.

    Keresse meg a schema_id következőt: (1) A Séma erőforrás schema_id . (2) A Katalóguskezelőben → válassza ki a sémát, → lépjen a Részletek lapra → a Sémaazonosító mezőre.

    Keresse meg a table_id következőt: (1) A Táblák erőforrás table_id . (2) A Katalóguskezelőben → jelölje ki a táblát, → lépjen a Részletek lapra a Táblaazonosító mező →.

REFRESH_ID

    A frissítési művelet egyedi azonosítója.

Beállítások

Globális jelzők

Examples

Az alábbi példa egy frissítéssel kapcsolatos információkat kap:

databricks data-quality get-refresh table a1b2c3d4-e5f6-7890-a1b2-c3d4e5f67890 refresh-12345

databricks data-quality list-refresh

Adatminőség-figyelő frissítéseinek listázása. A hívást ugyanabban a munkaterületen kell kezdeményezni, ahol a figyelőt létrehozták.

A object_type táblához a hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a tábla szülőkatalógusában.
  2. USE_CATALOG a tábla szülőkatalógusában, valamint a MANAGE és USE_SCHEMA a tábla szülőséma alapján.
  3. USE_CATALOG a tábla szülőkatalógusában, USE_SCHEMA a tábla szülőséma SELECT és a tábla.

A séma object_type a hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a séma szülőkatalógusában.
  2. USE_CATALOG a séma szülőkatalógusában, és USE_SCHEMA a sémában.
databricks data-quality list-refresh OBJECT_TYPE OBJECT_ID [flags]

Arguments

OBJECT_TYPE

    A figyelt objektum típusa. A következők egyike lehet: schema vagy table.

OBJECT_ID

    A kérelemobjektum UUID azonosítója. A schema_id séma és table_id a tábla esetében használható.

    Keresse meg a schema_id következőt: (1) A Séma erőforrás schema_id . (2) A Katalóguskezelőben → válassza ki a sémát, → lépjen a Részletek lapra → a Sémaazonosító mezőre.

    Keresse meg a table_id következőt: (1) A Táblák erőforrás table_id . (2) A Katalóguskezelőben → jelölje ki a táblát, → lépjen a Részletek lapra a Táblaazonosító mező →.

Beállítások

--page-size int

    Az oldalonként visszaadandó frissítések maximális száma.

--page-token string

    Jogkivonat az eredmények következő oldalának lekéréséhez.

Globális jelzők

Examples

Az alábbi példa egy monitor összes frissítését felsorolja:

databricks data-quality list-refresh table a1b2c3d4-e5f6-7890-a1b2-c3d4e5f67890

Az alábbi példa a lapszámozással történő frissítéseket sorolja fel:

databricks data-quality list-refresh table a1b2c3d4-e5f6-7890-a1b2-c3d4e5f67890 --page-size 10

databricks data-quality update-monitor

Adatminőség-figyelő frissítése Unity Catalog-objektumon.

A object_type táblához a hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a tábla szülőkatalógusában.
  2. USE_CATALOG a tábla szülőkatalógusában, valamint a MANAGE és USE_SCHEMA a tábla szülőséma alapján.
  3. USE_CATALOG a tábla szülőkatalógusában, USE_SCHEMA a tábla szülőséma és a MANAGE a táblában.

A séma object_type a hívónak az alábbi engedélyek valamelyikével kell rendelkeznie:

  1. MANAGE és USE_CATALOG a séma szülőkatalógusában.
  2. USE_CATALOG a séma szülőkatalógusában, valamint a MANAGE és USE_SCHEMA a sémán.
databricks data-quality update-monitor OBJECT_TYPE OBJECT_ID UPDATE_MASK OBJECT_TYPE OBJECT_ID [flags]

Arguments

OBJECT_TYPE

    A figyelt objektum típusa. A következők egyike lehet: schema vagy table.

OBJECT_ID

    A kérelemobjektum UUID azonosítója. A schema_id séma és table_id a tábla esetében használható.

UPDATE_MASK

    A mezőmaszk, amely megadja, hogy mely mezőket kell vesszővel elválasztott listaként frissíteni. Példaérték: data_profiling_config.custom_metrics,data_profiling_config.schedule.quartz_cron_expression.

Beállítások

--json JSON

    A beágyazott JSON-sztring vagy a @path JSON-fájl a kérelem törzsével

Globális jelzők

Examples

Az alábbi példa frissíti a monitor konfigurációját:

databricks data-quality update-monitor table a1b2c3d4-e5f6-7890-a1b2-c3d4e5f67890 "data_profiling_config.schedule.quartz_cron_expression" table a1b2c3d4-e5f6-7890-a1b2-c3d4e5f67890 --json '{"data_profiling_config": {"schedule": {"quartz_cron_expression": "0 0 12 * * ?"}}}'

Globális jelzők

Globális jelzők

--debug

  Engedélyezze-e a hibakeresési naplózást.

-h vagy --help

    Súgó megjelenítése a Databricks parancssori felületéhez, a kapcsolódó parancscsoporthoz vagy a kapcsolódó parancshoz.

--log-file karakterlánc

    A karakterlánc, amely megadja, melyik fájlba írja az kimeneti naplókat. Ha ez a jelző nincs megadva, akkor az alapértelmezett beállítás a kimeneti naplók stderrbe írása.

--log-format formátum

    A naplóformátum típusa, text vagy json. Az alapértelmezett érték a text.

--log-level karakterlánc

    A naplóformátum szintjét képviselő karakterlánc. Ha nincs megadva, a naplóformátum szintje le van tiltva.

-o, --output típus

    A parancs kimenetének típusa: text vagy json. Az alapértelmezett érték a text.

-p, --profile karakterlánc

    A parancs futtatásához használni kívánt fájl profiljának ~/.databrickscfg neve. Ha ez a jelző nincs megadva, akkor ha létezik, a rendszer a névvel ellátott DEFAULT profilt használja.

--progress-format formátum

    A folyamatnaplók megjelenítésének formátuma: default, append, inplacevagy json

-t, --target karakterlánc

    Ha alkalmazható, a használni kívánt célcsomag

  • Last updated on