Catatan
Akses ke halaman ini memerlukan otorisasi. Anda dapat mencoba masuk atau mengubah direktori.
Akses ke halaman ini memerlukan otorisasi. Anda dapat mencoba mengubah direktori.
grup perintah
Nota
Penggunaan Databricks CLI tunduk pada Lisensi Databricks dan Pemberitahuan Privasi Databricks, termasuk ketentuan Data Penggunaan apa pun.
feature-engineering Grup perintah dalam Databricks CLI memungkinkan Anda mengelola fitur di penyimpanan fitur Databricks Anda.
rekayasa fitur databricks buat-fitur
Buat fitur.
databricks feature-engineering create-feature FULL_NAME SOURCE INPUTS FUNCTION TIME_WINDOW [flags]
Arguments
FULL_NAME
Nama lengkap tiga bagian dari fitur (katalog, skema, nama).
SOURCE
Sumber data fitur.
INPUTS
Kolom input dari mana fitur dihitung.
FUNCTION
Fungsi yang digunakan untuk menghitung fitur.
TIME_WINDOW
Jendela waktu di mana fitur dihitung.
Opsi
--description string
Deskripsi fitur.
--json JSON
String JSON sebaris atau @path yang merujuk ke file JSON dengan isi badan permintaan.
Examples
Contoh berikut membuat fitur:
databricks feature-engineering create-feature my_catalog.my_schema.my_feature my_source my_inputs my_function my_time_window --description "My feature description"
Databricks feature-engineering create-kafka-config
Buat konfigurasi Kafka.
databricks feature-engineering create-kafka-config NAME BOOTSTRAP_SERVERS SUBSCRIPTION_MODE AUTH_CONFIG [flags]
Arguments
NAME
Nama yang secara unik mengidentifikasi konfigurasi Kafka ini di dalam metastore. Ini akan menjadi pengenal yang digunakan dari objek Feature untuk mereferensikan konfigurasi ini pada sebuah fitur. Bisa berbeda dari nama topik.
BOOTSTRAP_SERVERS
Daftar pasangan host/port yang dipisahkan koma yang menunjuk ke kluster Kafka.
SUBSCRIPTION_MODE
Opsi untuk mengonfigurasi topik Kafka mana yang akan diambil data.
AUTH_CONFIG
Konfigurasi autentikasi untuk koneksi ke topik.
Opsi
--json JSON
String JSON sebaris atau @path yang merujuk ke file JSON dengan isi badan permintaan.
Databricks feature-engineering create-materialized-feature
Buat fitur materialized.
databricks feature-engineering create-materialized-feature FEATURE_NAME [flags]
Arguments
FEATURE_NAME
Nama lengkap fitur di Unity Catalog.
Opsi
--cron-schedule string
Ekspresi cron kuarsa yang mendefinisikan jadwal pipeline materialisasi.
--json JSON
String JSON sebaris atau @path yang merujuk ke file JSON dengan isi badan permintaan.
--materialized-feature-id string
Pengidentifikasi unik yang ditetapkan server untuk fitur materialized.
--pipeline-schedule-state MaterializedFeaturePipelineScheduleState
Status jadwal pipeline materialisasi. Nilai yang didukung: ACTIVE, PAUSED, SNAPSHOT.
Databricks feature-engineering create-stream
Buat Stream.
databricks feature-engineering create-stream NAME SOURCE_CONFIG CONNECTION_CONFIG SCHEMA_CONFIG INGESTION_CONFIG [flags]
Arguments
NAME
Nama lengkap tiga bagian (catalog.schema.stream) dari aliran.
SOURCE_CONFIG
Konfigurasi spesifik sumber. Menentukan sumber platform streaming.
CONNECTION_CONFIG
Menentukan cara menghubungkan dan mengautentikasi ke platform stream.
SCHEMA_CONFIG
Definisi skema untuk stream. Saat ini hanya skema langsung yang didukung. Dalam tonggak mendatang, kami akan mendukung registri skema melalui UC Connection.
INGESTION_CONFIG
Konfigurasi untuk pengambilan data streaming: tabel yang dikelola menyimpan salinan offline data isi maju dan isi ulang historis opsional.
Opsi
--description string
Deskripsi yang disediakan pengguna.
--json JSON
String JSON sebaris atau @path yang merujuk ke file JSON dengan isi badan permintaan.
Fitur Databricks rekayasa fitur hapus fitur
Menghapus fitur.
databricks feature-engineering delete-feature FULL_NAME [flags]
Arguments
FULL_NAME
Nama fitur yang akan dihapus.
Examples
Contoh berikut menghapus fitur:
databricks feature-engineering delete-feature my_catalog.my_schema.my_feature
Databricks fitur rekayasa hapus-konfigurasi Kafka
Hapus konfigurasi Kafka.
databricks feature-engineering delete-kafka-config NAME [flags]
Arguments
NAME
Nama konfigurasi Kafka yang akan dihapus.
Databricks rekayasa fitur-penghapusan-materialisasi-fitur
Hapus fitur materialized.
databricks feature-engineering delete-materialized-feature MATERIALIZED_FEATURE_ID [flags]
Arguments
MATERIALIZED_FEATURE_ID
ID fitur materialisasi yang akan dihapus.
Databricks fitur rekayasa penghapusan-alur
Hapus Stream.
databricks feature-engineering delete-stream NAME [flags]
Arguments
NAME
Nama lengkap tiga bagian (catalog.schema.stream) dari Stream yang akan dihapus.
fitur-rekayasa databricks get-feature
Dapatkan fitur.
databricks feature-engineering get-feature FULL_NAME [flags]
Arguments
FULL_NAME
Nama fitur yang akan didapatkan.
Examples
Contoh berikut mendapatkan fitur:
databricks feature-engineering get-feature my_catalog.my_schema.my_feature
Databricks fitur rekayasa get-kafka-config
Dapatkan konfigurasi Kafka.
databricks feature-engineering get-kafka-config NAME [flags]
Arguments
NAME
Nama konfigurasi Kafka yang harus didapat.
Databricks fitur rekayasa dapatkan-materialized-fitur
Dapatkan fitur materialized.
databricks feature-engineering get-materialized-feature MATERIALIZED_FEATURE_ID [flags]
Arguments
MATERIALIZED_FEATURE_ID
ID fitur yang termaterialisasi.
Databricks feature-engineering get-stream
Dapatkan Streaming.
databricks feature-engineering get-stream NAME [flags]
Arguments
NAME
Nama lengkap tiga bagian (catalog.schema.stream) dari Stream yang akan didapat.
daftar fitur rekayasa fitur databricks
Daftarkan fitur.
databricks feature-engineering list-features [flags]
Opsi
--page-size int
Jumlah maksimum hasil yang akan dikembalikan.
--page-token string
Token pagination untuk menuju ke halaman berikutnya berdasarkan kueri sebelumnya.
Examples
Contoh berikut mencantumkan semua fitur:
databricks feature-engineering list-features
Databricks Daftar-Fitur Rekayasa-Kafka-Configs
Daftarkan konfigurasi Kafka.
databricks feature-engineering list-kafka-configs [flags]
Opsi
--limit int
Jumlah maksimum hasil yang akan dikembalikan.
--page-size int
Jumlah maksimum hasil yang akan dikembalikan.
Fitur Feature-Engineering List-Materialized-Features DataBricks
Daftarkan fitur yang terwujud.
databricks feature-engineering list-materialized-features [flags]
Opsi
--feature-name string
Saring berdasarkan nama fitur.
--limit int
Jumlah maksimum hasil yang akan dikembalikan.
--page-size int
Jumlah maksimum hasil yang akan dikembalikan.
Daftar Fitur Rekayasa DataBricks
Daftar Streaming.
databricks feature-engineering list-streams [flags]
Opsi
--limit int
Jumlah maksimum hasil yang akan dikembalikan.
--page-size int
Jumlah maksimum hasil yang akan dikembalikan.
--parent string
Nama dua bagian (catalog.schema) dari induk yang digunakan untuk mencantumkan Streams.
fitur pembaruan rekayasa fitur databricks
Perbarui deskripsi fitur (semua bidang lain tidak dapat diubah).
databricks feature-engineering update-feature FULL_NAME UPDATE_MASK SOURCE INPUTS FUNCTION TIME_WINDOW [flags]
Arguments
FULL_NAME
Nama lengkap tiga bagian dari fitur (katalog, skema, nama).
UPDATE_MASK
Daftar bidang yang akan diperbarui.
SOURCE
Sumber data fitur.
INPUTS
Kolom input dari mana fitur dihitung.
FUNCTION
Fungsi yang digunakan untuk menghitung fitur.
TIME_WINDOW
Jendela waktu di mana fitur dihitung.
Opsi
--description string
Deskripsi fitur.
--json JSON
String JSON sebaris atau @path yang merujuk ke file JSON dengan isi badan permintaan.
Examples
Contoh berikut memperbarui deskripsi fitur:
databricks feature-engineering update-feature my_catalog.my_schema.my_feature description my_source my_inputs my_function my_time_window --description "Updated description"
Pembaruan fitur rekayasa databricks Kafka-config
Perbarui konfigurasi Kafka.
databricks feature-engineering update-kafka-config NAME UPDATE_MASK BOOTSTRAP_SERVERS SUBSCRIPTION_MODE AUTH_CONFIG [flags]
Arguments
NAME
Nama yang secara unik mengidentifikasi konfigurasi Kafka ini di dalam metastore. Ini akan menjadi pengenal yang digunakan dari objek Feature untuk mereferensikan konfigurasi ini pada sebuah fitur. Bisa berbeda dari nama topik.
UPDATE_MASK
Daftar bidang yang akan diperbarui.
BOOTSTRAP_SERVERS
Daftar pasangan host/port yang dipisahkan koma yang menunjuk ke kluster Kafka.
SUBSCRIPTION_MODE
Opsi untuk mengonfigurasi topik Kafka mana yang akan diambil data.
AUTH_CONFIG
Konfigurasi autentikasi untuk koneksi ke topik.
Opsi
--json JSON
String JSON sebaris atau @path yang merujuk ke file JSON dengan isi badan permintaan.
Databricks fitur fitur pembaruan rekayasa termaterialisasi
Perbarui fitur yang telah dimaterialisasikan.
databricks feature-engineering update-materialized-feature MATERIALIZED_FEATURE_ID UPDATE_MASK FEATURE_NAME [flags]
Arguments
MATERIALIZED_FEATURE_ID
Pengidentifikasi unik yang ditetapkan server untuk fitur materialized.
UPDATE_MASK
Berikan kolom fitur materialisasi yang harus diperbarui. Saat ini, hanya bidang pipeline_state yang dapat diperbarui.
FEATURE_NAME
Nama lengkap fitur di Unity Catalog.
Opsi
--cron-schedule string
Ekspresi cron kuarsa yang mendefinisikan jadwal pipeline materialisasi.
--json JSON
String JSON sebaris atau @path yang merujuk ke file JSON dengan isi badan permintaan.
--materialized-feature-id string
Pengidentifikasi unik yang ditetapkan server untuk fitur materialized.
--pipeline-schedule-state MaterializedFeaturePipelineScheduleState
Status jadwal pipeline materialisasi. Nilai yang didukung: ACTIVE, PAUSED, SNAPSHOT.
Databricks fitur rekayasa pembaruan alur pembaruan
Perbarui Streaming.
databricks feature-engineering update-stream NAME UPDATE_MASK SOURCE_CONFIG CONNECTION_CONFIG SCHEMA_CONFIG INGESTION_CONFIG [flags]
Arguments
NAME
Nama lengkap tiga bagian (catalog.schema.stream) dari aliran.
UPDATE_MASK
Daftar bidang yang akan diperbarui.
SOURCE_CONFIG
Konfigurasi spesifik sumber. Menentukan sumber platform streaming.
CONNECTION_CONFIG
Menentukan cara menghubungkan dan mengautentikasi ke platform stream.
SCHEMA_CONFIG
Definisi skema untuk stream. Saat ini hanya skema langsung yang didukung. Dalam tonggak mendatang, kami akan mendukung registri skema melalui UC Connection.
INGESTION_CONFIG
Konfigurasi untuk pengambilan data streaming: tabel yang dikelola menyimpan salinan offline data isi maju dan isi ulang historis opsional.
Opsi
--description string
Deskripsi yang disediakan pengguna.
--json JSON
String JSON sebaris atau @path yang merujuk ke file JSON dengan isi badan permintaan.
Bendera dunia
--debug
Apakah debug logging ingin diaktifkan?
-h atau --help
Tampilkan bantuan untuk Databricks CLI atau grup perintah terkait atau perintah terkait.
--log-file tali
String yang mewakili file yang akan digunakan untuk menulis log output. Jika bendera ini tidak ditentukan, maka defaultnya adalah menulis log output ke stderr.
--log-format Format
Jenis format log, text atau json. Nilai defaultnya adalah text.
--log-level tali
Untaian yang menggambarkan tingkat format log. Jika tidak ditentukan, maka tingkat format log akan dinonaktifkan.
-o, --output jenis
Jenis output perintah, text atau json. Nilai defaultnya adalah text.
-p, --profile tali
Nama profil dalam file ~/.databrickscfg yang digunakan untuk menjalankan perintah. Jika bendera ini tidak ditentukan maka jika ada, profil bernama DEFAULT digunakan.
--progress-format Format
Format untuk menampilkan log kemajuan: default, , append, inplaceatau json
-t, --target tali
Jika berlaku, target bundel yang akan digunakan