Memantau alur

Pantau alur Lakeflow menggunakan UI alur bawaan, log peristiwa, riwayat kueri, dan hook peristiwa kustom. Fitur-fitur ini melacak kemajuan pembaruan, kualitas data, silsilah data, dan metrik streaming.

Topik	Description
Memantau menggunakan UI	Amati kemajuan dan status pembaruan alur, dan waspada tentang keberhasilan atau kegagalan. Lihat metrik untuk sumber streaming, seperti Apache Kafka dan Auto Loader.
Log peristiwa	Ekstrak informasi terperinci tentang pembaruan alur seperti silsilah data, metrik kualitas data, dan penggunaan sumber daya menggunakan log peristiwa alur. Selain itu, lihat skema untuk log peristiwa.
Riwayat kueri	Periksa dan diagnosis performa kueri dengan melihat riwayat kueri.
Pemantauan khusus	Tentukan tindakan khusus yang harus diambil saat peristiwa tertentu terjadi menggunakan pemicu peristiwa.

Selain itu, ada topik pemecahan masalah untuk skenario tertentu.

Topik	Description
Memulihkan alur dari kegagalan titik pemeriksaan streaming	Pulihkan pipeline yang memiliki titik pemeriksaan streaming yang tidak valid atau rusak.
Perbaiki waktu inisialisasi yang lama dalam pipeline	Perbaiki waktu inisialisasi tinggi untuk pipeline dengan memisahkan dan menyeimbangkan beban mengalir di seluruh pipeline.