Debug pemetaan aliran data
Selama pembangunan Pemetaan Aliran Data, Anda dapat melihat secara interaktif cara transformasi data dijalankan sehingga Anda dapat men-debugnya. Untuk menggunakan fungsi ini, pertama-tama Anda perlu mengaktifkan fitur "Debug Aliran Data".
Mengklik Debug akan menyediakan kluster Spark yang diperlukan untuk berinteraksi dengan transformasi Pemetaan Aliran Data. Saat mengaktifkan Debug, Anda akan diminta untuk memilih Runtime Integrasi yang perlu Anda gunakan di lingkungan. Jika Anda memilih AutoResolveIntegrationRuntime, kluster dengan delapan core akan tersedia dengan waktu untuk nilai hidup 60 menit.
Catatan
Biasanya dibutuhkan 5-7 menit agar kluster berputar. Dengan mode ini aktif dan kluster Spark berjalan, Anda dapat membangun alur data Anda selangkah demi selangkah dan melihat data saat berjalan melalui setiap fase transformasi.
Tab Pratinjau Data tersedia dalam mode Debug yang akan memungkinkan Anda untuk melihat data di setiap tahap alur. Anda dapat melihat data setelah setiap transformasi. Pempratinjau data juga menyediakan kemampuan untuk bertindak pada data seperti melihat statistik deskriptif data, atau kemampuan untuk memodifikasi data.
Terakhir, Anda dapat menggunakan pengaturan debug untuk mengontrol jumlah baris yang dikembalikan dalam pempratinjau data.
Catatan
Disarankan untuk membatasi jumlah baris yang kembali dengan cukup untuk memungkinkan Anda mengonfirmasi bahwa data sudah benar. Semakin besar himpunan data, semakin lama waktu yang dibutuhkan untuk mengembalikan hasilnya. Anda juga dapat menggunakan pengaturan Debug untuk menentukan nilai parameter apa pun yang harus digunakan selama eksekusi alur.