Tugas Pembuatan Profil Data dan Penampil

Berlaku untuk: SQL Server (semua versi yang didukung) Integration Runtime SSIS di Azure Data Factory

Tugas Pembuatan Profil Data menyediakan fungsionalitas pembuatan profil data di dalam proses mengekstrak, mengubah, dan memuat data. Dengan menggunakan tugas Pembuatan Profil Data, Anda dapat mencapai manfaat berikut:

  • Menganalisis data sumber secara lebih efektif

  • Memahami data sumber dengan lebih baik

  • Cegah masalah kualitas data sebelum diperkenalkan ke gudang data.

Penting

Tugas Pembuatan Profil Data hanya berfungsi dengan data yang disimpan di SQL Server. Ini tidak berfungsi dengan sumber data pihak ketiga atau berbasis file.

Gambaran Umum Pembuatan Profil Data

Kualitas data penting untuk setiap bisnis. Ketika perusahaan membangun sistem analitik dan kecerdasan bisnis di atas sistem transaksional mereka, keandalan indikator performa utama dan prediksi penggalian data sepenuhnya bergantung pada validitas data tempat mereka berada. Tetapi meskipun pentingnya data yang valid untuk pengambilan keputusan bisnis meningkat, tantangan untuk memastikan validitas data ini juga meningkat. Data mengalir ke perusahaan terus-menerus dari berbagai sistem dan sumber, dan sejumlah besar pengguna.

Metrik untuk kualitas data bisa sulit didefinisikan karena khusus untuk domain atau aplikasi. Salah satu pendekatan umum untuk menentukan kualitas data adalah pembuatan profil data.

Profil data adalah kumpulan statistik agregat tentang data yang mungkin menyertakan yang berikut ini:

  • Jumlah baris dalam tabel Pelanggan.

  • Jumlah nilai berbeda dalam kolom Status.

  • Jumlah nilai null atau hilang di kolom Zip.

  • Distribusi nilai di kolom Kota.

  • Kekuatan dependensi fungsional kolom Status pada kolom Zip-yaitu, status harus selalu sama untuk nilai zip tertentu.

Statistik yang disediakan profil data memberi Anda informasi yang Anda butuhkan untuk secara efektif meminimalkan masalah kualitas yang mungkin terjadi dari penggunaan data sumber.

Layanan Integrasi dan Pembuatan Profil Data

Dalam Layanan Integrasi, proses pembuatan profil data terdiri dari langkah-langkah berikut:

Langkah 1: Menyiapkan Tugas Pembuatan Profil Data
Tugas Pembuatan Profil Data adalah tugas yang Anda gunakan untuk mengonfigurasi profil yang ingin Anda komputasi. Anda kemudian menjalankan paket yang berisi tugas Pembuatan Profil Data untuk menghitung profil. Tugas menyimpan output profil dalam format XML ke file atau variabel paket.

Untuk informasi selengkapnya:Penyiapan Tugas Pembuatan Profil Data

Langkah 2: Meninjau Profil yang Dihitung Tugas Pembuatan Profil Data
Untuk melihat profil data yang dihitung tugas Pembuatan Profil Data, Anda mengirim output ke file, lalu Anda menggunakan Penampil Profil Data. Penampil ini adalah utilitas mandiri yang menampilkan output profil dalam format ringkasan dan detail dengan kemampuan penelusuran opsional.

Untuk informasi selengkapnya:Penampil Profil Data

Penambahan Logika Bersyar ke Alur Kerja Pembuatan Profil Data

Tugas Pembuatan Profil Data tidak memiliki fitur bawaan yang memungkinkan Anda menggunakan logika kondisional untuk menyambungkan tugas ini ke tugas hilir berdasarkan output profil. Namun, Anda dapat dengan mudah menambahkan logika ini, dengan sejumlah kecil pemrograman, dalam tugas Skrip. Misalnya, tugas Skrip dapat melakukan kueri JalurX terhadap file output tugas Pembuatan Profil Data. Kueri dapat menentukan apakah persentase nilai null dalam kolom tertentu melebihi ambang batas tertentu. Jika persentase melebihi ambang batas, Anda dapat mengganggu paket dan menyelesaikan masalah dalam data sumber sebelum melanjutkan. Untuk informasi selengkapnya, lihat Menggabungkan Tugas Pembuatan Profil Data dalam Alur Kerja Paket.

Skema Profiler Data