Tutorial: Mendaftarkan aset data di Azure Data Catalog
Penting
Azure Data Catalog dihentikan pada 15 Mei 2024.
Untuk fitur katalog data, gunakan layanan Microsoft Purview , yang menawarkan tata kelola data terpadu untuk seluruh data estate Anda.
Dalam tutorial ini, Anda menggunakan alat pendaftaran untuk mendaftarkan aset data dari sampel database dengan katalog. Pendaftaran adalah proses mengekstrak metadata struktural utama seperti nama, jenis, dan lokasi dari sumber data dan aset yang dimilikinya, dan menyalin metadata tersebut ke katalog. Sumber data dan aset data tetap berada di tempatnya, tetapi metadata digunakan oleh katalog untuk membuatnya lebih mudah ditemukan dan dipahami.
Dalam tutorial ini, Anda akan mempelajari cara:
- Mendaftarkan aset data
- Mencari aset data
- Membuat anotasi aset data
- Menyambungkan ke aset data
- Mengelola aset data
- Menghapus aset data
Prasyarat
- Langganan Microsoft Azure.
- Anda harus memiliki penyewa Microsoft Entra Anda sendiri.
- Azure Data Catalog
Untuk menyiapkan Data Catalog, Anda harus menjadi pemilik atau pemilik bersama sebuah langganan Azure.
Mendaftarkan aset data
Mendaftarkan sumber data
Dalam contoh ini, kita akan mendaftarkan aset data (tabel) dari sampel database untuk Azure SQL Database, tetapi Anda dapat menggunakan sumber data yang didukung jika Anda lebih suka bekerja dengan data yang akrab dan relevan dengan peran Anda. Untuk daftar sumber data yang didukung, lihat: Sumber data yang didukung.
Nama database yang kita gunakan dalam tutorial ini adalah RLSTest.
Sekarang, Anda bisa mendaftarkan aset data dari sampel database dengan menggunakan Azure Data Catalog.
Buka Beranda Azure Data Catalog dan pilih Terbitkan Data.
Pilih Luncurkan Aplikasi untuk mengunduh, menginstal, dan menjalankan alat pendaftaran di komputer.
Pada halaman Selamat Datang, pilih Masuk dan masukkan informasi masuk Anda.
Pada halaman Microsoft Azure Data Catalog, pilih SQL Server dan Berikutnya.
Masukkan properti koneksi SQL Server untuk sampel database Anda di Azure SQL Database dan pilih SAMBUNGKAN.
Daftarkan metadata aset data Anda. Dalam contoh ini, Anda mendaftarkan objek Produk dari namespace layanan sampel:
Di pohon Hierarki Server, perluas sampel database Anda dan pilih SalesLT.
Pilih Produk, ProductCategory, ProductDescription, dan ProductModel dengan menggunakan Ctrl+select.
Pilih panah yang dipilih pindah (>). Tindakan ini memindahkan semua obyek terpilih ke dalam daftar Objek yang akan didaftarkan.
Pilih Masukkan Pratinjau untuk memasukkan pratinjau salinan bayangan data. Salinan bayangan memasukkan hingga 20 rekaman dari setiap tabel, dan disalin ke dalam katalog.
Pilih Masukkan Profil Data untuk memasukkan salinan bayangan statistik objek untuk profil data (contohnya: nilai minimum, maksimum, dan rata-rata untuk kolom, jumlah baris).
Di bidang Tambah tag, masukkan penjualan, produk, azure sql. Tindakan ini menambah tag pencarian untuk aset data ini. Tag adalah cara terbaik untuk membantu pengguna menemukan sumber data terdaftar.
Tentukan nama pakar pada data ini (opsional).
Pilih DAFTARKAN. Azure Data Catalog mendaftarkan objek yang Anda pilih. Dalam latihan ini, objek yang dipilih dari sampel database Anda terdaftar. Alat pendaftaran mengekstrak metadata dari aset data dan menyalin data ke dalam layanan Azure Data Catalog. Data tetap berada di tempatnya saat ini. Data tetap berada di bawah kendali admin dan kebijakan sistem asal.
Untuk melihat objek sumber data terdaftar Anda, pilih Tampilkan Portal. Di portal Azure Data Catalog, konfirmasi bahwa Anda melihat keempat tabel dan database dalam tampilan kisi (verifikasi bahwa bilah pencarian kosong).
Dalam latihan ini, Anda mendaftarkan objek dari sampel database untuk Azure SQL Database sehingga objek dapat mudah ditemukan pengguna di seluruh organisasi Anda.
Pada latihan berikutnya, Anda mempelajari cara menemukan aset data terdaftar.
Menemukan aset data
Penemuan di Azure Data Catalog menggunakan dua mekanisme utama: pencarian dan pemfilteran.
Pencarian dirancang agar intuitif dan kuat. Secara default, istilah pencarian dicocokkan dengan properti apa pun di katalog, termasuk anotasi yang disediakan pengguna.
Pemfilteran dirancang untuk melengkapi pencarian. Anda dapat memilih karakteristik tertentu seperti pakar, jenis sumber data, jenis objek, dan tag untuk melihat aset data yang cocok dan membatasi hasil pencarian ke aset yang cocok.
Dengan menggunakan kombinasi pencarian dan pemfilteran, Anda bisa mengarahkan sumber data yang terdaftar di Azure Data Catalog dengan cepat.
Dalam latihan ini, Anda menggunakan portal Azure Data Catalog untuk menemukan aset data yang Anda daftarkan dalam latihan sebelumnya. Lihat Referensi sintaks Pencarian Azure Data Catalog untuk rincian tentang sintaks pencarian.
Berikut adalah beberapa contoh untuk menemukan aset data di katalog.
Menemukan aset data dengan pencarian dasar
Pencarian dasar membantu Anda mencari katalog dengan menggunakan satu atau beberapa istilah pencarian. Hasil adalah aset yang cocok di properti dengan satu atau beberapa persyaratan yang ditentukan.
Pilih Beranda di portal Azure Data Catalog. Jika Anda telah menutup browser web, buka beranda Azure Data Catalog.
Dalam kotak pencarian, masukkan
product
dan tekan ENTER.Konfirmasi bahwa Anda melihat keempat tabel dan database dalam hasilnya. Anda bisa beralih antara tampilan kisi dan tampilan daftar dengan memilih tombol pada bar alat, seperti yang diperlihatkan dalam gambar berikut. Perhatikan bahwa kata kunci pencarian disorot dalam hasil pencarian karena opsi Sorot adalah AKTIF. Anda juga dapat menentukan jumlah hasil per halaman di hasil pencarian.
Panel Pencarian ada di sebelah kiri dan panel Properti ada di sebelah kanan. Pada panel Pencarian, Anda bisa mengubah kriteria pencarian dan memfilter hasil. Panel Properti menampilkan properti objek yang dipilih dalam kisi atau daftar.
Pilih Produk di hasil pencarian. pilih tab Pratinjau, Kolom, Profil Data, dan Dokumentasi, atau pilih panah untuk memperluas panel bawah.
Pada tab Pratinjau, Anda melihat pratinjau data dalam tabel Produk.
Pilih tab Kolom untuk menemukan detail tentang kolom (seperti nama dan jenis data)di aset data.
Pilih tab Profil Data untuk melihat pembuatan profil data (contohnya: jumlah baris, ukuran data, atau nilai minimum dalam kolom) di aset data.
Menemukan aset data dengan pelindung properti
Pelindung properti membantu Anda menemukan aset data di mana istilah pencarian dicocokkan dengan properti yang ditentukan.
Kosongkan filter Tabel di bawah Jenis Objek dalam Filter.
Dalam kotak pencarian, masukkan
tags:product
dan tekan ENTER. Lihat Referensi sintaks Pencarian Azure Data Catalog untuk semua properti yang bisa Anda gunakan untuk mencari katalog data.Konfirmasikan bahwa Anda melihat tabel dan database dalam hasilnya.
Menyimpan pencarian
Di panel Pencarian di bagian Pencarian Saat Ini, masukkan nama untuk pencarian dan pilih Simpan.
Konfirmasikan bahwa pencarian yang disimpan muncul di bawah Pencarian Tersimpan.
Pilih salah satu tindakan yang bisa Anda lakukan pada pencarian yang disimpan (pencarian Ganti Nama, Hapus, Simpan Sebagai Default).
Pengelompokan dengan tanda kurung
Melalui pengelompokan dengan tanda kurung, Anda dapat mengelompokkan bagian kueri untuk mencapai isolasi logis, terutama bersama dengan operator Boolean.
Dalam kotak pencarian, masukkan
name:product AND (tags:product AND objectType:table)
dan tekan ENTER.Konfirmasi bahwa Anda hanya melihat tabel Produk di hasil pencarian.
Operator perbandingan
Dengan operator perbandingan, Anda dapat menggunakan perbandingan selain kesetaraan untuk properti yang memiliki jenis data numerik dan tanggal.
Di kotak pencarian, masukkan
lastRegisteredTime:>"06/09/2016"
.Kosongkan filter Tabel di bawah Jenis Objek.
Tekan ENTER.
Konfirmasi bahwa Anda melihat tabel Produk, ProductCategory, dan ProductDescription serta database SQL yang Anda daftarkan dalam hasil pencarian.
Lihat Cara menemukan aset data untuk informasi terperinci tentang menemukan aset data. Untuk informasi selengkapnya tentang sintaks pencarian, lihat Referensi sintaks Azure Data Catalog.
Membuat anotasi aset data
Dalam latihan ini, Anda menggunakan portal Azure Data Catalog untuk membuat anotasi (menambah informasi seperti deskripsi, tag, atau pakar) aset data yang ada di katalog. Anotasi melengkapi metadata struktural yang diekstrak dari sumber data selama pendaftaran. Anotasi membuat aset data jauh lebih mudah ditemukan dan dipahami.
Dalam latihan ini, Anda membuat anotasi aset data tunggal (ProductPhoto). Anda menambah nama dan deskripsi yang ramah ke aset data ProductPhoto.
Buka beranda Azure Data Catalog dan cari dengan
tags:product
untuk menemukan aset data yang telah Anda daftarkan.Pilih ProductModel di hasil pencarian.
Masukkan Gambar produk untuk Nama ramah dan Foto produk untuk materi pemasaran untuk Deskripsi.
Deskripsi membantu orang lain menemukan dan memahami alasan dan cara menggunakan aset data yang dipilih. Anda juga dapat menambah lebih banyak tag dan menampilkan kolom. Anda bisa mencari dan memfilter sumber data dengan menggunakan metadata deskriptif yang telah Anda tambahkan ke katalog.
Anda juga bisa melakukan langkah-langkah berikut di halaman ini:
Tambah pakar untuk aset data. pilih Tambah di area Pakar.
Tambah tag di tingkat himpunan data. pilih Tambah di area Tag. Tag dapat menjadi tag pengguna atau tag glosarium. Azure Data Catalog Edisi Standar mencakup glosarium bisnis yang membantu admin katalog mendefinisikan taksonomi bisnis pusat. Lalu, pengguna katalog dapat membuat anotasi aset data dengan istilah glosarium. Untuk informasi selengkapnya, lihat Cara menyiapkan Glosarium Bisnis untuk Pembuatan Tag yang Diatur
Menambah tag di tingkat kolom. pilih Tambah di bawah Tag untuk kolom yang ingin dibuat anotasi.
Tambah deskripsi di tingkat kolom. Masukkan Deskripsi untuk kolom. Anda juga dapat melihat metadata deskripsi yang diekstrak dari sumber data.
Tambah informasi Akses permintaan yang memperlihatkan cara meminta akses ke aset data kepada pengguna.
Pilih tab Dokumentasi dan berikan dokumentasi untuk aset data. Dengan dokumentasi Azure Data Catalog, Anda bisa menggunakan katalog data sebagai repositori konten untuk membuat narasi lengkap aset data Anda.
Anda juga dapat menambah anotasi ke beberapa aset data. Contohnya, Anda dapat memilih semua aset data yang didaftarkan dan menentukan pakar untuk mereka.
Azure Data Catalog mendukung pendekatan crowd-sourcing untuk anotasi. Setiap pengguna Azure Data Catalog dapat menambah tag (pengguna atau glosarium), deskripsi, dan metadata lainnya. Dengan demikian, pengguna menambah perspektif pada aset data dan penggunaannya, serta berbagi perspektif itu dengan pengguna lain.
Lihat Cara membuat anotasi aset data untuk informasi terperinci tentang membuat anotasi aset data.
Menyambungkan ke aset data
Dalam latihan ini, Anda membuka aset data di alat klien terintegrasi (Excel) dan alat yang tidak terintegrasi (SQL Server Management Studio) dengan menggunakan informasi koneksi.
Catatan
Perlu diingat bahwa Azure Data Catalog tidak memberi akses ke sumber data yang sebenarnya—hanya memudahkan Anda untuk menemukan dan memahaminya. Ketika tersambung ke sumber data, aplikasi klien yang Anda pilih menggunakan informasi masuk Windows atau meminta informasi masuk Anda seperlunya. Jika sebelumnya Anda belum diberi akses ke sumber data, Anda harus diberi akses sebelum bisa tersambung.
Menyambungkan ke aset data dari Excel
Pilih Produk dari hasil pencarian. pilih Buka Di pada bar alat dan pilih Excel.
Pilih Buka di jendela pop-up unduhan. Pengalaman ini mungkin bervariasi tergantung pada browser.
Di jendela Pemberitahuan Keamanan Microsoft Excel, pilih Aktifkan.
Pertahankan default dalam kotak dialog Impor Data dan pilih OK.
Tampilkan sumber data di Excel.
SQL Server Management Studio
Dalam latihan ini, Anda tersambung ke aset data yang ditemukan dengan menggunakan Azure Data Catalog. Dengan portal Azure Data Catalog, Anda dapat tersambung langsung dengan menggunakan aplikasi klien yang terintegrasi ke dalam menu Buka di. Anda juga dapat tersambung dengan aplikasi yang dipilih dengan menggunakan informasi lokasi koneksi yang dimasukkan dalam metadata aset. Contohnya, Anda dapat menggunakan SQL Server Management Studio untuk menyambungkan ke Azure SQL Database guna mengakses data dalam aset data yang terdaftar dalam tutorial ini.
Buka SQL Server Management Studio.
Dalam kotak dialog Sambungkan ke Server, masukkan nama server dari panel Properti di portal Azure Data Catalog.
Gunakan autentikasi dan informasi masuk yang sesuai untuk mengakses aset data. Jika Anda tidak memiliki akses, gunakan informasi di bidang Minta Akses untuk mendapatkannya.
Pilih Lihat String Koneksi untuk melihat dan menyalin string koneksi ADO.NET, ODBC, dan OLEDB ke clipboard untuk digunakan dalam aplikasi Anda.
Mengelola aset data
Dalam langkah ini, Anda melihat cara menyiapkan keamanan untuk aset data Anda. Azure Data Catalog tidak memberi akses ke data pengguna. Pemilik sumber data mengontrol akses data.
Anda bisa menggunakan Azure Data Catalog untuk menemukan sumber data dan menampilkan metadata yang terkait dengan sumber terdaftar dalam katalog. Namun, mungkin ada situasi di mana sumber data hanya boleh dilihat oleh pengguna tertentu atau kepada anggota grup tertentu. Untuk skenario ini, Anda dapat menggunakan Azure Data Catalog untuk mengambil kepemilikan aset data terdaftar, dan mengontrol visibilitas aset yang Anda miliki.
Catatan
Kemampuan manajemen yang dijelaskan dalam latihan ini hanya tersedia di Edisi Standar Azure Data Catalog, bukan di Edisi Gratis. Di Azure Data Catalog, Anda dapat mengambil kepemilikan aset data, menambah pemilik bersama ke aset data, dan mengatur visibilitas aset data.
Mengambil kepemilikan aset data dan membatasi visibilitas
Buka beranda Azure Data Catalog. Dalam kotak pencarian Cari, masukkan
tags:cycles
dan tekan ENTER.Pilih item dalam daftar hasil dan pilih Ambil Kepemilikan pada bar alat.
Di bagian Manajemen panel Properti, pilih Ambil Kepemilikan.
Untuk membatasi visibilitas, pilih Pemilik & Pengguna Ini di bagian Visibilitas dan pilih Tambah. Masukkan alamat email pengguna dalam kotak teks dan tekan ENTER.
Menghapus aset data
Dalam latihan ini, Anda menggunakan portal Azure Data Catalog untuk menghapus data pratinjau dari aset data terdaftar dan menghapus aset data dari katalog.
Di Azure Data Catalog, Anda bisa menghapus aset individu atau menghapus beberapa aset.
Dalam kotak pencarian Cari, masukkan
tags:cycles
dan tekan ENTER.Pilih item dalam daftar hasil dan pilih Hapus pada bar alat seperti diperlihatkan dalam gambar berikut:
Jika menggunakan tampilan daftar, kotak centang ada di sebelah kiri item seperti diperlihatkan dalam gambar berikut:
Anda juga bisa memilih beberapa aset data dan menghapusnya seperti diperlihatkan dalam gambar berikut:
Catatan
Perilaku default katalog memungkinkan setiap pengguna mendaftarkan sumber data, dan memungkinkan setiap pengguna menghapus aset data yang telah terdaftar. Kemampuan manajemen yang dimasukkan dalam Azure Data Catalog Edisi Standar menyediakan opsi tambahan untuk mengambil kepemilikan aset, membatasi pihak yang dapat menemukan aset, dan membatasi pihak yang dapat menghapus aset.
Membersihkan sumber daya
Ikuti langkah-langkah Hapus aset data untuk membersihkan aset apa pun yang telah Anda gunakan saat mengikuti tutorial ini.
Ringkasan
Dalam tutorial ini, Anda mengeksplorasi kemampuan penting Azure Data Catalog, termasuk mendaftar, membuat anotasi, menemukan, dan mengelola aset data perusahaan. Sekarang, setelah Anda menyelesaikan tutorial, saatnya untuk memulai. Anda dapat memulai hari ini dengan mendaftarkan sumber data yang diandalkan Anda dan tim, dan mengundang kolega untuk menggunakan katalog.