köken kullanıcı kılavuzunu Microsoft Purview Veri Kataloğu

Bu makalede, Microsoft Purview Veri Kataloğu'daki veri kökeni özelliklerine genel bir bakış sağlanır.

Arka Plan

Microsoft Purview'un platform özelliklerinden biri, veri işlemleri tarafından oluşturulan veri kümeleri arasındaki kökeni gösterme özelliğidir. Data Factory, Veri Paylaşımı ve Power BI gibi sistemler, veri kökenini ilerledikçe yakalar. Atlas kancaları ve REST API aracılığıyla özel köken raporlama da desteklenir.

Köken koleksiyonu

Kurumsal veri sistemlerinden Microsoft Purview'da toplanan meta veriler, uçtan uca veri kökenini göstermek için birleştirilir. Microsoft Purview'da köken toplayan veri sistemleri geniş çapta aşağıdaki üç türe ayrılır:

Her sistem farklı bir köken kapsamı düzeyini destekler. Şu anda kullanılabilir olan köken kapsamını onaylamak için aşağıdaki bölümleri veya sisteminizin tek tek köken makalesini gözden geçirin.

Bilinen sınırlamalar

  • İşlem etkinliği kaynağı olarak kullanılan Veritabanı Görünümleri (Azure Data Factory, Synapse Pipelines, Azure SQL Veritabanı, Azure Veri Paylaşımı) şu anda Microsoft Purview'da Veritabanı Tablosu nesneleri olarak yakalanır. Veritabanı da taranırsa, Görünüm varlıkları Microsoft Purview'da ayrı olarak bulunur. Bu senaryoda, Microsoft Purview'da aynı ada sahip iki varlık yakalanır, biri veri kökenine sahip tablo, diğeri görünüm olarak.

Veri işleme sistemleri

Veri tümleştirmesi ve ETL araçları, yürütme zamanında Microsoft Purview'a köken ekleyebilir. Data Factory, Veri Paylaşımı, Synapse, Azure Databricks gibi araçlar bu veri işleme sistemleri kategorisine aittir. Veri işleme sistemleri, hedef veri kümeleri oluşturmak için veri kümelerine farklı veritabanlarından ve depolama çözümlerinden kaynak olarak başvurur. Şu anda köken için Microsoft Purview ile tümleştirilmiş olan veri işleme sistemlerinin listesi aşağıdaki tabloda listelenmiştir.

Veri işleme sistemi Desteklenen kapsam
Azure Data Factory Kopyalama etkinliğiVeri akışı etkinliğiSSIS paket etkinliğini yürütme
Azure Synapse Analytics Kopyalama etkinliğiVeri akışı etkinliği
Azure SQL Veritabanı (Önizleme) Köken ayıklama
Azure Veri Paylaşımı Anlık görüntüyü paylaşma

Veri depolama sistemleri

& Oracle, Teradata ve SAP gibi veritabanlarının depolama çözümleri, betik dilini kullanarak verileri dönüştürmek için sorgu altyapılarına sahiptir. Görünümlerden/saklı yordamlardan/vb. veri kökeni bilgileri Microsoft Purview'a toplanır ve diğer sistemlerden alınan kökenlerle birleştirilir. Purview veri taraması Microsoft aracılığıyla aşağıdaki veri kaynakları için köken desteklenir. İlgili makalede desteklenen köken senaryoları hakkında daha fazla bilgi edinin.

Kategori Veri kaynağı
Veritabanı Cassandra
Db2
Google BigQuery
Hive Meta Veri Deposu Veritabanı
MySQL
Oracle
PostgreSQL
Snowflake
Teradata
Hizmetler ve uygulamalar Erwin
Looker
SAP ECC
SAP S/4HANA

Veri analizi ve raporlama sistemleri

Azure ML ve Power BI gibi veri analizi ve raporlama sistemleri Microsoft Purview'da veri kökenini bildirir. Bu sistemler, depolama sistemlerindeki veri kümelerini kullanır ve meta modelleriyle işleyip BI Panoları, ML denemeleri vb. oluşturur.

Veri analizi & raporlama sistemi Desteklenen kapsam
Power BI Veri Kümeleri, Veri Akışları, Rapor & Panoları

Köken kullanmaya başlama

Microsoft Purview'daki köken, veri kümelerini ve işlemleri içerir. Veri kümeleri düğüm olarak da adlandırılırken işlemler kenar olarak da adlandırılabilir:

  • Veri kümesi (Düğüm):Bir işleme giriş olarak sağlanan bir veri kümesi (yapılandırılmış veya yapılandırılmamış). Örneğin, SQL Tablosu, Azure blobu ve dosyalar (.csv ve .xml gibi) veri kümeleri olarak kabul edilir. Microsoft Purview'un köken bölümünde veri kümeleri dikdörtgen kutularla gösterilir.

  • İşlem (Edge):Veri kümesinde gerçekleştirilen bir etkinlik veya dönüştürme işlemi olarak adlandırılır. Örneğin, ADF Kopyalama etkinliği, Veri Paylaşımı anlık görüntü vb. Microsoft Purview'un köken bölümünde işlemler yuvarlak kenarlı kutularla gösterilir.

Microsoft Purview'da bir varlığın köken bilgilerine erişmek için aşağıdaki adımları izleyin:

  1. Azure portal Microsoft Purview hesapları sayfasına gidin.

  2. Listeden Microsoft Purview hesabınızı seçin ve ardından Genel Bakışsayfasından Purview idare portalı Microsoft aç'ı seçin.

  3. Microsoft Purview idare portalı Giriş sayfasında veri kümesi adını veya ADF Kopyalama veya Veri Akışı etkinliği gibi işlem adını arayın. Ardından Enter tuşuna basın.

  4. Arama sonuçlarında varlığı seçin ve Köken sekmesini seçin.

    Köken sekmesini seçmeyi gösteren ekran görüntüsü.

Varlık düzeyi kökeni

Microsoft Purview, veri kümeleri ve işlemler için varlık düzeyi kökenini destekler. Varlık düzeyi kökenini görmek için katalogdaki geçerli varlığın Köken sekmesine gidin. Geçerli veri kümesi varlık düğümünü seçin. Varsayılan olarak, verilere ait sütunların listesi sol bölmede görünür.

Köken sayfasında Sütunları görüntüle'yi seçme işlemini gösteren ekran görüntüsü.

El ile köken (önizleme)

Microsoft Purview'daki veri kökeni şirket içi, çoklu bulut ve SaaS ortamlarındaki birçok varlık için otomatiktir. Daha fazla otomatik kaynak eklemeye devam etsek de el ile köken, herhangi bir kod kullanmadan otomasyonun henüz desteklenmediği kaynaklar için köken meta verilerini belgelenize olanak tanır.

Varlıklarınızdan herhangi birine el ile köken eklemek için şu adımları izleyin:

  1. Veri kataloğunda varlığınızı arayın ve ayrıntıları görüntülemek için seçin.
  2. Düzenle'yi seçin ve Köken sekmesine gidin. Microsoft Purview'da düzenleme seçeneğinin vurgulandığı veri varlığının ekran görüntüsü.Köken sekmesinin vurgulandığı veri varlığı düzenleme sayfasının ekran görüntüsü.
  3. El ile kökenin bir parçası olarak varlık eklemek için liste panelinde Köken Ekle'yi seçin. Köken ekle düğmesinin vurgulandığı veri varlığı kökeni sayfasının ekran görüntüsü.
  4. İlişki türünü seçin:
    1. Yukarı akış kökeni için - İlişkiyi Tüketir olarak seçin
    2. Aşağı akış kökeni için - İlişkiyi Üretim olarak seçin
  5. Önerilen listeden varlığı bulmak için varlık açılan listesini veya tam katalogda arama yapmak için Daha fazla görüntüle'yi seçin. Varlığınızı seçin. Varlık açılan listesinin vurgulandığı veri varlığı kökeni sayfasının ekran görüntüsü.
  6. Artık köken ilişkisini görebilirsiniz. Köken Ekle düğmesini yeniden seçerek başka bir köken ekleyebilir veya çöp kutusu simgesini seçerek yeni eklenen kökeni silebilirsiniz. İşiniz bittiğinde , kökeninizi kaydetmek ve düzenleme modundan çıkmak için Kaydet düğmesini seçin. Veri varlığı kökeni sayfasının ekran görüntüsü, sil ve kaydet düğmeleri vurgulanmış.

El ile kökenin bilinen sınırlamaları

  • Geçerli varlık seçici deneyimi, aynı anda yalnızca bir varlığın seçilmesine izin verir.
  • Sütun düzeyi el ile köken şu anda desteklenmemektedir.
  • Hem kaynak hem de hedef varlıklar için veri kürasyonu erişimi gerekir.
  • Bu varlık türleri şu anda otomatik kökeni desteklediği için el ile kökenlere izin vermiyor:
    • Azure Data Factory
    • Synapse işlem hatları
    • Power BI veri kümeleri
    • Teradata saklı yordamı
    • saklı yordamı Azure SQL

Veri kümesi sütun kökeni

Bir veri kümesinin sütun düzeyinde kökenini görmek için katalogdaki geçerli varlığın Köken sekmesine gidin ve aşağıdaki adımları izleyin:

  1. Köken sekmesine geçtikten sonra, sol bölmede, veri kökeninde görüntülemek istediğiniz her sütunun yanındaki onay kutusunu seçin.

    Köken sayfasında görüntülenecek sütunları seçmeyi gösteren ekran görüntüsü.

  2. Sütun eşlemesini görmek için sol bölmede veya köken tuvalinin veri kümesinde seçili bir sütunun üzerine gelin. Tüm sütun örnekleri vurgulanır.

    Veri kökeni yolundaki sütun akışını vurgulamak için sütun adının üzerine gelme işlemini gösteren ekran görüntüsü.

  3. Sütun sayısı sol bölmede görüntülenebilenden büyükse, belirli bir sütunu ada göre seçmek için filtre seçeneğini kullanın. Alternatif olarak, listede gezinmek için farenizi kullanabilirsiniz.

    Köken sayfasında sütunları sütun adına göre filtrelemeyi gösteren ekran görüntüsü.

  4. Köken tuvalinde daha fazla düğüm ve kenar varsa, veri varlığını seçmek veya düğümleri ada göre işlemek için filtreyi kullanın. Alternatif olarak, köken penceresini kaydırmak için farenizi kullanabilirsiniz.

    Köken sayfasında ada göre veri varlığı düğümlerini gösteren ekran görüntüsü.

  5. Köken tuvalindeki veri kümelerinin listesini vurgulamak için sol bölmedeki iki durumlu düğmeyi kullanın. İki durumlu düğmeyi kapatırsanız, seçili sütunlardan en az birini içeren tüm varlıklar görüntülenir. İki durumlu düğmeyi açarsanız yalnızca tüm sütunları içeren veri kümeleri görüntülenir.

    Köken sayfasındaki düğüm listesini filtrelemek için iki durumlu düğmenin nasıl kullanılacağını gösteren ekran görüntüsü.

sütun kökenini işleme

Kopyalama etkinlikleri gibi veri işlemlerini veri kataloğunda da görüntüleyebilirsiniz. Örneğin, bu köken akışında kopyalama etkinliğini seçin:

Kopyalama etkinliği düğümlerinden birinin vurgulandığı veri kökeni akışının ekran görüntüsü.

Kopyalama etkinliği genişler ve ardından, işlemin kendisi hakkında daha fazla ayrıntı sağlayan Varlığa geç düğmesini seçebilirsiniz.

Genişletilmiş kopyalama etkinliği düğümünün ve yeni varlığa geçiş düğmesinin seçili olduğu ekran görüntüsü.

Veri işlemi, bir veya daha fazla çıkış oluşturmak için bir veya daha fazla giriş veri kümesi alabilir. Microsoft Purview'da, işlem düğümleri için sütun düzeyi kökeni kullanılabilir.

  1. Sütunlar panelindeki açılan listeden giriş ve çıkış veri kümeleri arasında geçiş yapın.

  2. Giriş veri kümesinden karşılık gelen çıkış veri kümesine akan kökeni görmek için bir veya daha fazla tablodan sütun seçin.

    İşlem düğümünün sütun kökenini gösteren ekran görüntüsü.

Kökendeki varlıklara göz atma

  1. Köken görünümünde karşılık gelen meta verilerini görüntülemek için Herhangi bir varlıkta Varlığa geç'i seçin. Bunu yapmak, köken görünümünden katalogdaki başka bir varlığa göz atmanın etkili bir yoludur.

    Köken veri varlığında Varlığa geç'i seçme ekran görüntüsü.

  2. Köken tuvali popüler veri kümeleri için karmaşık hale gelebilir. Dağınıklığı önlemek için varsayılan görünümde odaktaki varlık için yalnızca beş köken düzeyi gösterilir. Köken tuvalindeki kabarcıklar seçilerek kökenin geri kalanı genişletilebilir. Veri tüketicileri tuvalde ilgi çekici olmayan varlıkları da gizleyebilir. Dağınıklığı daha da azaltmak için, köken tuvalinin üst kısmındaki Diğer Köken düğmesini kapatın. Bu eylem, köken tuvalindeki tüm kabarcıkları gizler.

    Diğer kökenler'in nasıl değiştirilmeyi gösteren ekran görüntüsü.

  3. Kökenin en iyi görünümünü elde etmek için köken tuvalindeki akıllı düğmeleri kullanın:

    1. Tam ekran
    2. Sığdırmak için yakınlaştır
    3. Yakınlaştırma/uzaklaştırma
    4. Otomatik hizalama
    5. Önizleme önizlemesi
    6. Ve diğer seçenekler:
      1. Geçerli varlığı ortalama
      2. Varsayılan görünüme sıfırla

    Köken akıllı düğmelerini seçmeyi gösteren ekran görüntüsü.

Sonraki adımlar