Real-Time hub'ında akış verilerini bulma

  • 4 dakika

Önceki ünitede, göl evleri ve ambarlarda depolanan toplu iş verilerini bulmayı ve bu verilere bağlanmayı öğrendin. Ancak veriler her zaman toplu olarak gelmez; bazen sürekli olarak akar. Ürünler sattıkça stok düzeyleri değişir, çevrimiçi müşterilerden gelen işlemler ve IoT algılayıcıları birkaç saniyede bir sıcaklık ölçümleri gönderir.

Akış verilerini çözümünüzle birleştirebilmeniz için önce Real-Time hub'ını kullanarak doğru verileri bulmanız gerekir.

Akış verilerini keşfetme

Real-Time hub'ı, Microsoft Fabric genelinde akış verilerini bulmaya ve yönetmeye yönelik merkezi bir katalogdur. OneLake kataloğu göl evlerinde ve ambarlarda depolanan toplu verileri gösterirken, Real-Time hub'ı kuruluşunuzda etkin olarak çalışan olay akışlarını ve KQL tablolarını görüntüler.

Olay akışları , Azure Event Hubs, IoT cihazları, Apache Kafka, veritabanı değişiklik veri yakalama (CDC) veya özel uygulamalar gibi kaynaklardan gelen sürekli veri akışlarıdır. Her veri akışı, bir müşterinin satın alma işlemini tamamlaması veya sıcaklık değişimini algılayan bir sensör gibi olayları gerçekleştiği anda taşır.

Akış verileri genellikle bir veya daha fazla KQL veritabanını barındıran kapsayıcılar olan olay depolarına akar. Bu veritabanları zaman veya olay tabanlı olayları depolar ve Kusto Sorgu Dili (KQL) kullanarak hızlı sorgulamayı destekler. Veriler otomatik olarak dizine eklenir ve alım süresine göre bölümlenerek sürekli veri alımı sırasında bile hızlı analize olanak tanır.

Lakehouse'ları bulmak için OneLake kataloğuna göz atarken olduğu gibi, diğer ekiplerin önceden oluşturduğu akış veri kaynaklarını bulmak için Real-Time hub'ına göz atarsınız. Bu bulma adımı, mevcut akışların gereksinimlerinizi karşılayıp karşılamadığını belirlemenize yardımcı olur. Bir akış istediğiniz verileri zaten yakalarsa, yinelenen veri işlem hatları oluşturmak yerine doğrudan akışla çalışabilirsiniz.

Akış verilerini keşfetme

Real-Time merkezine erişmek için Fabric'de bulunan sol gezinti bölmesinden Real-Time'i seçin. Hub, erişiminiz olan son oluşturulan olay akışlarını ve KQL tablolarını gösteren Akış verileri sayfasında açılır.

Akışlara çalışma alanına göre göz atabilir, kaynak türüne göre filtreleyebilir veya belirli akış adlarını arayabilirsiniz. Bir akışı seçtiğinizde, akışın ayrıntılarını görürsünüz:

  • Akış adı ve kaynak öğesi (eventstream veya KQL veritabanı)
  • Öğe sahibi ve çalışma alanı konumu
  • Onay durumu
  • Duyarlılık etiketleri

Akış verileri ve yeni veri kaynakları ekleme seçeneklerini içeren Real-Time hub ana sayfasını gösteren ekran görüntüsü.

Akış ayrıntıları etkinlik bilgilerini de gösterir. Bir akışın etkin olarak veri alıp almadığını ve en son ne zaman güncelleştirildiğini doğrulayabilirsiniz. Bu bilgiler, bir akışın üretim kullanımı için güvenilir olup olmadığını değerlendirmenize yardımcı olur.

Tavsiye

Veri akışını kullanmadan önce şemayı ve örnek verileri gözden geçirerek analiz çalışmanız için ihtiyacınız olan alanları içerdiğini doğrulayın.

Bulunan akışları kullanma

Yararlı veriler içeren bir akış bulduğunuzda, bunun bir olay akışı mı yoksa KQL tablosu mu olduğuna bağlı olarak çeşitli seçenekleriniz vardır:

Olay akışları için:

  • Akışın özelliklerini ve veri profilini görüntüleme
  • Belirli koşullar oluştuğunda eylemleri tetikleme amacıyla Doku Etkinleştirici'yi kullanarak uyarılar ayarlama
  • Olay akışı bir lakehouse'a veri gönderiyorsa kısayollar oluştur.

KQL tabloları için:

  • Gerçek zamanlı analiz için KQL sorgu kümesini kullanarak verileri doğrudan sorgulama
  • Gerçek Zamanlı panolarda görselleştirmeler oluşturma
  • Sorgu sonuçlarında uyarılar ayarlama

Ayrıca, bulduğunuz verilerden yeni bir olay akışı oluşturabilir, böylece verileri gerektiği gibi dönüştürebilir ve alabilirsiniz. Bu yaklaşım, özgün akışı değiştirmeden kendi iş mantığınızı ve dönüşümlerinizi eklemenize olanak tanır.

Gerçek zamanlı veriler, olay akışları aracılığıyla lakehouse'lara akarak akışla toplu analiz arasında bir köprü oluşturabilir. Bu mimari hem gerçek zamanlı hem de geçmiş verileri birleştiren raporlar oluşturmanıza olanak tanır.

Yeni akış kaynakları ekleme

Akış verileri sayfası mevcut akışları bulmanıza yardımcı olsa da, Real-Time hub'ı yeni dış kaynakları bağlamak için Veri ekle deneyimini de sağlar. Bu seçenek, Fabric'de mevcut olmayan verileri getirmeniz gerektiğinde kullanışlıdır.

Bağlayıcılara erişmek için veri ekle'yi seçin:

  • Microsoft kaynakları: Azure Event Hubs, Azure IoT Hub, veritabanı CDC akışları
  • Doku olayları: Çalışma alanı öğesi değişiklikleri, OneLake dosya işlemleri
  • Azure olayları: Azure Blob Depolama olayları
  • Dış kaynaklar: Apache Kafka, Amazon Kinesis, Google Cloud Pub/Sub

Uyarı

Yeni akış kaynaklarının bağlanması ve dönüştürülmesi, bu modülde ele alınandan daha gelişmiş yapılandırmayı içerir. Olay akışlarıyla çalışma hakkında daha fazla bilgi için bkz. Microsoft Fabric olay akışlarına genel bakış.