Aracılığıyla paylaş


Veri Akışı 2. Nesil nedir?

Veri akışları, kod yazmadan verileri hazırlamanıza ve dönüştürmenize yardımcı olan bulut tabanlı bir araçtır. Yüzlerce veri kaynağından veri almak, 300'den fazla veri dönüştürmesi kullanarak verilerinizi dönüştürmek ve sonuçta elde edilen verileri birden çok hedefe yüklemek için düşük kodlu bir arabirim sağlar. Bunları yüzlerce farklı veri kaynağına bağlanabilen, dağınık verileri temizleyebilecek ve tam olarak ihtiyacınız olan yere sunabilen kişisel veri yardımcınız olarak düşünün. İster vatandaş ister profesyonel bir geliştirici olun, veri akışları veritabanları, veri ambarı, Lakehouse, gerçek zamanlı veriler ve daha fazlası dahil olmak üzere zengin bir veri kaynağı kümesinden veri almak, hazırlamak ve dönüştürmek için modern bir veri tümleştirme deneyimi sunar.

Veri Akışı 2. Nesil, özgün Power BI Veri Akışı (şimdi 1. Nesil olarak adlandırılır) ile birlikte çalışan daha yeni ve daha güçlü bir sürümdür. Excel, Power BI, Power Platform ve Dynamics 365 gibi çeşitli Microsoft ürün ve hizmetlerinde kullanılabilen tanıdık Power Query deneyimi kullanılarak oluşturulan Dataflow 2. Nesil, verileri hızla almak ve dönüştürmek için gelişmiş özellikler, daha iyi performans ve hızlı kopyalama özellikleri sağlar. Yeni bir başlangıç yaparsanız, gelişmiş özellikleri ve daha iyi performansı için Dataflow 2. Nesil'i öneririz.

Veri akışlarıyla ne yapabilirsiniz?

Veri akışlarıyla şunları yapabilirsiniz:

  • Verilerinize bağlanma: Veritabanlarından, dosyalardan, web hizmetlerinden ve daha fazlasından bilgi çekin.
  • Verilerinizi dönüştürme: Görsel arabirim kullanarak verilerinizi temizleyin, filtreleyin, birleştirin ve yeniden şekillendirin.
  • Verileri her yerden yükleme: Dönüştürülmüş verilerinizi veritabanlarına, veri ambarlarına veya bulut depolama alanına gönderin.
  • İşlemi otomatikleştirme: Verilerinizin güncel ve up-togüncel kalması için zamanlamaları ayarlayın.

Veri akışı özellikleri

Veri Akışı 2. Nesil ile 1. Nesil arasında kullanılabilen özellikler şunlardır:

Özellik Dataflow Gen 2 Veri Akışı Birinci Nesil
Power Query ile veri akışları oluşturma
Daha basit oluşturma işlemi
Otomatik Kaydetme ve arka plan yayımlama
Birden çok çıkış hedefi
Daha iyi izleme ve yenileme takibi
İşlem hatlarıyla çalışır
Yüksek performanslı bilgi işlem
Veri akışı bağlayıcısı aracılığıyla bağlanma
Veri akışı bağlayıcısı aracılığıyla Doğrudan Sorgu
Yalnızca değiştirilen verileri yenile
Yapay zeka destekli içgörüler

Veri Akışı 2. Nesil'e yükseltmeler

Sonraki bölümlerde, veri hazırlama görevlerinizi daha kolay ve verimli hale getirmek için Veri Akışı 2. Nesil ile 1. Nesil arasında yapılan önemli geliştirmelerden bazıları yer alır.

2. Nesil'in oluşturulması ve kullanılması daha kolaydır

Daha önce Power Query kullandıysanız Veri Akışı 2. Nesil tanıdık geliyor. Daha hızlı çalışmaya başlamanızı sağlamak için süreci kolaylaştırdık. Veri akışınıza veri alırken adım adım size yol gösterilir ve veri akışlarınızı oluşturmak için gereken adım sayısını azalttık.

Veri akışlarında genel yazma deneyiminin ekran görüntüsü.

Otomatik Kaydetme, çalışmanızı güvende tutar

Veri Akışı 2. Nesil, siz çalışırken değişikliklerinizi otomatik olarak kaydeder. İlerleme durumunuzu kaybetme endişesi olmadan bilgisayarınızdan uzaklaşabilir, tarayıcınızı kapatabilir veya İnternet bağlantısını kaybedebilirsiniz. Geri döndüğünde, her şey bıraktığın yerde olacak.

Veri akışınızı derlemeyi tamamladıktan sonra değişikliklerinizi yayımlayabilirsiniz. Yayımlama, çalışmanızı kaydeder ve arka plan doğrulamalarını çalıştırır, böylece bir sonraki görevinize geçmeden önce her şeyin kontrol edilmesi için beklemek zorunda kalmazsınız.

Kaydetmenin nasıl çalıştığı hakkında daha fazla bilgi edinmek için Veri akışınızın taslağını kaydetme konusuna bakın.

İhtiyacınız olan her yere veri gönderme

Dataflow 1. Nesil, dönüştürülmüş verileri kendi iç depolama alanında (Veri Akışı bağlayıcısı üzerinden erişebileceğiniz) depolar ancak Dataflow 2. Nesil size bu depolama alanını kullanma veya verilerinizi farklı hedeflere gönderme esnekliği sunar.

Bu esneklik yeni olasılıklar sunar. Örneğin şunları yapabilirsiniz:

  • Bir lakehouse'a veri yüklemek için veri akışı kullanın, ardından bunu bir not defteriyle analiz edin
  • Azure SQL veritabanına veri yükleme, ardından işlem hattını kullanarak veri ambarı'na taşıma

Veri Akışı 2. Nesil şu anda şu hedefleri desteklemektedir:

  • Azure SQL veritabanları
  • Azure Veri Gezgini (Kusto)
  • Azure Datalake 2. Nesil (önizleme)
  • Fabric Lakehouse Tabloları
  • Fabric Lakehouse Dosyaları (önizleme)
  • Doku Ambarı
  • Doku KQL veritabanı
  • Doku SQL veritabanı
  • SharePoint Dosyaları

Desteklenen veri hedeflerinin görüntülendiği ekran görüntüsü.

Kullanılabilir veri hedefleri hakkında daha fazla bilgi için bkz. Veri Akışı 2. Nesil veri hedefleri ve yönetilen ayarlar.

Daha iyi izleme ve yenileme takibi

Veri Akışı 2. Nesil, veri yenilemelerinizde neler olduğunu daha net bir şekilde gösterir. veri akışlarınızın durumunu ve performansını izleyebilebilmeniz için İzleme Merkezi ile tümleştirdik ve Yenileme Geçmişi deneyimini geliştirdik.

Yenileme durumunun ayrıntılarını gösteren ekran görüntüsü.

Pipeline'larla sorunsuz çalışır

İşlem hatları, daha büyük görevleri tamamlamak için etkinlikleri birlikte gruplandırmanıza olanak sağlar. Bunları verileri kopyalayan, SQL sorguları çalıştırabilen, saklı yordamları yürütebilen veya Python not defterlerini çalıştırabilen iş akışları olarak düşünün.

İşlem hattında birden çok etkinliği bağlayabilir ve zamanlamaya göre çalışacak şekilde ayarlayabilirsiniz. Örneğin, her Pazartesi bir Azure blobundan veri çekmek ve temizlemek için bir pipeline kullanabilir, ardından Dataflow Gen2'yi tetikleyerek günlük verilerini analiz edebilirsiniz. Ya da ayın sonunda azure blobundan Azure SQL veritabanına veri kopyalayabilir ve ardından bu veritabanında bir saklı yordam çalıştırabilirsiniz.

İşlem hatları ile tümleştirmeyi gösteren ekran görüntüsü.

Veri akışlarını işlem hatlarına bağlama hakkında daha fazla bilgi edinmek için bkz. veri akışı etkinlikleri.

Yüksek performanslı bilgi işlem

Veri Akışı 2. Nesil, büyük miktarda veriyi verimli bir şekilde işlemek için gelişmiş işlem Dokusu SQL İşlem altyapılarını kullanır. Bu işe yaraması için Dataflow 2. Nesil, çalışma alanınızda hem Lakehouse hem de Warehouse öğelerini oluşturur ve bunları kullanarak verileri depolayıp bunlara erişerek tüm veri akışlarınızın performansını artırır.

Veri Akışı 2. Nesil için Copilot

Dataflow Gen2, doğal dil istemlerini kullanarak veri entegrasyon çözümleri oluşturmaya yönelik yapay zeka destekli yardım sağlamak için Fabric'deki Microsoft Copilot ile entegre edilir. Copilot, veri dönüştürmeleri ve işlemleri gerçekleştirmek için konuşma dilini kullanmanıza olanak tanıyarak veri akışı geliştirme sürecinizi kolaylaştırmanıza yardımcı olur.

  • Kaynaklardan veri alma: OData, veritabanları ve dosyalar gibi çeşitli veri kaynaklarına bağlanmak için "Veri alma" başlangıç istemini kullanın
  • Verileri doğal dille dönüştürme: Aşağıdakiler gibi konuşma istemlerini kullanarak dönüşümler uygulayın:
    • "Yalnızca Avrupalı müşterileri tut"
    • "Şehre göre toplam çalışan sayısını say"
    • "Yalnızca miktarları ortanca değerin üzerinde olan siparişleri tut"
  • Örnek veri oluşturma: Test ve geliştirme için örnek veriler oluşturmak üzere Azure OpenAI kullanma
  • İşlemleri geri alma: Son uygulanan adımı kaldırmak için "Geri Al" yazın veya seçin
  • Doğrulama ve gözden geçirme: Her Copilot eylemi, Uygulanan adımlar listesinde ilgili adımları içeren bir yanıt kartı olarak görünür

Daha fazla bilgi için bkz. Veri Akışı 2. Nesil için Copilot.

Veri akışlarını kullanmak için neye ihtiyacınız var?

Dataflow Gen2, bir Fabric kapasitesi veya bir Fabric deneme kapasitesi gerektirir. Veri akışlarında lisanslamanın nasıl çalıştığını anlamak için Microsoft Fabric kavramları ve lisanslarına göz atın.

Veri Akışı 1. Nesil'den 2. Nesil'e geçme

1. Nesil ile oluşturulmuş veri akışlarınız varsa endişelenmeyin; bunları kolayca 2. Nesil'e geçirebilirsiniz. Geçiş yapmanıza yardımcı olacak çeşitli seçeneklerimiz vardır:

Sorgularınızı dışarı ve içeri aktarma

Dataflow 1. Nesil sorgularınızı dışarı aktarabilir ve bunları bir PQT dosyasına kaydedebilir ve ardından Dataflow 2. Nesil'e aktarabilirsiniz. Adım adım yönergeler için bkz. Şablonu dışarı aktarma özelliğini kullanma.

Power Query'de kopyalama ve yapıştırma

Power BI veya Power Apps'te veri akışınız varsa, sorgularınızı kopyalayıp Veri Akışı 2. Nesil düzenleyicisine yapıştırabilirsiniz. Bu yaklaşım, sorgularınızı sıfırdan yeniden oluşturmanıza gerek kalmadan geçiş yapmanızı sağlar. Daha fazla bilgi edinin: Mevcut Veri Akışı 1. Nesil sorgularını kopyalayıp yapıştırın.

"Farklı Kaydet özelliğini kullanın"

Zaten herhangi bir veri akışı türünüz varsa (1. Nesil, 2. Nesil veya 2. Nesil CI/CD), Data Factory artık bir Farklı Kaydet özelliği içerir. Bu, mevcut veri akışlarını tek bir eylemle yeni bir Veri Akışı 2. Nesil (CI/CD) öğesi olarak kaydetmenizi sağlar. Diğer ayrıntılar: Farklı Kaydet'i kullanarak Veri Akışı 2. Nesil'e (CI/CD) geçiş yapın.

Daha fazla bilgi edinmeye hazır mısınız? Şu yararlı kaynaklara göz atın: