Veri işleme ile veri hazırlama

ŞUNLARA UYGULANIR: Azure Data Factory Azure Synapse Analytics

İpucu

Microsoft Fabric'daki Data Factory, daha basit bir mimariye, yerleşik yapay zekaya ve yeni özelliklere sahip yeni nesil Azure Data Factory. Veri tümleştirmeyi yeni kullanmaya başladıysanız Fabric Data Factory ile başlayın. Mevcut ADF iş yükleri veri bilimi, gerçek zamanlı analiz ve raporlama genelinde yeni özelliklere erişmek için Fabric yükseltebilir.

Veri fabrikasındaki veri düzenleme, ADF'de yerel olarak etkileşimli Power Query veri birleştirmeleri oluşturmanıza ve ardından bunları bir ADF işlem hattının içinde geniş ölçekte çalıştırmanıza olanak tanır.

Power Query etkinliği oluşturma

Azure Data Factory'da Power Query oluşturmanın iki yolu vardır. Bunun bir yolu, artı simgesine tıklayıp fabrika kaynakları bölmesinde Power Query seçmektir.

Power Query'yi fabrika kaynakları bölmesinde gösteren ekran görüntüsü.

Diğer yöntem, işlem hattı tuvalinin etkinlikler bölmesindedir. Power Query akordeonunu açın ve Power Query etkinliğini tuvale sürükleyin.

Veri düzenleme seçeneğini vurgulayan ekran görüntüsü.

Power Query veri hazırlama etkinliği oluşturma

Power Query karmanız için bir Source veri kümesi ekleyin. Mevcut bir veri kümesini seçebilir veya yeni bir veri kümesi oluşturabilirsiniz. Karmanızı kaydettikten sonra bir işlem hattı oluşturabilir, Power Query veri düzenleme etkinliğini işlem hattınıza ekleyebilir ve ADF'ye verilerinizi nereye getireceğini bildirmek için bir havuz veri kümesi seçebilirsiniz. Bir veya daha fazla kaynak veri kümesi seçebilirsiniz ancak şu anda yalnızca bir havuza izin verilir. Havuz veri kümesi seçmek isteğe bağlıdır, ancak en az bir kaynak veri kümesi gereklidir.

Düzenleme

Power Query Online karma düzenleyicisini açmak için Create öğesine tıklayın.

İlk olarak, karma düzenleyicisi için bir veri kümesi kaynağı seçersiniz.

Power Query kaynağı.

Power Query oluşturmayı tamamladıktan sonra kaydedebilir ve ardından bir işlem hattı oluşturabilirsiniz. Karmayı işlem hattınıza bir etkinlik olarak eklemeniz gerekir. Bu, verilerinizi almak için havuz veri kümesini oluşturacağınız/seçeceğiniz zamandır. Havuz veri kümesi özelliklerini, havuza alınan veri kümesinin sağ tarafındaki ikinci düğmeye tıklayarak da ayarlayabilirsiniz. Yalnızca tek bir çıkış dosyası almak istiyorsanız , "İyileştir" altındaki "bölüm seçeneğini" "Tek bölüm" olarak değiştirmeyi unutmayın.

Power Query veri toplama noktası.

Kod içermeyen veri hazırlama kullanarak Power Query düzenleme işleminizi yazın. Kullanılabilir işlevlerin listesi için bkz . dönüştürme işlevleri. ADF, Azure Data Factory veri akışı Spark ortamını kullanarak Power Query büyük ölçekte yürütebilmeniz için M betiğini bir veri akışı betiğine çevirir.

Veri işleme sürecini tanımlamak için Power Query'yi hazırlama sürecini gösteren ekran görüntüsü.

Power Query veri düzenleme etkinliğini çalıştırma ve izleme

bir Power Query etkinliğinin işlem hattı hata ayıklama çalıştırmasını yürütmek için işlem hattı tuvalinde Debug öğesine tıklayın. İşlem hattınızı yayımladıktan sonra Şimdi Tetikle, son yayımlanan işlem hattının isteğe bağlı çalıştırmasını yürütür. Power Query işlem hatları tüm mevcut Azure Data Factory tetikleyicileriyle zamanlanabilir.

Power Query verilerini şekillendirme etkinliği ekleme ekran görüntüsü.

Tetiklenen Power Query etkinlik çalıştırmasının çıkışını görselleştirmek için Monitor sekmesine gidin.

Tetiklenen bir düzenleme Power Query etkinliğinin çıkışını gösteren ekran görüntüsü.

Eşleme veri akışı oluşturmayı öğrenin.