Veri alımı işlem hatlarını keşfetme
Büyük ölçekli bir veri ambarı çözümünün mimarisi ve büyük hacimli verileri işlemek için kullanılabilecek bazı dağıtılmış işleme teknolojileri hakkında biraz bilgi edindiğinize göre, verilerin bir veya daha fazla kaynaktan analiz veri deposuna nasıl alındığını keşfetmenin zamanı geldi.
Azure'da büyük ölçekli veri alımı, ETL işlemlerini düzenleyen işlem hatları oluşturularak en iyi şekilde uygulanır. Azure Data Factory'yi kullanarak işlem hatları oluşturabilir ve çalıştırabilir veya veri analizi çözümünüzün tüm bileşenlerini birleşik bir çalışma alanında yönetmek istiyorsanız Azure Synapse Analytics veya Microsoft Fabric'te benzer bir işlem hattı altyapısı kullanabilirsiniz.
Her iki durumda da işlem hatları, veriler üzerinde çalışan bir veya daha fazla etkinliklerden oluşur. Giriş veri kümesi kaynak verileri sağlar ve etkinlikler, çıkış veri kümesi oluşturulana kadar verileri artımlı olarak işleyen bir veri akışı olarak tanımlanabilir. İşlem hatları, çok çeşitli veri hizmetleriyle tümleştirmek için dış veri kaynaklarına bağlanabilir.