Aracılığıyla paylaş


Lakeflow Spark Bildirimli İşlem Hatlarındaki Havuzlar

Varsayılan olarak bir akış oluşturduğunuzda işlem hattınız elde edilen sorguyu bir Delta tablosuna (genellikle gerçekleştirilmiş bir görünüm veya akış tablosu) yazar. İşlem hatları ayrıca çok çeşitli havuzlara yazmanıza, hatta Python ile yazabileceğiniz herhangi bir hedefe (veya hedefe) program aracılığıyla veri dönüştürmenize ve akışla veri aktarmanıza olanak sağlayan işlevler sağlar.

Aşağıdaki konular, işlem hatlarındaki havuz işlevselliğini açıklar.

Konu Description
Lakeflow Spark Bildirimli İşlem Hatları havuzları Desteklenen bir dış veri havuzuna, bir işlem hattı tarafından dönüştürülen kayıtları yazmak için sink API'sini akışlarla kullanın. Dış veri havuzları Unity Catalog tarafından yönetilen tablolar, dış tablolar ve Apache Kafka veya Azure Event Hubs gibi olay akış hizmetlerini içerir.
Python özel havuzları Rastgele bir veri deposuna sink yazmak için API'yi Python özel veri kaynağıyla kullanın.
ForEachBatch havuzları Api'yi foreachBatch kullanarak rastgele bir veri deposuna yazın ve veriler üzerinde başka biçimler gerçekleştirin veya tek bir akıştaki birden çok havuza yazın.

Daha Fazla Bilgi