Aracılığıyla paylaş

Hızlı Başlangıç: Veri iş akışı oluşturma

  • Makale

Not

Veri iş akışları Apache Airflow tarafından desteklenir.
Apache Airflow, karmaşık veri iş akışlarını program aracılığıyla oluşturmak, zamanlamak ve izlemek için kullanılan açık kaynak bir platformdur. Veri işlem hatlarını temsil etmek için yönlendirilmiş döngüsel grafikler (DAG)'ler halinde birleştirilebilen işleçler olarak adlandırılan bir görev kümesi tanımlamanıza olanak tanır.

Veri iş akışları Apache Airflow ortamları oluşturmak ve yönetmek için basit ve verimli bir yol sunarak veri iş akışlarınızı büyük ölçekte kolayca çalıştırmanızı sağlar. Bu hızlı başlangıçta ilk Veri iş akışınızı oluşturacak ve Veri iş akışlarının ortamı ve işlevleri hakkında bilgi edinmek için Bir Yönlendirilmiş Döngüsel Graf (DAG) çalıştıracaksınız.

Önkoşullar

  • Kiracınızda Veri iş akışlarını etkinleştirin.

Not

Veri iş akışları önizleme durumunda olduğundan, kiracı yöneticiniz aracılığıyla etkinleştirmeniz gerekir. Veri iş akışlarını zaten görüyorsanız kiracı yöneticiniz bunu zaten etkinleştirmiş olabilir.

  1. Yönetici Portalı -> Kiracı Ayarları -> Microsoft Fabric altında -> 'Kullanıcılar Veri iş akışları oluşturabilir ve kullanabilir (önizleme)' bölümünü genişletin.
  2. Uygula’yı seçin.

Kiracıda Apache Airflow'un etkinleştirilmesi için ekran görüntüsü.

Veri iş akışı oluşturma

  1. Mevcut bir çalışma alanını veya Yeni çalışma alanı oluştur'u kullanabilirsiniz.

  2. Genişlet + New açılan menüsü -> Diğer Seçenekler 'e tıklayın -> Bölümün altında Data Factory -> Veri iş akışlarını seçin (önizleme)

    Diğer seçeneklere tıklamayı gösteren ekran görüntüsü.

    Veri İş Akışı'nın seçilmesi için ekran görüntüsü.

  3. Projenize uygun bir ad verin ve "Oluştur" düğmesine tıklayın.

DAG Dosyası Oluşturma

  1. "Yeni DAG dosyası" kartına tıklayın-> dosyanın adını verin ve "Oluştur" düğmesine tıklayın.

    DAG dosyasını adlandırmak için ekran görüntüsü.

  2. Size ortak bir DAG kodu sunulur. Dosyayı gereksinimlerinize göre düzenleyebilirsiniz.

    Microsoft Fabric'te ortak DAG dosyası sunan ekran görüntüsü.

  3. "Kaydet simgesine" tıklayın.

    DaG dosyasının Microsoft Fabric'e nasıl kaydedileceklerini gösteren ekran görüntüsü.

DAG çalıştırma

  1. "DAG'yi Çalıştır" düğmesine tıklayarak başlayın.

    Veri iş akışları kullanıcı arabiriminden DAG'yi çalıştırma ekran görüntüsü.

  2. Başlatıldıktan sonra, DAG'nin çalıştığını belirten bir bildirim görüntülenir.

  3. DAG çalıştırmasının ilerleme durumunu izlemek için bildirim merkezindeki "Ayrıntıları Görüntüle"ye tıklamanız yeterlidir. Bu eylem sizi Apache Airflow kullanıcı arabirimine yönlendirir ve burada DAG çalıştırmasının durumunu ve ayrıntılarını rahatça izleyebilirsiniz.

    Bildirim merkezinden Apache Airflow kullanıcı arabirimine gitmek için ekran görüntüsü.

Apache Airflow kullanıcı arabiriminde Veri iş akışı DAG'nizi izleme

Kaydedilen dağ dosyaları Apache Airflow kullanıcı arabirimine yüklenir. "Apache Airflow'da İzle" düğmesine tıklayarak bunları izleyebilirsiniz.

Airflow DAG'sini izlemek için ekran görüntüsü.

Yüklenen Airflow DAG'sini sunan ekran görüntüsü.

İlgili İçerik