Fabric Veri Mühendisliği belgeleri

Doku Veri Mühendisliği, kullanıcıların kuruluşlarının büyük hacimli verileri toplamasına, depolamasına, işlemesine ve analiz etmesine olanak tanıyan altyapılar ve sistemler tasarlamasına, oluşturmasına ve bakımını yapmasına olanak tanır.

Veri Madenciliği hakkında

Genel Bakış

• Veri Madenciliği nedir?
• Göl evi nedir?

Konsept

• Lakehouse ve Delta tabloları
• Çalışma alanı rolleri ve izinleri
• Veri deposu seçme

Nasıl Yapılır Kılavuzu

• Delta optimizasyonu ve V Sırası
• Tablolara yükleme

Lakehouse ile çalışmaya başlama

Başlarken

• Göl evi oluşturma
• Lakehouse gezgininde gezinme

Nasıl Yapılır Kılavuzu

• Notebook kullanarak lakehouse'a veri alma

Öğretici

• 1. Adım - Çalışma alanı oluşturma
• 2. Adım - Göl evi oluşturma
• 3. Adım - Lakehouse'a veri alma
• 4. Adım : Verileri delta tablolarına dönüştürme
• 5. Adım - Anlamsal model oluşturma ve rapor oluşturma
• 6. Adım - Kaynakları temizleme

Not defterlerini kullanmaya başlama

Başlarken

• Not defterleri oluşturma ve kullanma

Nasıl Yapılır Kılavuzu

• Not defterlerini geliştirme ve çalıştırma
• Not defteriyle lakehouse verilerini keşfetme
• Not defterlerini görselleştirme
• Not defterleri için kaynak kontrolü ve dağıtımı
• T-SQL Not Defterleri yazma ve çalıştırma

GraphQL için API ile sorgulama

Genel Bakış

• GraphQL için Doku API'si nedir?

Başlarken

• GraphQL için API oluşturma ve veri ekleme

Nasıl Yapılır Kılavuzu

• İlişkileri Yönet
• Uygulamalara bağlanma
• Birden çok veri kaynağını sorgulama
• GraphQL kaynak denetimi ve dağıtım işlem hatları
• İzleme panosu ve kayıt tutma (önizleme)

VS Code tümleştirmesi

Konsept

• Veri Mühendisliği VS Code uzantısı nedir?

Nasıl Yapılır Kılavuzu

• VS Code'dan not defterlerini kullanma
• VS Code'dan kapsayıcı imajı kullanın
• VS Code'dan Spark iş tanımlarını kullanma
• VS Code'dan lakehouse'u keşfedin
• VS Code web deneyiminden not defteri geliştirme

Veri Mühendisliği için Apache Spark

Konsept

• Apache Spark iş tanımı
• Apache Spark danışmanı nedir?

Başlarken

• Spark iş tanımı oluşturma
• Doku API'siyle Spark iş tanımı oluşturma
• Spark iş tanımı Git tümleştirmesi

Nasıl Yapılır Kılavuzu

• Spark iş tanımını zamanlama ve çalıştırma
• Apache Spark kitaplıklarını yönetme
• Fabric MSSparkUtils Nasıl Kullanılır

Ortamla çalışmaya başla

Başlarken

• Kumaş ortamları

Nasıl Yapılır Kılavuzu

• Ortamlarda Spark işlem yönetme
• Ortamlardaki kitaplıkları yönetme
• Ortam Git tümleştirmesi ve dağıtım işlem hattı
• Genel API'ler aracılığıyla ortamı yönetme
• Fabric'de sınırlı ağ erişimine sahip kitaplıkları yönetme

Fabric Livy API'si

Genel Bakış

• Livy API nedir?

Başlarken

• Livy API'sini kullanarak Spark işleri oluşturma ve çalıştırma
• Livy API oturum işlerini gönderme
• Livy API toplu işlerini gönder

Somutlaştırılmış göl görünümleri ile iyileştirin

Genel Bakış

• Gerçekleştirilmiş göl görünümleri nelerdir?

Başlarken

• Gerçekleştirilmiş göl görünümlerini kullanmaya başlama
• Gerçekleştirilmiş göl görünümleri ile madalyon mimarisi uygulama
• Gerçekleştirilmiş göl görünümlerini yönetme