dokumentacja inżynierowie danych w usłudze Microsoft Fabric

Inżynieria danych w usłudze Microsoft Fabric umożliwia użytkownikom projektowanie, tworzenie i konserwowanie infrastruktury i systemów, które umożliwiają organizacjom zbieranie, przechowywanie, przetwarzanie i analizowanie dużych ilości danych.

Informacje o inżynierowie danych

Omówienie

• Co to jest inżynieria danych?
• Co to jest jezioro?

Pojęcie

• Tabele Lakehouse i Delta
• Role i uprawnienia obszaru roboczego
• Wybieranie magazynu danych

Przewodnik z instrukcjami

• Optymalizacja różnicowa i kolejność V
• Ładowanie do tabel

Wprowadzenie do usługi Lakehouse

Rozpocznij

• Tworzenie jeziora
• Nawigowanie po eksploratorze lakehouse

Przewodnik z instrukcjami

• Pobieranie danych do usługi Lakehouse przy użyciu notesu

Samouczek

• Krok 1. Tworzenie obszaru roboczego
• Krok 2. Tworzenie jeziora
• Krok 3. Pozyskiwanie danych do usługi LakeHouse
• Krok 4. Przekształcanie danych w tabele różnicowe
• Krok 5. Tworzenie raportu
• Krok 6. Czyszczenie zasobów

Wprowadzenie do notesów

Rozpocznij

• Tworzenie notesów i korzystanie z nich

Przewodnik z instrukcjami

• Opracowywanie i uruchamianie notesów
• Eksplorowanie danych usługi Lakehouse za pomocą notesu
• Wizualizowanie notesów
• Notesy kontroli źródła i wdrażania
• Tworzenie i uruchamianie notesów języka T-SQL

Wykonywanie zapytań za pomocą interfejsu API dla języka GraphQL

Omówienie

• Co to jest interfejs API sieci szkieletowej dla języka GraphQL?

Rozpocznij

• Tworzenie interfejsu API dla języka GraphQL i dodawanie danych

Przewodnik z instrukcjami

• Zarządzaj relacjami
• Łączenie z aplikacjami
• Wykonywanie zapytań dotyczących wielu źródeł danych
• Potoki kontroli źródła i wdrażania programu GraphQL
• Pulpit monitorujący i logowanie (wersja zapoznawcza)

Integracja z programem VS Code

Pojęcie

• Co to jest rozszerzenie programu VS Code inżynierii danych?

Przewodnik z instrukcjami

• Używanie notesów z programu VS Code
• Używanie obrazu kontenera z programu VS Code
• Używanie definicji zadań platformy Spark z programu VS Code
• Eksplorowanie usługi Lakehouse z poziomu programu VS Code
• Opracowywanie notesu na podstawie środowiska internetowego programu VS Code

Platforma Apache Spark dla inżynierii danych

Pojęcie

• Definicja zadania platformy Apache Spark
• Co to jest doradca platformy Apache Spark?

Rozpocznij

• Tworzenie definicji zadania platformy Spark
• Tworzenie definicji zadania platformy Spark przy użyciu interfejsu API sieci szkieletowej
• Integracja z usługą Git definicji zadań platformy Spark

Przewodnik z instrukcjami

• Planowanie i uruchamianie definicji zadania platformy Spark
• Zarządzanie bibliotekami platformy Apache Spark
• Jak używać narzędzia MSSparkUtils sieci szkieletowej

Wprowadzenie do środowiska

Rozpocznij

• Środowiska usługi Microsoft Fabric

Przewodnik z instrukcjami

• Zarządzanie obliczeniami platformy Spark w środowiskach
• Zarządzanie bibliotekami w środowiskach
• Potok integracji i wdrażania środowiska Git
• Zarządzanie środowiskiem za pomocą publicznych interfejsów API
• Zarządzanie bibliotekami w środowisku zabezpieczonymi przez ochronę dostępu wychodzącego

Interfejs API usługi Livy dla sieci szkieletowej

Omówienie

• Co to jest interfejs API usługi Livy?

Rozpocznij

• Tworzenie i uruchamianie zadań platformy Spark przy użyciu interfejsu API usługi Livy
• Przesyłanie zadań sesji interfejsu API usługi Livy
• Przesyłanie zadań wsadowych interfejsu API usługi Livy

Optymalizowanie za pomocą zmaterializowanych widoków jeziora

Omówienie

• Co to są zmaterializowane widoki na jezioro?

Rozpocznij

• Rozpocznij pracę z zmaterializowanymi widokami jeziora
• Implementowanie architektury Medallion zmaterializowanymi widokami jeziora
• Zarządzanie zmaterializowanymi widokami jeziora