Pobieranie z przepływu danych generacji 1 do przepływu danych generacji 2
Przepływ danych Gen2 to nowa generacja przepływów danych. Nowa generacja przepływów danych znajduje się wraz z przepływem danych usługi Power BI (Gen1) i oferuje nowe funkcje i ulepszone środowiska. W poniższej sekcji przedstawiono porównanie między przepływem danych Gen1 i przepływem danych Gen2.
Omówienie funkcji
| Funkcja | Przepływ danych Gen2 | Przepływ danych Gen1 |
|---|---|---|
| Tworzenie przepływów danych za pomocą dodatku Power Query | ✓ | ✓ |
| Krótszy przepływ tworzenia | ✓ | |
| Automatyczne zapisywanie i publikowanie w tle | ✓ | |
| Miejsca docelowe danych | ✓ | |
| Ulepszona historia monitorowania i odświeżania | ✓ | |
| Integracja z potokami danych | ✓ | |
| Obliczenia o dużej skali | ✓ | |
| Pobieranie danych za pośrednictwem łącznika Przepływy danych | ✓ | ✓ |
| Zapytanie bezpośrednie za pośrednictwem łącznika przepływów danych | ✓ | |
| Odświeżanie przyrostowe | ✓ | |
| Obsługa Szczegółowe informacje sztucznej inteligencji | ✓ |
Krótsze środowisko tworzenia
Praca z usługą Dataflow Gen2 wygląda jak wracanie do domu. Zachowaliśmy pełne środowisko dodatku Power Query używane w przepływach danych usługi Power BI. Po wprowadzeniu środowiska przeprowadzisz krok po kroku, aby uzyskać dane do przepływu danych. Skracamy również środowisko tworzenia, aby zmniejszyć liczbę kroków wymaganych do utworzenia przepływów danych i dodaliśmy kilka nowych funkcji, aby zapewnić jeszcze lepsze środowisko pracy.
Nowe środowisko zapisywania przepływu danych
W przypadku przepływu danych Gen2 zmieniliśmy sposób działania zapisywania przepływu danych. Wszelkie zmiany wprowadzone w przepływie danych są automatycznie zapisane do chmury. Możesz więc w dowolnym momencie zamknąć środowisko tworzenia i kontynuować od miejsca, w którym zostało to przerwane w późniejszym czasie. Po zakończeniu tworzenia przepływu danych publikujesz zmiany, a te zmiany są używane podczas odświeżania przepływu danych. Ponadto opublikowanie przepływu danych powoduje zapisanie zmian i uruchomienie walidacji, które należy wykonać w tle. Ta funkcja umożliwia zapisanie przepływu danych bez konieczności oczekiwania na zakończenie walidacji.
Aby dowiedzieć się więcej na temat nowego środowiska zapisywania, zobacz Zapisywanie wersji roboczej przepływu danych.
Miejsca docelowe danych
Podobnie jak w przypadku usługi Dataflow Gen1, usługa Dataflow Gen2 umożliwia przekształcanie danych w magazyn wewnętrzny/przejściowy przepływu danych, do którego można uzyskać dostęp przy użyciu łącznika przepływu danych. Usługa Dataflow Gen2 umożliwia również określenie miejsca docelowego danych dla danych. Za pomocą tej funkcji można teraz oddzielić logikę ETL i magazyn docelowy. Ta funkcja zapewnia wiele korzyści. Możesz na przykład użyć przepływu danych, aby załadować dane do magazynu lakehouse, a następnie użyć notesu do analizy danych. Możesz też użyć przepływu danych, aby załadować dane do bazy danych Azure SQL Database, a następnie użyć potoku danych do załadowania danych do magazynu danych.
W usłudze Dataflow Gen2 dodaliśmy obsługę następujących miejsc docelowych, a wiele innych będzie dostępnych wkrótce:
- Sieć szkieletowa Lakehouse
- Azure Data Explorer (Kusto)
- Azure Synapse Analytics (SQL DW)
- Azure SQL Database
Uwaga
Aby załadować dane do magazynu sieci szkieletowej, możesz użyć łącznika usługi Azure Synapse Analytics (SQL DW), pobierając parametry połączenia SQL. Więcej informacji: Połączenie ivity to data magazynowanie w usłudze Microsoft Fabric
Nowa historia odświeżania i monitorowanie
W usłudze Dataflow Gen2 wprowadziliśmy nowy sposób monitorowania odświeżeń przepływu danych. Integrujemy obsługę centrum monitorowania i udostępniamy nowe środowisko historii odświeżania.
Integracja z potokami danych
Potoki danych umożliwiają grupowanie działań, które razem wykonują zadanie. Działanie to jednostka pracy, którą można wykonać. Na przykład działanie może kopiować dane z jednej lokalizacji do innej, uruchamiać zapytanie SQL, wykonywać procedurę składowaną lub uruchamiać notes języka Python.
Potok może zawierać co najmniej jedno działanie połączone przez zależności. Na przykład możesz użyć potoku do pozyskiwania i czyszczenia danych z obiektu blob platformy Azure, a następnie rozpoczęcia przepływu danych Gen2 w celu przeanalizowania danych dziennika. Możesz również użyć potoku, aby skopiować dane z obiektu blob platformy Azure do bazy danych Azure SQL Database, a następnie uruchomić procedurę składowaną w bazie danych.
Zapisz jako wersję roboczą
W usłudze Dataflow Gen2 wprowadzamy bezproblemowe środowisko, usuwając konieczność publikowania w celu zapisania zmian. Dzięki funkcji zapisywania jako wersji roboczej przechowujemy wersję roboczą przepływu danych za każdym razem, gdy wprowadzisz zmianę. Czy utraciłeś łączność z Internetem? Czy przypadkowo zamknięto przeglądarkę? Nie martw się; mamy plecy. Po powrocie do przepływu danych ostatnie zmiany są nadal dostępne i możesz kontynuować, gdzie została przerwana. Jest to bezproblemowe środowisko i nie wymaga od Ciebie żadnych danych wejściowych. Dzięki temu możesz pracować nad przepływem danych bez konieczności martwienia się o utratę zmian lub usunięcie wszystkich błędów zapytania przed zapisaniem zmian. Aby dowiedzieć się więcej na temat tej funkcji, zobacz Zapisywanie wersji roboczej przepływu danych.
Obliczenia o dużej skali
Podobnie jak w przypadku usługi Dataflow Gen1, usługa Dataflow Gen2 oferuje również ulepszony aparat obliczeniowy w celu zwiększenia wydajności obu przekształceń odwołanych zapytań i uzyskiwania scenariuszy danych. Aby to osiągnąć, usługa Dataflow Gen2 tworzy elementy usługi Lakehouse i Warehouse w obszarze roboczym i używa ich do przechowywania danych i uzyskiwania do nich dostępu w celu zwiększenia wydajności wszystkich przepływów danych.
Licencjonowanie przepływu danych Gen1 vs Gen2
Dataflow Gen2 to nowa generacja przepływów danych, która znajduje się obok przepływu danych usługi Power BI (Gen1) i oferuje nowe funkcje i ulepszone środowiska. Wymaga pojemności sieci szkieletowej lub pojemności próbnej sieci Szkieletowej. Aby lepiej zrozumieć, jak działa licencjonowanie dla przepływów danych, przeczytaj następujący artykuł: Pojęcia i licencje usługi Microsoft Fabric
Wypróbuj usługę Dataflow Gen2, ponownie korzystając z zapytań z usługi Dataflow Gen1
Prawdopodobnie masz wiele zapytań usługi Dataflow Gen1 i zastanawiasz się, jak można je wypróbować w usłudze Dataflow Gen2. Istnieje kilka opcji ponownego utworzenia przepływów danych Gen1 jako przepływu danych Gen2.
Eksportowanie zapytań usługi Dataflow Gen1 i importowanie ich do usługi Dataflow Gen2
Teraz możesz eksportować zapytania zarówno w środowiskach tworzenia przepływów danych Gen1, jak i Gen2, a następnie zapisywać je w pliku PQT, który następnie można zaimportować do usługi Dataflow Gen2. Aby uzyskać więcej informacji, przejdź do tematu Używanie funkcji eksportowania szablonu.
Kopiowanie i wklejanie w dodatku Power Query
Jeśli masz przepływ danych w usłudze Power BI lub Power Apps, możesz skopiować zapytania i wkleić je w edytorze przepływu danych Gen2. Ta funkcja umożliwia migrowanie przepływu danych do usługi Gen2 bez konieczności ponownego zapisywania zapytań. Aby uzyskać więcej informacji, zobacz Kopiowanie i wklejanie istniejących zapytań usługi Dataflow Gen1.