Tworzenie, konfigurowanie i używanie środowiska w Fabric

Środowisko usługi Microsoft Fabric to skonsolidowany element dla wszystkich ustawień sprzętu i oprogramowania. W środowisku można wybrać różne środowiska uruchomieniowe platformy Spark, skonfigurować zasoby obliczeniowe, zainstalować biblioteki z repozytoriów publicznych lub katalogu lokalnego i ustawić inne ustawienia.

W tym artykule przedstawiono omówienie sposobu tworzenia, konfigurowania i używania środowiska.

Utwórz środowisko

Nowe środowiska można tworzyć z wielu punktów wejścia:

Standardowy punkt wejścia:

1. W Fabric przejdź do żądanego obszaru roboczego.

2. Wybierz pozycję Nowy element i znajdź pozycję Środowisko.

   

3. Nadaj środowisku nazwę i wybierz pozycję Utwórz.

Tworzenie podczas wyboru:

1. Otwórz notes lub definicję zadania platformy Spark.

2. Wybierz listę rozwijaną Środowisko , a następnie wybierz pozycję Nowe środowisko.

   

3. Nadaj środowisku nazwę i wybierz pozycję Utwórz.

Po utworzeniu środowiska wybierz wersję środowiska uruchomieniowego. Wybierz pozycję Runtime 1.3 (Spark 3.5, Delta 3.2) z menu rozwijanego.

Konfigurowanie środowiska

Środowisko ma trzy główne składniki:

• Środowisko obliczeniowe platformy Spark, które obejmuje środowisko uruchomieniowe platformy Spark.
• Biblioteki.
• Zasoby.

Aby publikowanie było skuteczne, wymagane są konfiguracje obliczeń i bibliotek platformy Spark. Zasoby są magazynem udostępnionym, który może ulec zmianie w czasie rzeczywistym. Aby uzyskać więcej informacji, zobacz Zapisywanie i publikowanie zmian.

Konfigurowanie obliczeń platformy Spark

W przypadku środowiska można wybrać spośród różnych środowisk uruchomieniowych platformy Spark z własnymi ustawieniami domyślnymi i wstępnie zainstalowanymi pakietami. Aby wyświetlić dostępne środowiska uruchomieniowe, przejdź do karty Narzędzia główne środowiska i wybierz pozycję Środowisko uruchomieniowe. Wybierz środowisko uruchomieniowe, które najlepiej odpowiada Twoim potrzebom.

Ważne

• Jeśli aktualizujesz środowisko uruchomieniowe środowiska przy użyciu istniejących konfiguracji lub bibliotek, musisz ponownie opublikować zawartość na podstawie zaktualizowanej wersji środowiska uruchomieniowego.
• Jeśli istniejące konfiguracje lub biblioteki nie są zgodne z nowo zaktualizowaną wersją środowiska uruchomieniowego, publikowanie zakończy się niepowodzeniem. Musisz usunąć niezgodne konfiguracje lub biblioteki i ponownie opublikować środowisko.

Obliczenia platformy Spark w sieci szkieletowej zapewniają niezrównaną szybkość i wydajność działania na platformie Spark i środowiska dostosowane do wymagań. W swoim środowisku możesz wybrać różne pule utworzone przez administratorów obszaru roboczego i administratorów pojemności. Możesz jeszcze bardziej dostosować konfiguracje i zarządzać właściwościami platformy Spark, aby być skuteczne w sesjach platformy Spark. Aby uzyskać więcej informacji, zobacz Ustawienia konfiguracji obliczeń Spark w środowiskach Fabric.

Zarządzanie bibliotekami

Każde środowisko uruchomieniowe platformy Spark udostępnia wbudowane biblioteki. Za pomocą środowiska sieci szkieletowej można również instalować biblioteki ze źródeł publicznych lub przekazywać utworzone przez Ciebie lub organizację biblioteki niestandardowe. Po pomyślnym zainstalowaniu bibliotek są one dostępne w sesjach platformy Spark. Aby uzyskać więcej informacji, zobacz Zarządzanie biblioteką w środowiskach Fabric. Aby uzyskać najlepsze rozwiązania dotyczące zarządzania bibliotekami w usłudze Fabric, zobacz Zarządzanie bibliotekami platformy Apache Spark w usłudze Fabric.

Korzystanie z zasobów

Sekcja Zasoby w środowisku ułatwia zarządzanie małymi zasobami w fazie opracowywania. Pliki przekazywane do środowiska są dostępne w notesach po dołączeniu. Aby uzyskać więcej informacji, zobacz Zarządzanie zasobami w środowisku sieci szkieletowej.

Zapisywanie i publikowanie zmian

Na karcie Narzędzia główne można łatwo znaleźć pozycję Zapisz i Opublikuj. Są one aktywowane w przypadku niezapisanych lub nieopublikowanych oczekujących zmian w sekcjach bibliotek i obliczeń platformy Spark.

Ważne

• Jeśli usługa Private Link jest włączona, pierwsze zadanie Spark w obszarze roboczym musi wyzwolić aprowizację VNet, co może potrwać około 10–15 minut. Ponieważ publikowanie środowiska jest również uruchamiane jako zadanie platformy Spark, może wystąpić dodatkowe opóźnienie, jeśli stanie się to pierwsze zadanie platformy Spark wykonane po włączeniu usługi Private Link.

Jeśli oczekujące zmiany znajdują się w sekcjach Biblioteki i obliczenia platformy Spark , zostanie również wyświetlony baner z monitem o zapisanie i opublikowanie. Funkcje są takie same jak w przypadku przycisków:

• Niezapisane zmiany zostaną utracone, jeśli odświeżysz lub pozostawisz otwartą przeglądarkę. Wybierz pozycję Zapisz , aby upewnić się, że zmiany są rejestrowane przed opuszczeniem. Zapisywanie nie stosuje konfiguracji, ale buforuje zmiany w systemie.
• Aby zastosować zmiany w bibliotekach i obliczeniach platformy Spark, wybierz pozycję Publikuj. Przed opublikowaniem zostanie wyświetlona strona Oczekujące zmiany do ostatecznego przeglądu. Następnie wybierz pozycję Opublikuj wszystko , aby zainicjować konfigurację w środowisku sieci szkieletowej. Ten proces może zająć trochę czasu, zwłaszcza jeśli dotyczy to zmian biblioteki.
• Aby anulować proces publikowania, wybierz pozycję Wyświetl postęp na banerze i anuluj operację.
• Po zakończeniu publikowania zostanie wyświetlone powiadomienie. Powiadomienie o błędzie występuje, jeśli podczas procesu występują jakiekolwiek problemy.

Środowisko akceptuje tylko jedną akcję Publikuj jednocześnie. Nie można wprowadzać zmian w sekcjach bibliotek ani obliczeń platformy Spark podczas trwającej akcji Publikuj .

Publikowanie nie ma wpływu na dodawanie, usuwanie ani edytowanie plików i folderów w sekcji Zasoby . Akcje do zarządzania zasobami są w czasie rzeczywistym. Akcja Publikuj nie blokuje zmian w sekcji Zasoby .

Udostępnianie istniejącego środowiska

Sieć szkieletowa obsługuje udostępnianie elementu z różnymi poziomami uprawnień.

Gdy udostępnisz element środowiska, adresaci automatycznie otrzymają uprawnienia do odczytu. Dzięki temu uprawnieniem mogą eksplorować konfiguracje środowiska i dołączać je do notesów lub zadań platformy Spark. Aby zapewnić bezproblemowe wykonywanie kodu, podczas udostępniania notesów i definicji zadań platformy Spark należy przyznać uprawnienia do odczytu dla dołączonych środowisk.

Możesz również udostępnić środowisko za pomocą uprawnień Udostępnianie i Edytowanie. Użytkownicy z uprawnieniem Udostępnij mogą nadal udostępniać środowisko innym osobom. W międzyczasie adresaci z uprawnieniem Edytuj mogą aktualizować zawartość środowiska.

Dołącz środowisko

Środowisko sieci szkieletowej można dołączyć do obszarów roboczych inżynierii danych/nauki lub notesów i definicji zadań platformy Spark.

Dołączanie środowiska jako domyślnego obszaru roboczego

Ważne

Po wybraniu środowiska jako domyślnego obszaru roboczego tylko administratorzy obszaru roboczego mogą zaktualizować zawartość środowiska domyślnego.

Wybierz pozycję Ustawienia> obszaru roboczegoInżynieria danych/Środowisko>Spark, aby wyświetlić kartę Środowisko.

Administratorzy obszaru roboczego mogą definiować domyślne obciążenie dla całych obszarów roboczych. Wartości skonfigurowane w tym miejscu są skuteczne dla notesów i definicji zadań platformy Spark, które są dołączane do ustawień obszaru roboczego .

Przełącznik Ustaw domyślne środowisko może poprawić środowisko użytkownika. Domyślnie ten przełącznik ma wartość Wyłączone. Jeśli nie ma domyślnej właściwości platformy Spark lub biblioteki wymaganej jako domyślnego obszaru roboczego, możesz zdefiniować środowisko uruchomieniowe platformy Spark w tej sytuacji. Jeśli chcesz przygotować domyślne zasoby obliczeniowe i biblioteki platformy Spark dla obszaru roboczego, możesz przełączyć przełącznik na wł . i łatwo dołączyć środowisko jako domyślne. Ta opcja powoduje, że wszystkie konfiguracje w środowisku obowiązują jako ustawienia obszaru roboczego .

Dołącz środowisko do notesu lub definicji zadania Spark.

Środowisko jest dostępne na kartach Notes i Definicja zadania platformy Spark . Gdy notesy i definicje zadań platformy Spark są dołączone do środowiska, mogą uzyskiwać dostęp do jego bibliotek, konfiguracji obliczeniowych i zasobów. W Eksploratorze wymieniono wszystkie dostępne środowiska, które są Ci udostępnione, pochodzą z bieżącego obszaru roboczego i pochodzą z innych obszarów roboczych, do których masz dostęp.

Jeśli przełączysz się do innego środowiska podczas aktywnej sesji, nowo wybrane środowisko nie zostanie zastosowane do następnej sesji.

W przypadku dołączania środowiska z innego obszaru roboczego oba obszary robocze muszą mieć tę samą pojemność i ustawienia zabezpieczeń sieci. Mimo że można wybierać środowiska z obszarów roboczych z różnymi pojemnościami lub ustawieniami zabezpieczeń sieci, sesja nie może się uruchomić.

Po dołączeniu środowiska z innego obszaru roboczego konfiguracja obliczeniowa w tym środowisku jest ignorowana. Zamiast tego konfiguracja puli i obliczeń jest domyślnie ustawiona na ustawienia bieżącego obszaru roboczego.

Usuwanie środowiska

Środowisko można usunąć, gdy nie jest już potrzebne. Przed usunięciem środowiska należy wziąć pod uwagę następujące kwestie:

Ważne

• Usuwanie środowiska jest trwałe i nie można go cofnąć.
• Wszystkie notesy lub definicje zadań platformy Spark, które są obecnie dołączone do środowiska, należy ponownie skonfigurować, aby używać innego środowiska lub ustawień obszaru roboczego.
• Jeśli środowisko jest ustawione jako domyślne środowisko obszaru roboczego, musisz najpierw zmienić domyślne ustawienie obszaru roboczego przed usunięciem.

Usuwanie środowiska przy użyciu interfejsu API REST

Środowisko można usunąć programowo przy użyciu interfejsu API REST Fabric:

Punkt końcowy:DELETE https://api.fabric.microsoft.com/v1/workspaces/{workspaceId}/environments/{environmentId}

Wymagane uprawnienia: Environment.ReadWrite.All lub Item.ReadWrite.All

Aby uzyskać więcej informacji na temat interfejsu API REST, zobacz Usuwanie środowiska.

Powiązana zawartość

• Ustawienia konfiguracji obliczeń platformy Spark w środowiskach Fabric
• Zarządzanie bibliotekami w środowiskach Fabric