Znany problem — środowisko uruchomieniowe sieci szkieletowej 1.3 powoduje nieprawidłowe biblioteki
Środowisko Uruchomieniowe sieci szkieletowej 1.3 obejmuje platformę Apache Spark 3.5. Platforma Spark 3.5 wydała główną aktualizację 15 sierpnia 2024 r., co powoduje, że biblioteki niestandardowe zainstalowane w środowiskach sieci szkieletowej staną się nieprawidłowe. Uruchamianie sesji definicji zadań i notesu platformy Spark kończy się niepowodzeniem w przypadku korzystania z nieprawidłowego środowiska.
Stan: Otwórz
Środowisko produktu: inżynierowie danych
Objawy
Po wykonaniu nowej sesji definicji notesu lub zadania platformy Spark ze środowiskiem Fabric Runtime 1.3 uruchomienie sesji platformy Spark kończy się niepowodzeniem z powodu błędu Spark_Ambiguous_SparkSubmit_PersonalizationFailed .
Rozwiązania i obejścia
Aby rozwiązać ten problem, wykonaj poniższe kroki:
- Przejdź do wystąpienia środowiska za pomocą środowiska Uruchomieniowego 1.3 w obszarze roboczym
- Wprowadź zmiany w sekcji bibliotek zgodnie z potrzebami na podstawie zależności bibliotek
- Zapisz i ponownie opublikuj środowisko. Środowisko zostanie ponownie skompilowane przy użyciu najnowszej aktualizacji środowiska uruchomieniowego platformy Spark 3.5.