Czerwiec 2020

Te funkcje i ulepszenia platformy Azure Databricks zostały wydane w czerwcu 2020 r.

Uwaga

Wydania są etapowe. Twoje konto usługi Azure Databricks może nie zostać zaktualizowane do tygodnia po początkowej dacie wydania.

Usługa Databricks Connect obsługuje teraz środowisko Databricks Runtime 6.6

26 czerwca 2020 r.

Usługa Databricks Połączenie obsługuje teraz środowisko Databricks Runtime 6.6.

Databricks Runtime 7.0 ML (ogólna dostępność)

22 czerwca 2020 r.

Środowisko Databricks Runtime 7.0 ML jest oparte na środowisku Databricks Runtime 7.0 i obejmuje następujące nowe funkcje:

  • Biblioteki języka Python w zakresie notesu i środowiska niestandardowe zarządzane przez polecenia conda i pip.
  • Aktualizacje dla głównych pakietów języka Python, w tym tensorflow, tensorboard, pytorch, xgboost, sparkdl i hyperopt.
  • Nowo dodane pakiety języka Python lightgbm, nltk, petastorm i plotly.
  • RStudio Server Open Source v1.2.

Aby uzyskać więcej informacji, zobacz pełne informacje o wersji środowiska Databricks Runtime 7.0 ML (nieobsługiwane).

Databricks Runtime 7.0 (ogólna dostępność) — środowisko obsługiwane przez platformę Apache Spark 3.0

18 czerwca 2020 r.

Środowisko Databricks Runtime 7.0 jest obsługiwane przez platformę Apache Spark 3.0, a teraz obsługuje język Scala 2.12.

Platforma Spark 3.0 oferuje wiele dodatkowych funkcji i ulepszeń, w tym:

  • Adaptacyjne wykonywanie zapytań, elastyczna struktura do wykonywania adaptacyjnego w usłudze Spark SQL i obsługa zmiany liczby reduktorów w czasie wykonywania.
  • Przeprojektowano funkcje zdefiniowane przez użytkownika biblioteki pandas z wskazówkami o typie.
  • Interfejs użytkownika sieci Web przesyłania strumieniowego ze strukturą.
  • Lepsza zgodność ze standardami ANSI SQL.
  • Sprzężenia wskazówek.

Środowisko Databricks Runtime 7.0 dodaje:

  • Ulepszony moduł automatycznego ładowania na potrzeby przyrostowego przetwarzania nowych plików danych podczas procesu ETL w magazynie obiektów blob w chmurze.
  • Ulepszone polecenie COPY INTO służące do ładowania danych do usługi Delta Lake przy użyciu ponownych prób idempotentnych.
  • Wiele ulepszeń, dodatków bibliotek i uaktualnień oraz poprawek błędów.

Aby uzyskać więcej informacji, zobacz pełne informacje o wersji środowiska Databricks Runtime 7.0 (nieobsługiwane).

Databricks Runtime 7.0 dla usługi Genomics (ogólna dostępność)

18 czerwca 2020 r.

Środowisko Databricks Runtime 7.0 dla usługi Genomics jest oparte na środowisku Databricks Runtime 7.0 i zawiera następujące zmiany biblioteki:

  • Biblioteka ADAM została zaktualizowana z wersji 0.30.0 do 0.32.0.
  • Biblioteka Hail nie jest uwzględniona w środowisku Databricks Runtime 7.0 dla usługi Genomics, ponieważ nie ma wersji opartej na platformie Apache Spark 3.0.

Kontrola dostępu zależna od etapu dla modeli MLflow

16-23 czerwca 2020 r.: Wersja 3.22

Teraz można przypisać kontrolki dostępu zależne od etapu do użytkowników lub grup, co umożliwia zarządzanie modelami MLflow zarejestrowanymi w rejestrze modeli MLflow na etapie przejściowym lub produkcyjnym. Wprowadziliśmy dwa nowe poziomy uprawnień: CAN MANAGE STAGING VERSIONS (ZARZĄDZANIE WERSJAMI PRZEJŚCIOWYMI) I CAN MANAGE PRODUCTION VERSIONS (ZARZĄDZANIE WERSJAMI PRODUKCYJNYMI). Użytkownicy z tymi uprawnieniami mogą wykonywać przejścia między etapami dozwolonymi dla poziomu.

Aby uzyskać szczegółowe informacje, zobacz Listy ACL modelu MLFlow.

Notesy obsługują teraz wyłączanie autoprzewijania

16-23 czerwca 2020 r.: Wersja 3.22

Po uruchomieniu komórki notesu przy użyciu klawisza shift+enter domyślne zachowanie notesu polega na automatycznym przewinięciu do następnej komórki, jeśli komórka nie jest widoczna. Teraz możesz wyłączyć automatyczne przewijanie w Ikona Ustawienia użytkownika>ustawieniach edytora Ustawienia > użytkownika. Jeśli wyłączysz automatyczne przewijanie, po naciśnięciu klawisza shift+wprowadź fokus zostanie przeniesiony do następnej komórki, ale notes nie przewija się do tej komórki.

30 czerwca 2020 r. zmienią się adresy IP magazynu metadanych

11 czerwca 2020 r.

Domyślny magazyn metadanych dla usługi Azure Databricks używa usługi Azure Database for MySQL. Wszystkie adresy IP usługi Azure Database for MySQL dla magazynów metadanych usługi Azure Databricks zmieniają się 30 czerwca 2020 r. Jeśli masz obszar roboczy usługi Azure Databricks wdrożony we własnej sieci wirtualnej, tabela tras dla tego wdrożenia może zawierać adres IP magazynu metadanych usługi Azure Databricks lub trasę do zapory lub urządzenia proxy z listą dostępu zawierającą ten adres. W takim przypadku należy zaktualizować tabele tras usługi Azure Databricks lub zapory przy użyciu nowych adresów IP programu MySQL przed 30 czerwca 2020 r., aby uniknąć zakłóceń.

15 sierpnia kończy się wsparcie dla programu Internet Explorer 11

9 czerwca 2020 r.

Zgodnie z trendami branżowymi i zapewnienie stabilnego i spójnego środowiska użytkownika dla naszych klientów usługa Azure Databricks zakończy wsparcie dla programu Internet Explorer 11 w dniu 15 sierpnia 2020 r.

Kończy się wsparcie dla środowisk z serii Databricks Runtime 6.2

3 czerwca 2020 r.

Obsługa środowiska Databricks Runtime 6.2, databricks Runtime 6.2 dla Edukacja maszyny i środowiska Databricks Runtime 6.2 dla usługi Genomics zakończyła się 3 czerwca. Zobacz Cykle życia pomocy technicznej środowiska uruchomieniowego usługi Databricks.

Upraszczanie i kontrolowanie tworzenia klastrów przy użyciu zasad klastrów (publiczna wersja zapoznawcza)

2–9 czerwca 2020 r.: Wersja 3.21

Zasady klastra są definiowane przez administratora, szablony klastrów wielokrotnego użytku, które wymuszają reguły atrybutów klastra, a tym samym zapewniają, że użytkownicy tworzą klastry zgodne z tymi regułami. Jako administrator usługi Azure Databricks możesz teraz tworzyć zasady klastra i nadawać użytkownikom uprawnienia zasad. Dzięki temu masz większą kontrolę nad utworzonymi zasobami, zapewnisz użytkownikom poziom elastyczności, której potrzebują do wykonania swojej pracy, i znacznie uprościsz środowisko tworzenia klastra.

Aby uzyskać szczegółowe informacje, zobacz Tworzenie zasad obliczeniowych i zarządzanie nimi.

Punkt końcowy SCIM Me zwraca teraz odpowiedź zgodną ze standardem SCIM

2–9 czerwca 2020 r.: Wersja 3.21

Punkt końcowy SCIM Me zwraca teraz te same informacje co /users/{id} punkt końcowy, w tym informacje, takie jak grupy i uprawnienia.

Zobacz Bieżący interfejs API użytkownika.

Ograniczanie dostępu do usługi Azure Databricks przy użyciu list dostępu IP (publiczna wersja zapoznawcza)

1 czerwca 2020 r.

Obszary robocze usługi Azure Databricks można teraz skonfigurować tak, aby użytkownicy łączyli się z usługą tylko za pośrednictwem istniejących sieci firmowych z bezpiecznym obwodem. Administratorzy usługi Azure Databricks mogą używać interfejsu API listy dostępu ip do definiowania zestawu zatwierdzonych adresów IP, w tym list dozwolonych i zablokowanych. Cały dostęp przychodzący do aplikacji internetowej i interfejsów API REST wymaga, aby użytkownik nawiązał połączenie z autoryzowanego adresu IP, gwarantując, że obszary robocze nie mogą być dostępne z sieci publicznej, takiej jak kawiarnia lub lotnisko, chyba że użytkownicy korzystają z sieci VPN.

Ta funkcja wymaga planu Premium.

Aby uzyskać więcej informacji, zobacz Konfigurowanie list dostępu do adresów IP dla obszarów roboczych.