Październik 2023
Te funkcje i ulepszenia platformy Azure Databricks zostały wydane w październiku 2023 r.
Uwaga
Wydania są etapowe. Obszar roboczy usługi Azure Databricks może nie zostać zaktualizowany do tygodnia lub więcej po początkowej dacie wydania.
Bezserwerowa bezpieczna łączność dla usługi Databricks SQL Serverless (publiczna wersja zapoznawcza)
31 października 2023 r.
Nowe bezserwerowe bezpieczne narzędzia do łączności ułatwiają kontrolowanie dostępu sieciowego z bezserwerowych magazynów SQL do źródeł danych w usłudze Azure Storage. Zaporę magazynu można wybrać przy użyciu identyfikatorów podsieci lub włączyć łączność prywatną z usługą Azure Private Link. Aby dołączyć do publicznej wersji zapoznawczej, skontaktuj się z zespołem konta usługi Azure Databricks. Zobacz Sieć bezserwerowej płaszczyzny obliczeniowej.
Jeśli masz zapory magazynu skonfigurowane przy użyciu identyfikatorów podsieci wymienionych w dokumentacji usługi Azure Databricks przed 31 października 2023 r., usługa Databricks zaleca zaktualizowanie konfiguracji zapory dla każdego z regionów obszaru roboczego przy użyciu jednego z nowych narzędzi. Może to pomóc w zastosowaniu spójnego wdrożenia we wszystkich obszarach roboczych. Jeśli zdecydujesz się nie aktualizować istniejących konfiguracji, obszary robocze będą nadal działać.
Wyświetlanie źródła YAML dla zadania usługi Azure Databricks
30 października 2023 r.
Teraz możesz wyświetlić i skopiować źródło YAML dla zadania, klikając 
stronę szczegółów zadania i wybierając pozycję Wyświetl plik YAML/JSON. Źródło YAML umożliwia tworzenie przepływów pracy ciągłej integracji/ciągłego wdrażania za pomocą pakietów zasobów usługi Databricks. Zobacz Co to są pakiety zasobów usługi Databricks?.
Dodawanie logiki warunkowej do przepływów pracy usługi Azure Databricks
30 października 2023 r.
Teraz możesz użyć If/else condition zadania do warunkowego uruchamiania zadań w zadaniu usługi Azure Databricks na podstawie wyników wyrażenia logicznego. Zobacz Dodawanie logiki rozgałęziania do zadania za pomocą zadania If/else.
Konfigurowanie parametrów w zadaniu usługi Azure Databricks, do którego można odwoływać się wszystkie zadania podrzędne
30 października 2023 r.
Teraz możesz dodać parametry do zadań usługi Azure Databricks, które są automatycznie przekazywane do wszystkich zadań, które akceptują pary klucz-wartość. Zobacz Konfigurowanie parametrów zadania. Ponadto można teraz użyć rozszerzonego zestawu odwołań wartości do przekazywania kontekstu i stanu między zadaniami zadań. Zobacz Co to jest odwołanie do wartości dynamicznej?.
Automatyczne włączanie wektorów usuwania
30 października 2023 r.
Teraz można włączyć wektory usuwania we wszystkich nowych tabelach delty w środowisku Databricks Runtime 14.0 lub nowszym z ustawieniem administratora obszaru roboczego Automatyczne włączanie wektorów usuwania. To zachowanie jest obecnie opt-in, ale zmieni się na rezygnację w przyszłości. Usługa Databricks zaleca ręczne skonfigurowanie opcji dla tego ustawienia. Zobacz Automatyczne włączanie wektorów usuwania.
Obsługa wykazu aparatu Unity dla UNDROP TABLE usługi jest ogólnie dostępna
25 października 2023 r.
Usunięcie usuniętej tabeli zarządzanej lub zewnętrznej można cofnąć w istniejącym schemacie w ciągu siedmiu dni od upuszczania. Wymaga środowiska Databricks Runtime 12.1 lub nowszego. Zobacz COFANIE TABELI I POKAŻ USUNIĘTE TABELE.
Program Partner Connect obsługuje usługę Dataiku
25 października 2023 r.
Teraz możesz użyć programu Partner Connect, aby połączyć obszar roboczy usługi Azure Databricks z usługą Dataiku. Zobacz Nawiązywanie połączenia z usługą Dataiku.
Notesy wygenerowane przez rozwiązanie Mosaic AutoML są teraz zapisywane jako artefakty MLflow
24 października 2023 r.
Notesy wygenerowane przez oprogramowanie Mozaika AutoML są teraz zapisywane jako artefakty MLflow we wszystkich wersjach środowiska Databricks Runtime dla usługi Machine Learning.
Nowy region: Katar Środkowy
23 października 2023 r.
Usługa Azure Databricks jest teraz dostępna w Katarze Środkowym. Zobacz Regiony usługi Azure Databricks.
Woluminy wykazu aparatu Unity obsługiwane za pomocą usługi Azure Firewall i usługi Private Link
23 października 2023 r.
Teraz można używać woluminów wykazu aparatu Unity w połączeniu z kontami usługi Azure Storage skonfigurowanymi za pomocą usługi Azure Firewall lub usługi Private Link. Spowoduje to usunięcie poprzedniego ograniczenia.
Optymalizacja predykcyjna (publiczna wersja zapoznawcza)
24 października 2023 r.
Optymalizacja predykcyjna eliminuje konieczność ręcznego zarządzania operacjami konserwacji tabel różnicowych. Operacje konserwacji są uruchamiane tylko w razie potrzeby, eliminując zarówno niepotrzebne uruchomienia operacji konserwacji, jak i obciążenia związane ze śledzeniem i rozwiązywaniem problemów z wydajnością. Zobacz Optymalizacja predykcyjna dla tabel zarządzanych w wykazie aparatu Unity.
Tabele systemu obliczeniowego są teraz dostępne (publiczna wersja zapoznawcza)
23 października 2023 r.
Schemat system.compute zawiera dwie nowe tabele, których można użyć do monitorowania zasobów obliczeniowych na koncie: clusters i node_types.
Tabela klastrów to wolno zmieniająca się tabela wymiarów zawierająca pełną historię konfiguracji klastra w czasie dla klastrów przeznaczonych do wszystkich celów i zadań. Tabela typów węzłów przechwytuje obecnie dostępne typy węzłów przy użyciu podstawowych informacji o sprzęcie. Jeśli nie masz dostępu do tych tabel systemowych, upewnij się, że na koncie włączono schemat obliczeniowy (zobacz Włączanie schematów tabel systemowych).
Aby uzyskać więcej informacji na temat tabel systemu obliczeniowego, zobacz Informacje o tabelach systemu obliczeniowego.
Obliczenia funkcji na żądanie to ogólna dostępność
19 października 2023 r.
Funkcje uczenia maszynowego można teraz obliczyć na żądanie w czasie wnioskowania. Umożliwia to modelom obliczanie funkcji przy użyciu danych wejściowych, które są dostępne tylko w czasie wnioskowania, takich jak bieżąca lokalizacja użytkownika, lub korzystanie z funkcji, które są kosztowne, aby wstępnie skompilować, przechowywać i odświeżać. Kod trenowania modelu może definiować dowolny graf odnośników funkcji i obliczeń wykonywanych podczas trenowania i wnioskowania modelu.
Logika obliczeniowa funkcji, modele i dane są zarządzane przez wykaz aparatu Unity. Aby uzyskać więcej informacji, zobacz Funkcje obliczeniowe na żądanie przy użyciu funkcji zdefiniowanych przez użytkownika języka Python.
Inżynieria funkcji w wykazie aparatu Unity jest ogólnie dostępna
19 października 2023 r.
Dzięki inżynierii funkcji w wykazie aparatu Unity katalog aparatu Unity staje się twoim magazynem funkcji. Możesz użyć dowolnej tabeli delty z kluczem podstawowym jako tabelą cech na potrzeby trenowania lub wnioskowania modelu. Wykaz aparatu Unity zapewnia odnajdywanie funkcji i nadzór.
Komentarze do tabeli generowane przez sztuczną inteligencję (publiczna wersja zapoznawcza)
18 października 2023 r.
W ramach inicjatywy dotyczącej używania sztucznej inteligencji w celu ułatwienia pracy z usługą Azure Databricks usługa Azure Databricks wprowadza komentarze do publicznej wersji zapoznawczej wygenerowanej przez sztuczną inteligencję i komentarze kolumn. W Eksploratorze wykazu można wyświetlać, edytować i dodawać komentarz wygenerowany przez sztuczną inteligencję dla dowolnej tabeli lub kolumny tabeli zarządzanej przez wykaz aparatu Unity. Komentarze generowane przez sztuczną inteligencję mogą używać partnerów modelu zewnętrznego do dostarczania odpowiedzi. Dane wysyłane do tych usług nie są używane do trenowania modelu.
Zobacz Dodawanie komentarzy generowanych przez sztuczną inteligencję do obiektów wykazu aparatu Unity.
Modele w wykazie aparatu Unity są ogólnie dostępne
17 października 2023 r.
Modele uczenia maszynowego w wykazie aparatu Unity są teraz ogólnie dostępne. Wykaz aparatu Unity zapewnia scentralizowaną kontrolę dostępu, inspekcję, pochodzenie, udostępnianie modeli w obszarach roboczych i lepsze przepływy pracy wdrażania metodyki MLOps. Usługa Azure Databricks zaleca używanie modeli w wykazie aparatu Unity zamiast rejestru modeli obszaru roboczego. Aby uzyskać szczegółowe informacje, zobacz Zarządzanie cyklem życia modelu w wykazie aparatu Unity.
Biblioteki są teraz obsługiwane w zasadach obliczeniowych (publiczna wersja zapoznawcza)
17 października 2023 r.
Administratorzy obszaru roboczego mogą teraz dodawać biblioteki do zasad obliczeniowych. Obliczenia korzystające z zasad automatycznie zainstalują bibliotekę. Użytkownicy nie mogą instalować ani odinstalować bibliotek o zakresie obliczeniowym na obliczeniach korzystających z zasad. Wcześniej zainstalowane biblioteki zostaną odinstalowane.
Usługa Databricks zaleca migrowanie wszystkich bibliotek zainstalowanych za pomocą skryptów inicjowania w celu korzystania z zasad obliczeniowych. Zobacz Dodawanie bibliotek do zasad.
Program Partner Connect obsługuje monte carlo
16 października 2023 r.
Teraz możesz użyć programu Partner Connect, aby połączyć obszar roboczy usługi Azure Databricks z Monte Carlo. Aby uzyskać więcej informacji, zobacz Connect Azure Databricks to Monte Carlo (Łączenie usługi Azure Databricks z monte carlo).
Wyszukiwanie semantyczne (publiczna wersja zapoznawcza)
16 października 2023 r.
Teraz możesz użyć języka naturalnego do wyszukiwania tabel wykazu aparatu Unity w oknie dialogowym wyszukiwania zaawansowanego. Zobacz Wyszukiwanie semantyczne.
Włączanie asystenta usługi Databricks na poziomie obszaru roboczego
11 października 2023 r.
Administrator obszaru roboczego może teraz włączyć lub wyłączyć Asystenta usługi Databricks dla pojedynczego obszaru roboczego, jeśli administrator konta go zezwolił. Aby uzyskać szczegółowe informacje, zobacz Jak mogę enable Databricks Assistant? (Włączanie asystenta usługi Databricks?).
Nowe wartości domyślne aplikacji Photon
11 października 2023 r.
Podczas tworzenia nowego klastra za pomocą interfejsu użytkownika domyślny aparat środowiska Uruchomieniowego usługi Databricks to Photon włączony. Dotyczy to klastrów zadań i wszystkich celów.
Nowe klastry utworzone przy użyciu zasad klastra, które są zgodne z programem Photon, mają domyślnie włączoną usługę Photon. Zasady klastra są zgodne ze środowiskiem Photon, jeśli środowisko Databricks Runtime obsługuje je, typ węzła jest obsługiwany i runtime_engine nie jest jawnie ustawiony na STANDARDwartość .
Databricks Runtime 14.1 to ogólna dostępność
11 października 2023 r.
Środowiska Databricks Runtime 14.1 i Databricks Runtime 14.1 ML są teraz ogólnie dostępne.
Zobacz Databricks Runtime 14.1 i Databricks Runtime 14.1 for Machine Learning ( Środowisko Databricks Runtime 14.1 i Databricks Runtime 14.1).
Narzędzia programistyczne informacje o wersji zostały przeniesione
10 października 2023 r.
Informacje o wersji narzędzi deweloperskich usługi Azure Databricks po 10 października 2023 r. są teraz publikowane w informacjach o wersji narzędzi deweloperskich i zestawów SDK usługi Azure Databricks zamiast informacji o wersji platformy Azure Databricks.
Rozszerzenie usługi Databricks dla programu Visual Studio Code zostało zaktualizowane do wersji 1.1.5
9 października 2023 r.
Rozszerzenie usługi Databricks dla programu Visual Studio Code w wersji 1.1.5 zawiera kilka drobnych poprawek. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 1.1.5.
Predykcyjne we/wy dla aktualizacji to ogólna dostępność
9 października 2023 r.
Predykcyjne we/wy dla aktualizacji są teraz ogólnie dostępne w środowisku Databricks Runtime 14.0 lub nowszym. Zobacz Co to jest predykcyjne we/wy?
Wektory usuwania są ogólnie dostępne
9 października 2023 r.
Wektory usuwania są teraz ogólnie dostępne w środowisku Databricks Runtime 14.0 lub nowszym. Zobacz Co to są wektory usuwania?.
Program Partner Connect obsługuje stos RudderStack
5 października 2023 r.
Teraz możesz użyć programu Partner Connect, aby połączyć obszar roboczy usługi Azure Databricks z aplikacją RudderStack. Aby uzyskać więcej informacji, zobacz Connect to RudderStack (Nawiązywanie połączenia z elementem RudderStack).
Interfejs wiersza polecenia usługi Databricks został zaktualizowany do wersji 0.207.0 (publiczna wersja zapoznawcza)
4 października 2023 r.
Interfejs wiersza polecenia usługi Databricks (interfejs wiersza polecenia usługi Databricks) został zaktualizowany do wersji 0.207.0. Ta wersja zawiera aktualizacje funkcji i poprawki pakietów zasobów usługi Databricks, wprowadza dodatki i zmiany w kilku grupach poleceń i poleceniach itd. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.207.0.
Uruchamianie zaznaczonych komórek w notesie
4 października 2023 r.
Teraz można uruchamiać tylko zaznaczone komórki w notesie. Zobacz Uruchamianie zaznaczonych komórek.
Używanie powiązania katalogu obszarów roboczych w celu udzielenia dostępu tylko do odczytu do katalogu
4 października 2023 r.
Jeśli używasz powiązania katalogu obszarów roboczych w celu ograniczenia dostępu do katalogów do określonych obszarów roboczych na koncie, możesz teraz ustawić ten dostęp tylko do odczytu. Powiązanie katalogu obszarów roboczych tylko do odczytu jest przydatne w scenariuszach, takich jak zapewnienie użytkownikom dostępu tylko do odczytu do danych produkcyjnych z obszaru roboczego dewelopera w celu umożliwienia programowania i testowania.
Ta aktualizacja spowoduje również wycofanie punktu końcowego interfejsu /api/2.1/unity-catalog/workspace-bindings/ API i zastąpienie go elementem /api/2.1/unity-catalog/bindings/.
Zobacz Ograniczanie dostępu katalogu do określonych obszarów roboczych.
Rozszerzenie usługi Databricks dla programu Visual Studio Code zostało zaktualizowane do wersji 1.1.4
2 października 2023 r.
Rozszerzenie databricks dla programu Visual Studio Code w wersji 1.1.4 dodaje obsługę niestandardowych adresów URL obszarów roboczych usługi Azure Databricks i nie tylko. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 1.1.4.
Zestaw SDK usługi Databricks dla języka Python został zaktualizowany do wersji 0.10.0 (beta)
3 października 2023 r.
Zestaw SDK usługi Databricks dla języka Python w wersji 0.10.0 wprowadza 7 zmian powodujących niezgodność, dodaje 10 klas danych, dodaje 6 pól i dodaje jedną usługę. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.10.0.
Zestaw SDK usługi Databricks dla języka Go został zaktualizowany do wersji 0.22.0 (beta)
3 października 2023 r.
Zestaw SDK usługi Databricks dla języka Go w wersji 0.22.0 wprowadza jedną niezgodną zmianę interfejsu API i dodaje jeden interfejs API. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.22.0.
Woluminy wykazu aparatu Unity są teraz dostępne w publicznej wersji zapoznawczej dla platformy Azure (Chiny)
2 października 2023 r.
Woluminy wykazu aparatu Unity są teraz dostępne jako funkcja publicznej wersji zapoznawczej w regionach Azure (Chiny). Zobacz Co to są woluminy wykazu aparatu Unity?.