Informacje o wydaniu Databricks SQL 2021

Poniżej przedstawiono ulepszenia i aktualizacje w usłudze Databricks SQL od stycznia do grudnia 2021 r.

15 grudnia 2021 r.

• Databricks SQL jest ogólnie dostępny. Oznacza to główny kamień milowy w dostarczaniu pierwszej platformy lakehouse, która jednoczy dane, sztuczną inteligencję i obciążenia analizy biznesowej w jednym miejscu. Dzięki wersji GA możesz oczekiwać najwyższego poziomu stabilności, wsparcia i dostosowania do potrzeb przedsiębiorstwa od Databricks na potrzeby obciążeń o krytycznym znaczeniu. Przeczytaj wpis na blogu o ogłoszeniu dotyczącym GA, aby dowiedzieć się więcej.
• Alerty są teraz zaplanowane niezależnie od zapytań. Po utworzeniu nowego alertu i utworzeniu zapytania zostanie wyświetlony monit o utworzenie harmonogramu alertu. Jeśli masz istniejący alert, zduplikowaliśmy harmonogram z oryginalnego zapytania. Ta zmiana umożliwia również ustawianie alertów dla Uruchom jako właściciel i Uruchom jako przeglądający zapytania. Uruchom jako właściciel zapytania działają zgodnie z wyznaczonym harmonogramem alertów z użyciem poświadczeń właściciela zapytania. Uruchom jako przeglądający uruchamia zapytania zgodnie z wyznaczonym harmonogramem alertów, używając poświadczeń twórcy alertów. Zobacz Alerty SQL usługi Databricks i Zaplanuj zapytanie.
• Teraz można ponownie porządkować parametry zarówno w edytorze SQL, jak i na pulpitach nawigacyjnych .
• Rozszerzono dokumentację dotyczącą tworzenia wizualizacji mapy cieplnej. Zobacz opcje mapy cieplnej .

9 grudnia 2021 r.

• Podczas tworzenia wizualizacji tabeli można teraz ustawić kolor czcionki dla kolumny na wartość statyczną lub zakres wartości na podstawie wartości pola kolumny. Wartość dosłowna jest porównywana z progiem. Na przykład aby kolorować wyniki, których wartości przekraczają 500000, utwórz próg > 500000, a nie > 500,000. Zobacz formatowanie warunkowe kolorów kolumn.
• Ikony w przeglądarce schematu edytora SQL z kartami umożliwiają teraz rozróżnienie między tabelami i widokami.

1 grudnia 2021 r.

• Teraz można zastosować parametry konfiguracji SQL na poziomie obszaru roboczego. Te parametry są automatycznie stosowane do wszystkich istniejących i nowych punktów końcowych SQL w obszarze roboczym. Zobacz Konfigurowanie parametrów SQL.

18 listopada 2021 r.

• Podczas wyświetlania historii zapytania można teraz filtrować zapytania względem jednostki usługi, która je uruchomiła. Zobacz Wyświetl historię zapytań.

• Teraz możesz otworzyć edytor SQL przy użyciu skrótu paska bocznego. Aby otworzyć edytor SQL, kliknij pozycję Edytor SQL.
• Jeśli masz uprawnienia do tworzenia klastrów Inżynierii nauki o danych &, możesz teraz utworzyć punkty końcowe SQL, klikając Utwórz w pasku bocznym, a następnie klikając Punkt końcowy SQL.
• Administratorzy mogą teraz przenieść własność zapytania, pulpitu nawigacyjnego lub alertu do innego użytkownika za pośrednictwem interfejsu użytkownika. Zobacz:
• Przenoszenie własności zapytania
• Przenoszenie własności starszego pulpitu nawigacyjnego
• Przenoszenie własności alertu

4 listopada 2021 r.

• W wizualizacji mapy (Choropleth) wizualizacji maksymalna liczba kroków gradientu kolorów w legendzie została zwiększona z 11 do 20. Wartość domyślna to 5 kroków gradientu obejmujących Min i Maksymalny kolor.
• Edytor SQL z kartami obsługuje teraz zbiorcze zarządzanie kartami. Jeśli klikniesz prawym przyciskiem myszy na kartę, zobaczysz opcje Zamknij inne, Zamknij po lewej, Zamknij po prawej i Zamknij wszystko. Pamiętaj, że jeśli klikniesz prawym przyciskiem myszy pierwszą lub ostatnią kartę, nie zobaczysz opcji Zamknij w lewo lub Zamknij w prawo.

28 października 2021 r.

• Podczas wyświetlania tabeli w Eksploratorze wykazu dostępne są dwie opcje upraszczania interakcji z tabelą:
• Kliknij Utwórz > Zapytanie, aby utworzyć zapytanie, które wybiera wszystkie kolumny i zwraca pierwsze 1000 wierszy.
• Kliknij przycisk Utwórz > Szybki pulpit nawigacyjny, aby otworzyć stronę konfiguracji, na której można wybrać interesujące kolumny i utworzyć pulpit nawigacyjny oraz zapytania wspomagające, które dostarczają podstawowych informacji z użyciem tych kolumn i prezentują parametry na poziomie pulpitu nawigacyjnego oraz inne możliwości.

19 października 2021 r.

• Nowe skróty klawiaturowe są teraz dostępne w edytorze z kartami:
• Otwórz nową kartę:
  • Windows: Cmd+Alt+T
  • Mac: Cmd+Option+T
• Zamknij bieżącą kartę
  • Windows: Cmd+Alt+W
  • Mac: Cmd+Option+W
• Okno dialogowe Otwieranie zapytania
  • Windows: Cmd+Alt+O
  • Mac: Cmd+Option+O

23 września 2021 r.

• Teraz możesz utworzyć nowy pulpit nawigacyjny, klonując istniejący pulpit, o ile masz uprawnienia MOŻE URUCHOMIĆ, MOŻE EDYTOWAĆ i MOŻE ZARZĄDZAĆ zarówno na pulpicie nawigacyjnym, jak i na wszystkich zapytaniach źródłowych. Zobacz Klonowanie starszego pulpitu nawigacyjnego.
• Teraz możesz użyć GROUP BY w wizualizacji z wieloma kolumnami osi Y. Zobacz wykres punktowy.
• Teraz można użyć {{ @@yPercent}} do formatowania etykiet danych na nieznormalizowanym skumulowanym wykresie słupkowym. Zobacz wykres słupkowy.
• Jeśli używasz uwierzytelniania SAML, a poświadczenie SAML wygaśnie w ciągu kilku minut, zostanie wyświetlony proaktywny monit o ponowne zalogowanie się przed wykonaniem zapytania lub odświeżenia pulpitu nawigacyjnego. Pomaga to zapobiec zakłóceniom z powodu poświadczeń wygasających podczas wykonywania zapytania.

20 września 2021 r.

• Teraz możesz przenieść własność pulpitów nawigacyjnych, zapytań i alertów przy użyciu interfejsu API REST uprawnień. Zobacz listy ACL zapytań.

16 września 2021 r.

• W wynikach zapytania wyniki BIGINT są teraz serializowane jako ciągi, gdy są większe niż 9007199254740991. Rozwiązano problem, w którym wyniki BIGINT mogły zostać obcięte w wynikach zapytania. Inne wyniki liczb całkowitych są nadal serializowane jako liczby. Formatowanie liczb na etykietach osi i etykietkach narzędzi nie ma zastosowania do BIGINT wyników, które są serializowane jako ciągi. Aby uzyskać więcej informacji na temat typów danych w usłudze Databricks SQL, zobacz BIGINT typu.

7 września 2021 r.

Usługa Databricks wprowadza zmiany, które następują w ciągu tygodnia. Twój obszar roboczy może nie być przygotowany do tych zmian aż do 7 września.

• Usługa Databricks SQL jest teraz dostępna w publicznej wersji zapoznawczej i jest włączona dla wszystkich użytkowników w nowych obszarach roboczych.

Notatka

Jeśli obszar roboczy został włączony dla usługi Databricks SQL w publicznej wersji zapoznawczej — czyli przed tygodniem od 7 września 2021 r. — użytkownicy zachowają przypisane uprawnienie przed tą datą, chyba że zmienisz go. Innymi słowy, jeśli użytkownik nie miał dostępu do usługi Databricks SQL w publicznej wersji zapoznawczej, nie będzie miał go teraz, chyba że administrator udzieli mu dostępu.

• Administratorzy mogą zarządzać tym, którym użytkownikom mają dostęp do Databricks SQL, przypisując uprawnienie dostępu Databricks SQL (databricks-sql-access w interfejsie API) użytkownikom lub grupom. Domyślnie nowi użytkownicy mają to uprawnienie.

Administratorzy mogą ograniczyć użytkownikowi lub grupie dostęp tylko do usługi Databricks SQL i uniemożliwić im dostęp do środowiska Data Science & Engineering lub Databricks Mosaic AI przez usunięcie uprawnień Workspace Access (workspace-access w interfejsie API) z użytkownika lub grupy. Domyślnie nowi użytkownicy mają to uprawnienie.

Ważny

Aby zalogować się i uzyskać dostęp do usługi Azure Databricks, użytkownik musi mieć uprawnienia dostępu SQL usługi Databricks lub dostępu do obszaru roboczego (lub oba).

• Mały klasyczny punkt końcowy SQL o nazwie Starter Endpoint jest wstępnie skonfigurowany we wszystkich obszarach roboczych, aby można było od razu rozpocząć tworzenie zapytań, dashboardów i wizualizacji. Aby obsłużyć bardziej złożone obciążenia, można łatwo zwiększyć jego rozmiar (aby zmniejszyć opóźnienie) lub liczbę bazowych klastrów (w celu obsługi większej liczby współbieżnych użytkowników). Aby zarządzać kosztami, początkowy punkt startowy jest skonfigurowany, aby się zakończyć po upływie 120 minut bezczynności.

2 września 2021 r.

• Użytkownicy z uprawnieniem CAN EDIT na pulpicie nawigacyjnym mogą teraz zarządzać harmonogramem odświeżania pulpitu nawigacyjnego i listą subskrypcji. Wcześniej wymagane było uprawnienie CAN MANAGE. Aby uzyskać więcej informacji, zobacz Automatyczne odświeżanie pulpitu nawigacyjnego.

• Domyślnie wizualizacje nie są już dynamicznie zmieniane na podstawie liczby zwracanych wyników, ale zachowują tę samą wysokość niezależnie od liczby wyników. Aby powrócić do poprzedniego zachowania i skonfigurować wizualizację do dynamicznego zmieniania rozmiaru, włącz dynamiczne zmienianie rozmiaru panelu w ustawieniach wizualizacji na pulpicie nawigacyjnym. Aby uzyskać więcej informacji, zobacz Opcje tabeli.
• Jeśli masz dostęp do więcej niż jednego obszaru roboczego na tym samym koncie, możesz przełączyć obszary robocze z poziomu usługi Databricks SQL. Kliknij pozycję w lewym dolnym rogu obszaru roboczego usługi Azure Databricks, a następnie wybierz obszar roboczy, aby się do niego przełączyć.

1 lipca 2021 r.

• Nowy Eksplorator wykazu umożliwia łatwe eksplorowanie uprawnień i zarządzanie nimi w bazach danych i tabelach. Użytkownicy mogą wyświetlać szczegóły schematu, podgląd przykładowych danych oraz wyświetlać szczegóły i właściwości tabeli. Administratorzy mogą wyświetlać i zmieniać właścicieli obiektów danych, a właściciele obiektów danych mogą udzielać i odwoływać uprawnienia. Aby uzyskać szczegółowe informacje, zobacz Co to jest Eksplorator wykazu?.
• Osie Y na wykresach poziomych zostały zaktualizowane w celu odzwierciedlenia takiej samej kolejności, jak w tabelach. Jeśli wcześniej wybrano kolejność odwrotną, możesz użyć przełącznika Odwróć kolejność na karcie osi Y, aby odwrócić nową kolejność.

23 czerwca 2021 r.

• Łatwo skonfiguruj punkty końcowe SQL za pomocą zasad dostępu usługi. Istnieje teraz kontrolka, która ułatwia skonfigurowanie jednostki usługi w globalnym ustawieniu punktów końcowych SQL. Patrz Konfigurowanie jednostki usługi.
• Widoki tymczasowe są teraz obsługiwane.

17 czerwca 2021 r.

• Photon, nowy wektoryzowany aparat wykonawczy usługi Databricks, jest teraz domyślnie włączony dla nowych punktów końcowych SQL (zarówno interfejs użytkownika, jak i interfejs API REST). Photon w sposób niezauważalny przyspiesza
  • Zapisuje do tabel Parquet i Delta.
  • Wiele zapytań SQL. Zobacz Ograniczenia.
• Łatwe zarządzanie użytkownikami i grupami za pomocą poleceń CREATE GROUP, DROP GROUP, ALTER GROUP, SHOW GROUPSi SHOW USERS. Aby uzyskać szczegółowe informacje, zobacz oświadczenia dotyczące bezpieczeństwa i wyświetlania oświadczenia.
• Edytor zapytań w przeglądarce schematów jest bardziej responsywny i szybszy na schematach z ponad 100 tabelami. W takich schematach przeglądarka schematów nie ładuje automatycznie wszystkich kolumn; lista tabel nadal jest wyświetlana jak zwykle, ale kolumny są ładowane tylko po kliknięciu tabeli. Ta zmiana ma wpływ na autouzupełnianie zapytań w edytorze zapytań, ponieważ zależy to od tych informacji w celu wyświetlenia sugestii. Dopóki nie rozszerzysz tabeli i załadujesz jej kolumny, te sugestie nie będą dostępne.

3 czerwca 2021 r.

• Administratorzy nowo włączonych obszarów roboczych usługi Azure Databricks otrzymują teraz uprawnienia sql usługi Databricks domyślnie i nie muszą już udzielać sobie uprawnień dostępu sql usługi Databricks przy użyciu konsoli administracyjnej.
• Photon jest teraz dostępna w publicznej wersji zapoznawczej i jest domyślnie włączona dla nowych punktów końcowych SQL.
• Równoważenie obciążenia wielu klastrów jest teraz dostępne w publicznej wersji zapoznawczej.
• Teraz możesz włączyć współpracę na dashboardach i zapytaniach z innymi członkami organizacji, używając uprawnienia "CAN EDIT". Zobacz listy kontroli dostępu.

26 maja 2021 r.

• Nazwa usługi SQL Analytics została zmieniona na Databricks SQL. Ta zmiana ma następujący wpływ na klienta:

  • Odwołania w internetowym interfejsie użytkownika zostały zaktualizowane.

  • Zmieniono nazwę uprawnienia do udzielenia dostępu do usługi Databricks SQL:

    • interfejsu użytkownika: dostęp SQL usługi Databricks (wcześniej dostęp do usługi SQL Analytics)
    • API SCIM: databricks-sql-access (wcześniej sql-analytics-access)

    Użytkownicy, grupy i jednostki usługi z poprzednim uprawnieniem zostały zmigrowane do nowego uprawnienia.

  • Tagi zdarzeń dziennika inspekcji związane z usługą Databricks SQL uległy zmianie:

    • Prefiks zdarzeń SQL usługi Databricks jest teraz databrickssql.
    • changeSqlAnalyticsAcl jest teraz changeDatabricksSqlAcl.

• Aktualizacje pulpitu nawigacyjnego

  • Nazwa pliku eksportu pulpitu nawigacyjnego została zaktualizowana tak, aby była nazwą pulpitu nawigacyjnego i sygnaturą czasową, a nie identyfikatorem UUID.
  • Limit rekordów eksportu został podniesiony z 22k do 64k.

13 maja 2021 r.

• Usługa SQL usługi Databricks nie próbuje już odgadnąć typów kolumn. Wcześniej kolumna z formatem xxxx-yy-dd była automatycznie traktowana jako data, nawet jeśli był to kod identyfikacyjny. Teraz kolumna nie jest już automatycznie traktowana jako data. Należy określić to w zapytaniu, jeśli jest taka potrzeba. Ta zmiana może spowodować, że niektóre wizualizacje, które opierały się na poprzednim zachowaniu, przestaną działać. W tej wersji można zmienić ikonę ustawień użytkownika >Ustawienia>zgodność z poprzednimi wersjami, aby powrócić do poprzedniego zachowania. W przyszłej wersji usuniemy tę możliwość.

• Edytor zapytań ma teraz wskaźnik postępu zapytania. Zmiany stanu są teraz widoczne na stale aktualizowanym pasku postępu.

  pasek postępu

Rozwiązano problemy

• Edytor SQL. Edytor SQL będzie teraz utrwalać zaznaczony tekst i pozycję przewijania podczas przełączania się między kartami zapytań.
• Edytor SQL. Jeśli klikniesz "Uruchom" w zapytaniu w edytorze SQL, następnie przejdziesz na inną stronę, a potem wrócisz, gdy zapytanie jest nadal wykonywane, edytor wyświetli aktualny stan zapytania. Jeśli zapytanie zostanie ukończone na innej stronie, wyniki zapytania będą dostępne po powrocie do strony edytora SQL.
• Teraz możesz użyć programu MySQL 8.0 jako zewnętrznego magazynu metadanych.
• DESCRIBE DETAIL polecenia w tabelach delty nie kończą się już niepowodzeniem z java.lang.ClassCastException: java.sql.Timestamp cannot be cast to java.time.Instant.
• Odczytywanie plików Parquet posiadających znaczniki czasu INT96 nie kończy się już niepowodzeniem.
• Jeśli użytkownik ma uprawnienie CAN RUN do zapytania i je uruchamia, a zapytanie zostało utworzone przez innego użytkownika, historia zapytań wyświetla osobę uruchamiającą zapytanie jako użytkownika.
• Wartości null są teraz ignorowane podczas renderowania wykresu, co zwiększa użyteczność wykresów. Na przykład, wcześniej słupki na wykresie słupkowym wyglądałyby na bardzo małe, gdy obecne były wartości null. Teraz osie są ustawiane tylko na podstawie wartości innych niż null.