Září 2023
Tyto funkce a vylepšení platformy Azure Databricks byly vydány v září 2023.
Poznámka
Verze jsou připraveny. Váš pracovní prostor Azure Databricks se nemusí aktualizovat až do týdne nebo více po počátečním datu vydání.
29. září 2023
Lakehouse Federation je teď k dispozici v clusterech s jedním uživatelem pomocí Databricks Runtime 13.1 a novějších. Dotazy na federované katalogy může spouštět pouze vlastník připojení. Podívejte se , co je Federace Lakehouse?.
29. září 2023
Teď můžete uživatelům udělit oprávnění k vytvoření přihlašovacích údajů úložiště v metastoru katalogu Unity pomocí nového oprávnění CREATE STORAGE CREDENTIAL
. Viz CREATE STORAGE CREDENTIAL.
28. září 2023
Databricks Runtime 14.1 a Databricks Runtime 14.1 ML jsou nyní k dispozici jako beta verze.
Viz Databricks Runtime 14.1 a Databricks Runtime 14.1 pro Machine Learning.
28. září 2023
Model obsluhující v Azure Databricks podporuje nasazení modelů PyTorch a TensorFlow pomocí výpočetních prostředků GPU. Tato funkce je ve verzi Public Preview ve vybraných oblastech a vztahuje se také na nasazení modelů s mlflow.pyfunc
, mlflow.pytorch
, mlflow.tensorflow
a mlflow.transformers
konfiguracemi. Podívejte se na typy úloh GPU.
Tato verze Preview také zahrnuje podporu nasazení GPU optimalizovaného pro obsluhu velkých jazykových modelů. Viz obsluha optimalizovaného rozsáhlého jazykového modelu (LLM).
27. září 2023 – 2. října 2023
Pokud chcete zabránit vynechání spuštění úlohy Azure Databricks z důvodu limitů souběžnosti, můžete u úlohy povolit zařazování do fronty. Pokud je povoleno zařazení do fronty a je dosažen limit souběžnosti, úloha se zařadí do fronty, dokud není k dispozici kapacita pro spuštění úlohy. Viz Povolení zařadování do fronty spuštění úloh.
27. září 2023
Zprostředkovatel Terraformu databricks verze 1.27.0 přidává owner
a přidáváforce_destroy
, databricks_metastore_data_access
obsahuje několik dalších vylepšení a oprav chyb a další. Podrobnosti najdete v protokolu změn verze 1.27.0.
27. září 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) bylo aktualizováno na verzi 0.206.0. Tato verze umožňuje přepsání cílů pro clustery kanálů v sadách prostředků Databricks, zlepšuje prostředí inicializace šablony sady a další. Podrobnosti najdete v protokolu změn verze 0.206.0.
27. září 2023
Sada Databricks SDK pro Go verze 0.21.0 zavádí více než desítku zásadních změn rozhraní API, přidává více než desítku rozhraní API a přidává desítky polí. Podrobnosti najdete v protokolu změn verze 0.21.0.
26. září 2023
Povolit odvozovací tabulky v modelu, které obsluhují koncové body, aby zachytily příchozí požadavky a odchozí odpovědi na tyto koncové body a protokolovaly je jako tabulku Unity Catalog Delta. Data v této tabulce pak můžete použít k monitorování, ladění a vylepšování modelů ML. Viz tabulky odvozování pro monitorování a ladění modelů.
Pokud se chcete zaregistrovat ve verzi Public Preview, obraťte se na svůj tým účtů Azure Databricks.
23. září 2023
Vydali jsme verzi 2.7.5 ovladače ODBC Databricks (stáhnout). Tato verze přidává následující nové funkce a vylepšení:
- Vylepšení ověřování klientů OAuth 2.0 a podpora zjišťování koncových bodů OIDC
- Šifrování na straně serveru s klíči poskytnutými zákazníkem
- Funkce Timedate
- Vylepšené zasílání chybových zpráv pro cloudové načítání
- Aktualizace zabezpečení.
Tato verze také řeší následující regresi ve verzi 2.7.3:
- Funkce
SQLForeignKeys
vrátí prázdný výsledek, pokud volající předáNULL
hodnotu pro katalog primární tabulky nebo cizí tabulky.
Verze 2.7.5 nyní vrátí všechny primární klíče nebo cizí klíče přidružené ke související tabulce, pokud je katalog druhé tabulky nastaven NULL
.
21. září 2023
Rozšíření Databricks pro Visual Studio Code verze 1.1.3 přidává několik dílčích oprav. Podrobnosti najdete v protokolu změn verze 1.1.3.
21. září 2023
Role instančních objektů a nastavení úlohy pro spouštění úloh pomocí identity instančního objektu je teď obecně dostupná.
Viz Role pro správu instančních objektů a konfigurace identity pro spuštění úloh.
21. září 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) bylo aktualizováno na verzi 0.205.2. Tato verze obsahuje několik dílčích aktualizací. Podrobnosti najdete v protokolu změn verze 0.205.2.
20. září 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) bylo aktualizováno na verzi 0.205.1. Tato verze umožňuje přepsání cílů pro úlohy v sadách prostředků Databricks a další. Podrobnosti najdete v protokolu změn verze 0.205.1.
20. září 2023
Sada Databricks SDK pro Go verze 0.20.0 přidává více než desítky rozhraní API, přidává půl desítek polí, mění několik polí a metod a odebere několik rozhraní API. Podrobnosti najdete v protokolu změn verze 0.20.0.
20. září 2023
Sada Databricks SDK pro Python verze 0.9.0 mění několik metod a polí, přidává přibližně 10 polí, přidává přibližně 20 tříd dat a zavádí další změny a odebrání. Podrobnosti najdete v protokolu změn verze 0.9.0.
20. září 2023
Sada Databricks SDK pro Python verze 0.7.1 obsahuje dílčí opravu ke zlepšení výkonu stahování souborů. Podrobnosti najdete v protokolu změn verze 0.7.1.
20. září 2023
poskytovatel Databricks Terraform verze 1.26.0 přidává podporu inicializačních skriptů ze svazků Unity katalogu, obsahuje několik dalších vylepšení a oprav chyb. Podrobnosti najdete v protokolu změn verze 1.26.0.
20. září 2023
Databricks Connect pro Databricks Runtime 14.0 podporuje úplné strukturované streamování (včetně foreachBatch
) a dlouhotrvající dotazy, které se po přerušení znovu připojují k dotazu.
20. září 2023
Řídicí panely Lakeview umožňují sdílet vizualizace a datové sady pomocí zjednodušeného a sjednoceného modelu zásad správného řízení dat. Viz řídicí panely.
19. září 2023
Databricks Connect pro Databricks Runtime 13.3 LTS teď podporuje Scala ve verzi Public Preview, včetně datových rámců, delta, strukturovaného streamování a dalších.
V Pythonu se teď podporuje zrušení dotazů a DatabricksSession
třída se teď dá použít v poznámkových blocích a úlohách Azure Databricks.
19. září 2023
Model obsluhující v Azure Databricks podporuje nasazení modelů PyTorch a TensorFlow pomocí výpočetních prostředků GPU. Tato funkce je ve verzi [Public Preview] ve vybraných oblastech a vztahuje se také na nasazení modelů s označením mlflow.pyfunc
, mlflow.pytorch
, mlflow.tensorflow
a mlflow.transformers
pomocí GPU. Podívejte se na typy úloh GPU.
14. září 2023
Funkce strojového učení se teď dají vypočítat na vyžádání v době odvozu. Všechna výpočetní logika, modely a data funkcí se řídí katalogem Unity. To umožňuje modelům výpočetní funkce pomocí vstupů, které jsou k dispozici pouze v době odvozování, jako je aktuální umístění uživatele. Další informace najdete v tématu Výpočetní funkce na vyžádání pomocí uživatelem definovaných funkcí Pythonu.
14. září 2023
Databricks Runtime 14.0 a Databricks Runtime 14.0 ML jsou nyní obecně dostupné.
Viz Databricks Runtime 14.0 (EoS) a Databricks Runtime 14.0 pro Machine Learning (EoS).
14. září 2023
Databricks už neodesílá e-mailová oznámení, když se uživatelé přidají do účtu Azure Databricks. Uživatelé budou i nadále dostávat e-mailová oznámení, když jim udělíte přístup k pracovnímu prostoru.
13. září 2023
Poskytovatel Databricks Terraform verze 1.25.1 byl vydán s drobnými vylepšeními a opravami chyb. Podrobnosti najdete v protokolu změn verze 1.25.1.
13. září 2023
Sada Databricks SDK pro Go verze 0.19.2 obsahuje jednu dílčí opravu. Podrobnosti najdete v protokolu změn verze 0.19.2.
13. září 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) bylo aktualizováno na verzi 0.205.0. Toto je první verze rozhraní příkazového řádku Databricks, která podporuje sady prostředků Databricks ve verzi Public Preview. Podrobnosti najdete v protokolu změn verze 0.205.0.
13. září 2023
Umístění /Workspace
je teď rezervované. Adresář pojmenovaný /Workspace
vzhledem ke kořenové cestě v Azure Databricks už nemůžete definovat.
12. září 2023
Sady prostředků Databricks, které jsou teď ve verzi Public Preview, umožňují vyjádřit kompletní data, analýzy a projekty ML jako kolekci zdrojových souborů. To usnadňuje použití osvědčených postupů přípravy dat, jako je správa zdrojového kódu, kontrola kódu, testování a CI/CD.
12. září 2023
Poskytovatel Databricks Terraform verze 1.25.0 zahrnuje přidání IS_OWNER
oprávnění pro datové sklady SQL Databricks, dílčí opravy, aktualizace dokumentace a další. Podrobnosti najdete v protokolu změn verze 1.25.0.
12. září 2023
Rozšíření Databricks pro Visual Studio Code verze 1.1.2 přidává experimentální podporu %run
# MAGIC
pro poznámkové bloky Azure Databricks, řeší problémy s cestami s několika místními instalacemi Rozhraní příkazového řádku Databricks a další. Podrobnosti najdete v protokolu změn verze 1.1.2.
12. září 2023
K připojení pracovního prostoru Azure Databricks ke Snowplowu teď můžete použít Partner Connect. Další informace najdete v tématu Připojení ke Snowplowu.
11. září 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) bylo aktualizováno na verzi 0.204.1. Podrobnosti najdete v protokolu změn verze 0.204.1.
11. září 2023
Teď můžete u tabulek použít filtry řádků a masky sloupců, abyste zabránili přístupu k citlivým datům určitými uživateli. Tyto filtry a masky se implementují jako uživatelem definované funkce SQL (UDF). Viz Filtrování citlivých dat tabulky pomocí filtrů řádků a masek sloupců.
8. září 2023
Systémové tabulky nyní obsahují schéma marketplace
, které uchovává data poskytovatele Marketplace. Dotazem na tabulku marketplace.listing_access_events
můžete načíst informace o spotřebitelích pro akce provedené na vašich výpisech. Další informace najdete v tématu , referenční příručka k systémovým tabulkám Marketplace,.
8. září 2023
Systémové tabulky teď obsahuje cenovou tabulku (system.billing.list_prices
), kde můžete monitorovat náklady na SKU v čase. Tyto protokoly vám můžou pomoct s analýzou nákladů a monitorováním změn cen. Viz referenční tabulku systému cen.
7. září 2023
Sada Databricks SDK pro Go verze 0.19.1 pokračuje v několika dílčích aktualizacích a opravách. Podrobnosti najdete v protokolu změn verze 0.19.1.
7. září 2023
Vydali jsme verzi 2.7.3 ovladače ODBC Databricks (stáhnout). Tato verze obsahuje následující funkce a opravy:
- Opravy ohrožení zabezpečení upgradem závislostí třetích stran
-
SQL_ATTR_MAX_ROWS
podpora, která umožňuje klientovi omezit počet řádků, které se mají načíst v dotazu, aby se urychlilo rychlé načítání (například Preview). - Aktualizace podpory pro MacOS Ovladač teď podporuje Apple Silicon/M1.
- Podpora ověřování založené na prohlížeči OAuth2 pro usnadnění jednotného přihlašování
Důležité
Pokud používáte rozhraní API primárního a cizího klíče, vrátí funkce SQLForeignKeys
prázdný výsledek, pokud volající předá NULL
hodnotu pro katalog primární tabulky nebo cizí tabulky. Tento problém je známý vývojářům.
6. září 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) bylo aktualizováno na verzi 0.204.0. Tato verze zahrnuje seskupení příkazů souvisejících s oprávněními, přidání a změny několika příkazů a další. Podrobnosti najdete v protokolu změn verze 0.204.0.
6. září 2023
Průzkumník dat se přejmenuje na Průzkumníka katalogu, aby rozpoznal fakt, že ho můžete použít k práci se všemi zabezpečitelnými objekty v katalogu Unity, nejen s datovými objekty. Podívejte se na Co je to Průzkumník katalogu?.
4. září 2023
Sada Databricks SDK pro Go verze 0.19.0 přejmenuje rozhraní API pro oprávnění, přidává 8 rozhraní API, přidává 5 polí, mění a odebírá několik polí a mění několik metod. Podrobnosti najdete v protokolu změn verze 0.19.0.
4. září 2023
Sada Databricks SDK pro Python verze 0.8.0 přejmenuje rozhraní API pro oprávnění, přidává půl tuctu polí, přidává půl tuctu tříd dat a zavádí několik změn a odebrání. Podrobnosti najdete v protokolu změn verze 0.8.0.
1. září 2023
Teď můžete delegovat oprávnění pro správu položek v seznamu povolených položek pro Katalog Unity. Viz Knihovny allowlist a inicializační skripty pro sdílené výpočetní prostředky.
1. září 2023
Integrace aplikací GitHubu v Úložištích je obecná dostupnost. Tato funkce umožňuje jednodušší správu přihlašovacích údajů Gitu při integraci s GitHubem v úložištích.
Důležité
Aplikace GitHubu se na GitHub Enterprise Serveru nepodporují.