2023. szeptember
Ezek a funkciók és az Azure Databricks platform fejlesztései 2023 szeptemberében jelentek meg.
Feljegyzés
A kiadások szakaszosak. Előfordulhat, hogy az Azure Databricks-munkaterület a kezdeti kiadás dátuma után egy vagy több hétig nem frissül.
A Lakehouse Federation egyfelhasználós fürtökön érhető el
2023. szeptember 29.
A Lakehouse Federation mostantól elérhető egyfelhasználós fürtökön a Databricks Runtime 13.1-et és újabb verziót használó fürtökön. Csak a kapcsolat tulajdonosa futtathat lekérdezéseket összevont katalógusokon. Lásd : Mi az a Lakehouse Federation?.
Tároló hitelesítő adatainak létrehozásának delegálása a Unity Katalógusban
2023. szeptember 29.
Mostantól engedélyt adhat a felhasználóknak, hogy létrehozzák a tárolási hitelesítő adatokat egy Unity Catalog-metaadattárban az új CREATE STORAGE CREDENTIAL
jogosultság használatával. Lásd: CREATE STORAGE CREDENTIAL.
Databricks Runtime 14.1 (bétaverzió)
2023. szeptember 28.
A Databricks Runtime 14.1 és a Databricks Runtime 14.1 ML már bétaverzióként érhető el.
Lásd: Databricks Runtime 14.1 és Databricks Runtime 14.1 for Machine Learning.
Nyilvános előzetes verziójú, LLM-ekhez optimalizált GPU-modell
2023. szeptember 28.
Az Azure Databricksben szolgáló modell támogatja a PyTorch- és TensorFlow-modellek GPU-számítási erőforrások használatával történő üzembe helyezését. Ez a funkció bizonyos régiókban nyilvános előzetes verzióban érhető el, és a , , mlflow.tensorflow
mlflow.pytorch
és mlflow.transformers
ízekkel naplózott mlflow.pyfunc
modellek GPU-telepítésére is vonatkozik. Lásd a GPU számítási feladatainak típusait.
Ez az előzetes verzió a nagy nyelvi modellek kiszolgálására optimalizált GPU-telepítés támogatását is tartalmazza. Lásd: Optimalizált nagy nyelvi modell (LLM) szolgáltatás
Feladatfuttatások kihagyásának megakadályozása az egyidejűségi korlátok elérésekor
2023. szeptember 27. – 2023. október 2.
Ha meg szeretné akadályozni, hogy egy Azure Databricks-feladat futtatása egyidejűségi korlátok miatt ki legyen hagyva, engedélyezheti az üzenetsor-kezelést a feladaton. Ha az üzenetsor-készítés engedélyezve van, az egyidejűségi korlát elérése esetén a feladat egy üzenetsorba kerül, amíg a feladat futtatásához kapacitás nem áll rendelkezésre. Lásd: Feladatfuttatások várólistára helyezésének engedélyezése.
Az 1.27.0-s verzióra frissített Databricks Terraform-szolgáltató
2023. szeptember 27.
A Databricks Terraform szolgáltató 1.27.0-s owner
verziója számos további fejlesztést és force_destroy
databricks_metastore_data_access
hibajavítást tartalmaz. További részletekért tekintse meg az 1.27.0-s verzióra vonatkozó változásnaplót.
A Databricks CLI a 0.206.0-s verzióra frissítve (nyilvános előzetes verzió)
2023. szeptember 27.
A Databricks parancssori felülete (Databricks CLI) a 0.206.0-s verzióra lett frissítve. Ez a kiadás lehetővé teszi a databricks-eszközcsomagokban lévő folyamatfürtök cél felülbírálását, javítja a csomagsablon inicializálási élményét és egyebeket. További részletekért tekintse meg a 0.206.0-s verzióra vonatkozó változásnaplót.
A Databricks SDK for Go a 0.21.0-s verzióra (bétaverzió) frissítve
2023. szeptember 27.
A Databricks SDK for Go 0.21.0-s verziója több mint egy tucat kompatibilitástörő API-módosítást vezet be, több mint egy tucat API-t ad hozzá, és egy tucat mezőt ad hozzá. További részletekért tekintse meg a 0.21.0-s verzióra vonatkozó változásnaplót.
A végpontokat kiszolgáló modellhez tartozó következtetési táblák nyilvános előzetes verziójúak
2023. szeptember 26.
A végpontokat kiszolgáló modell következtetési tábláinak engedélyezése a végpontokra érkező kérések és kimenő válaszok rögzítéséhez és Unity Catalog Delta-táblaként való naplózásához. A táblázatban szereplő adatokkal monitorozhatja, hibakeresést végezhet és fejlesztheti az ML-modelleket. A modellek monitorozását és hibakeresését az Inference táblákban tekinti meg.
A nyilvános előzetes verzióban való regisztrációhoz lépjen kapcsolatba az Azure Databricks-fiók csapatával.
Databricks ODBC-illesztő 2.7.5
2023. szeptember 23.
Megjelent a Databricks ODBC-illesztőprogram 2.7.5-ös verziója (letöltés). Ez a kiadás a következő új funkciókat és fejlesztéseket adja hozzá:
- OAuth 2.0-ügyfélhitelesítés fejlesztése és OIDC-végpontfelderítés támogatása.
- Kiszolgálóoldali titkosítás az ügyfél által megadott kulcsokkal.
- Idődátum függvény.
- Továbbfejlesztett hibaüzenetek a Cloud Fetch szolgáltatásban.
- Biztonsági frissítések.
Ez a kiadás a következő regressziót is feloldja a 2.7.3-ban:
- A
SQLForeignKeys
függvény üres eredményt ad vissza, ha a hívó átadjaNULL
az elsődleges tábla vagy az idegen tábla katalógusának értékét.
A 2.7.5-ös kiadás most visszaadja a kapcsolódó táblához társított összes elsődleges kulcsot vagy idegen kulcsot, ha a másik tábla katalógusa be van állítva NULL
.
Az 1.1.3-ra frissített Visual Studio Code Databricks-bővítménye
2023. szeptember 21.
A Visual Studio Code 1.1.3-ás verziójához készült Databricks-bővítmény néhány kisebb javítást tartalmaz. További részletekért tekintse meg az 1.1.3-es verzió változásnaplóit.
A feladatok szolgáltatásnévként való futtatása ga
2023. szeptember 21.
A szolgáltatásnevek szerepkörei és a feladatnak a szolgáltatásnév identitásával való futtatására vonatkozó beállítása mostantól GA.
Lásd: Szerepkörök a szolgáltatásnevek kezeléséhez és az identitás konfigurálása feladatfuttatásokhoz.
A Databricks CLI a 0.205.2-es verzióra frissítve (nyilvános előzetes verzió)
2023. szeptember 21.
A Databricks parancssori felülete (Databricks CLI) a 0.205.2-es verzióra lett frissítve. Ez a kiadás néhány kisebb frissítést tartalmaz. További részletekért tekintse meg a 0.205.2-es verzióra vonatkozó változásnaplót.
A Databricks CLI a 0.205.1-es verzióra frissítve (nyilvános előzetes verzió)
2023. szeptember 20.
A Databricks parancssori felülete (Databricks CLI) a 0.205.1-es verzióra lett frissítve. Ez a kiadás lehetővé teszi a databricks-eszközcsomagokban és egyebekben a feladatfeladatok cél felülbírálását. További részletekért tekintse meg a 0.205.1-es verzióra vonatkozó változásnaplót.
A Databricks SDK for Go a 0.20.0-s verzióra frissült (bétaverzió)
2023. szeptember 20.
A Databricks SDK for Go 0.20.0-s verziója több mint egy tucat API-t ad hozzá, fél tucat mezőt ad hozzá, módosít néhány mezőt és metódust, és eltávolít néhány API-t. További részletekért tekintse meg a 0.20.0-s verzióra vonatkozó változásnaplót.
A Pythonhoz készült Databricks SDK a 0.9.0-s verzióra frissítve (bétaverzió)
2023. szeptember 20.
A Python 0.9.0-s verziójához készült Databricks SDK módosít néhány metódust és mezőt, körülbelül 10 mezőt ad hozzá, körülbelül 20 adatosztályt ad hozzá, és további módosításokat és eltávolításokat vezet be. További részletekért tekintse meg a 0.9.0-s verzióra vonatkozó változásnaplót.
A Pythonhoz készült Databricks SDK a 0.7.1-es verzióra frissítve (bétaverzió)
2023. szeptember 20.
A Databricks SDK for Python 0.7.1-es verziója egy kisebb javítást tartalmaz a fájlletöltési teljesítmény javítása érdekében. További részletekért tekintse meg a 0.7.1-es verzióra vonatkozó változásnaplót.
Az 1.26.0-s verzióra frissített Databricks Terraform-szolgáltató
2023. szeptember 20.
A Databricks Terraform szolgáltató 1.26.0-s verziója támogatja a Unity Catalog-kötetekből származó Init-szkripteket, számos további fejlesztést és hibajavítást tartalmaz. További részletekért tekintse meg az 1.26.0-s verzióra vonatkozó változásnaplót.
Databricks Connect for Databricks Runtime 14.0
2023. szeptember 20.
A Databricks Connect for Databricks Runtime 14.0 támogatja a teljes strukturált streamelést (beleértve foreachBatch
) és a hosszú ideig futó lekérdezéseket, amelyek megszakítás után újracsatlakoznak a lekérdezéshez.
Lakeview-irányítópultok nyilvános előzetes verzióban
2023. szeptember 20.
A Lakeview-irányítópultok lehetővé teszik vizualizációk és adathalmazok megosztását egy egyszerűsített és egységes adatszabályozási modell használatával. Lásd: Irányítópultok.
A Databricks Connect V2 nyilvános előzetes verzió a Scalához
2023. szeptember 19.
A Databricks Connect for Databricks Runtime 13.3 LTS mostantól támogatja a Scalát nyilvános előzetes verzióban, beleértve a DataFrame-eket, a Delta-t, a strukturált streamelést stb.
Python esetén a lekérdezések törlése mostantól támogatott, és az DatabricksSession
osztály mostantól használható az Azure Databricks-jegyzetfüzetekben és -feladatokban.
GPU-modell nyilvános előzetes verzióban való kiszolgálása
2023. szeptember 19.
Az Azure Databricksben szolgáló modell támogatja a PyTorch- és TensorFlow-modellek GPU-számítási erőforrások használatával történő üzembe helyezését. Ez a funkció a [Nyilvános előzetes verzió] régióiban érhető el, és a , , mlflow.pytorch
mlflow.tensorflow
és mlflow.transformers
ízekkel naplózott mlflow.pyfunc
modellek GPU-telepítésére is vonatkozik. Lásd a GPU számítási feladatainak típusait.
Igény szerinti funkciószámítás már elérhető a Unity Katalógusban (nyilvános előzetes verzió)
2023. szeptember 14.
A gépi tanulási funkciók mostantól igény szerint, következtetési időpontban kiszámíthatók. A funkciószámítási logikát, modelleket és adatokat a Unity Catalog szabályozza. Ez lehetővé teszi, hogy a modellek olyan bemeneteket használva számítsa ki a funkciókat, amelyek csak következtetési időpontban érhetők el, például a felhasználó aktuális tartózkodási helye. További információ: Igény szerinti számítási funkciók a Python által definiált függvények használatával.
A Databricks Runtime 14.0 ga
2023. szeptember 14.
A Databricks Runtime 14.0 és a Databricks Runtime 14.0 ML már általánosan elérhető.
Lásd: Databricks Runtime 14.0 (EoS) és Databricks Runtime 14.0 for Machine Learning (EoS).
Fiók e-mail-értesítései frissítése
2023. szeptember 14.
A Databricks többé nem küld e-mail-értesítéseket, ha a felhasználókat hozzáadják egy Azure Databricks-fiókhoz. A felhasználók továbbra is e-mailes értesítéseket kapnak, ha hozzáférést kapnak egy munkaterülethez.
Az 1.25.1-es verzióra frissített Databricks Terraform-szolgáltató
2023. szeptember 13.
A Databricks Terraform szolgáltató 1.25.1-es verziója kisebb fejlesztésekkel és hibajavításokkal jelent meg. További részletekért tekintse meg az 1.25.1-es verzióra vonatkozó változásnaplót.
A Databricks SDK for Go a 0.19.2-es verzióra frissült (bétaverzió)
2023. szeptember 13.
A Databricks SDK for Go 0.19.2-es verziója egy kisebb javítást tartalmaz. További részletekért tekintse meg a 0.19.2-es verzióra vonatkozó változásnaplót.
A Databricks CLI a 0.205.0-s verzióra frissítve (nyilvános előzetes verzió)
2023. szeptember 13.
A Databricks parancssori felülete (Databricks CLI) a 0.205.0-s verzióra lett frissítve. Ez a Databricks CLI első kiadása, amely támogatja a Databricks-eszközcsomagokat a nyilvános előzetes verzióban. További részletekért tekintse meg a 0.205.0-s verzióra vonatkozó változásnaplót.
Fenntartott hely a következőhöz: /Workspace
2023. szeptember 13.
A hely /Workspace
most már foglalt. Az Azure Databricks gyökérútvonalához viszonyítva már nem definiálhat címtárat /Workspace
.
Databricks-eszközcsomagok (nyilvános előzetes verzió)
2023. szeptember 12.
A Most nyilvános előzetes verzióban elérhető Databricks Asset Bundles lehetővé teszi, hogy a teljes körű adatok, elemzések és ml-projektek forrásfájlok gyűjteményeként legyenek kifejezve. Ez egyszerűbbé teszi az olyan adatmérnöki ajánlott eljárások alkalmazását, mint a forráskezelés, a kódvizsgálat, a tesztelés és a CI/CD.
Az 1.25.0-s verzióra frissített Databricks Terraform-szolgáltató
2023. szeptember 12.
A Databricks Terraform szolgáltató 1.25.0-s verziója magában foglalja a Databricks SQL Warehouse-hoz szükséges engedélyek hozzáadását IS_OWNER
, a kisebb javításokat, a dokumentáció frissítéseit és egyebeket. További részletekért tekintse meg az 1.25.0-s verzióra vonatkozó változásnaplót.
A Visual Studio Code Databricks-bővítménye az 1.1.2-es verzióra frissítve
2023. szeptember 12.
A Visual Studio Code 1.1.2-es verziójához készült Databricks-bővítmény kísérleti támogatást nyújt az %run
Azure Databricks-jegyzetfüzetekhez és # MAGIC
azokban, és kijavítja a több helyi Databricks CLI-telepítés elérési útvonalával kapcsolatos problémákat. További részletekért tekintse meg az 1.1.2-es verzióra vonatkozó változásnaplót.
A Partner Connect támogatja a Snowplow-t
2023. szeptember 12.
Mostantól a Partner Connect használatával csatlakoztathatja az Azure Databricks-munkaterületet Snowplow-hoz. További információ: Csatlakozás Snowplow-hoz.
A Databricks CLI a 0.204.1-es verzióra frissítve (nyilvános előzetes verzió)
2023. szeptember 11.
A Databricks parancssori felülete (Databricks CLI) a 0.204.1-es verzióra lett frissítve. További információt a 0.204.1-es verzió változásnaplója tartalmaz.
Bizalmas adatok szűrése sorszűrőkkel és oszlopmaszkokkal (nyilvános előzetes verzió)
2023. szeptember 11.
Mostantól sorszűrőket és oszlopmaszkokat alkalmazhat táblákra, hogy bizonyos felhasználók ne férjenek hozzá a bizalmas adatokhoz. Ezek a szűrők és maszkok sql-felhasználó által definiált függvényekként (UDF-ek) vannak implementálva. Lásd: Bizalmas táblaadatok szűrése sorszűrők és oszlopmaszkok használatával.
A rendszertáblák mostantól tartalmazzák a Marketplace-sémát (nyilvános előzetes verzió)
2023. szeptember 8.
A rendszertáblák mostantól tartalmaznak egy sémát marketplace
, amely a Marketplace-szolgáltató adatait tárolja. Lekérdezheti a táblát, marketplace.listing_access_events
hogy lekérje a listaelemeken végrehajtott műveletek fogyasztói adatait. További információ: Marketplace rendszertáblák referenciája.
A díjszabási rendszer táblázata már elérhető (nyilvános előzetes verzió)
2023. szeptember 8.
A rendszertáblák mostantól tartalmazzák a tarifatáblát (system.billing.list_prices
), ahol nyomon követheti a termékváltozatok költségeit az idő függvényében. Ezek a naplók segíthetnek a költségelemzés végrehajtásában és a díjszabás változásainak monitorozásában. Lásd: Díjszabási rendszer táblareferenciája.
A Databricks SDK for Go a 0.19.1-es verzióra frissült (bétaverzió)
2023. szeptember 7.
A Databricks SDK for Go 0.19.1-es verziója továbbra is tartalmaz néhány kisebb frissítést és javítást. További részletekért tekintse meg a 0.19.1-es verzióra vonatkozó változásnaplót.
Databricks ODBC-illesztő 2.7.3
2023. szeptember 7.
Megjelent a Databricks ODBC-illesztőprogram 2.7.3-s verziója (letöltés). Ez a kiadás a következő funkciókat és javításokat tartalmazza:
- A biztonsági rések javítása külső féltől származó függőségek frissítésével.
SQL_ATTR_MAX_ROWS
támogatás, amely lehetővé teszi az ügyfél számára, hogy korlátozza a lekérdezésben beolvasandó sorok számát a gyors betöltéshez (például előzetes verzió).- Frissített MacOS-támogatás. Az illesztőprogram mostantól támogatja az Apple Silicon/M1-et.
- Az OAuth2 böngészőalapú hitelesítés támogatása az egyszeri bejelentkezés (SSO) megkönnyítése érdekében.
Fontos
Ha elsődleges kulcsot és idegenkulcs-API-kat használ, a SQLForeignKeys
függvény üres eredményt ad vissza, ha a hívó átadja NULL
az elsődleges tábla vagy az idegen tábla katalógusának értékét. Ez a probléma ismert a fejlesztők számára.
A Databricks CLI a 0.204.0-s verzióra frissítve (nyilvános előzetes verzió)
2023. szeptember 6.
A Databricks parancssori felülete (Databricks CLI) a 0.204.0-s verzióra lett frissítve. Ez a kiadás magában foglalja az engedélyekkel kapcsolatos parancsok csoportosítását, több parancs hozzáadását és módosítását stb. További részletekért tekintse meg a 0.204.0-s verzióra vonatkozó változásnaplót.
Az Adatkezelő mostantól katalóguskezelő
2023. szeptember 6.
Az Adatkezelőt a Katalóguskezelőre nevezték át, hogy felismerje azt a tényt, hogy a Unity Catalogban az összes biztonságos objektummal dolgozhat, nem csak adatobjektumokkal. Lásd: Mi az a Katalóguskezelő?.
A Databricks SDK for Go a 0.19.0-s verzióra frissült (bétaverzió)
2023. szeptember 4.
A Databricks SDK for Go 0.19.0-s verziója átnevezi az engedélyek API-jait, 8 API-t ad hozzá, 5 mezőt ad hozzá, módosít és eltávolít néhány mezőt, és módosít néhány metódust. További részletekért tekintse meg a 0.19.0-s verzióra vonatkozó változásnaplót.
A Pythonhoz készült Databricks SDK a 0.8.0-s verzióra frissítve (bétaverzió)
2023. szeptember 4.
A Python 0.8.0-s verziójához készült Databricks SDK átnevezi az engedély API-kat, hozzáad egy fél tucat mezőt, hozzáad egy fél tucat adatosztályt, és számos módosítást és eltávolítást vezet be. További részletekért tekintse meg a 0.8.0-s verzióra vonatkozó változásnaplót.
Engedélyezési listák jogosultságainak delegálása a Unity Katalógusban
2023. szeptember 1.
Mostantól jogosultságokat delegálhat a Unity-katalógus engedélyezési listájában lévő elemek kezeléséhez. Lásd: Allowlist-kódtárak és init-szkriptek megosztott számításon.
A GitHub-alkalmazások integrációja a Tárakban ga
2023. szeptember 1.
A GitHub-alkalmazások reposban való integrációja ga. A funkció egyszerűbb Git-hitelesítő adatok kezelését teszi lehetővé, ha integrálható a GitHubtal a Adattárakban.
Fontos
A GitHub-alkalmazások nem támogatottak a GitHub Enterprise Serveren.