Október 2023.

Ezek a funkciók és az Azure Databricks platform fejlesztései 2023 októberében jelentek meg.

Feljegyzés

A kiadások szakaszosak. Előfordulhat, hogy az Azure Databricks-munkaterület a kezdeti kiadás dátuma után egy vagy több hétig nem frissül.

Kiszolgáló nélküli biztonságos kapcsolat a Databricks SQL Kiszolgáló nélküli verziójához (nyilvános előzetes verzió)

2023. október 31.

Az új kiszolgáló nélküli biztonságos kapcsolati eszközök segítségével szabályozhatja a kiszolgáló nélküli SQL-raktárakból az Azure Storage-beli adatforrásokhoz való hálózati hozzáférést. Választhat egy tárolási tűzfalat alhálózati azonosítók használatával, vagy engedélyezheti a privát kapcsolatot az Azure Private Linkkel. A nyilvános előzetes verzióhoz való csatlakozáshoz lépjen kapcsolatba az Azure Databricks-fiók csapatával. Lásd: Kiszolgáló nélküli számításisík-hálózatkezelés.

Ha az Azure Databricks dokumentációjában 2023. október 31. előtt felsorolt alhálózati azonosítók használatával konfigurált tároló tűzfalak vannak konfigurálva, a Databricks azt javasolja, hogy frissítse a tűzfalkonfigurációkat az egyes munkaterületi régiókhoz az új eszközök egyikével. Ez segíthet konzisztens üzembe helyezés alkalmazásában az összes munkaterületen. Ha úgy dönt, hogy nem frissíti a meglévő konfigurációkat, a munkaterületek továbbra is működni fognak.

Egy Azure Databricks-feladat YAML-forrásának megtekintése

2023. október 30.

A feladat YAML-forrásának megtekintéséhez és másolásához kattintson a feladat részletei lapra, és válassza a YAML/JSON megtekintése lehetőséget. A YAML-forrással CI/CD-munkafolyamatokat hozhat létre a Databricks Asset Bundles használatával. Lásd: Mik azok a Databricks-eszközcsomagok?.

Feltételes logika hozzáadása az Azure Databricks-munkafolyamatokhoz

2023. október 30.

Mostantól a If/else condition feladat használatával feltételesen futtathat feladatokat egy Azure Databricks-feladatban egy logikai kifejezés eredményei alapján. Lásd: Elágaztatási logika hozzáadása a feladathoz a Ha/más feltétel tevékenységgel.

Olyan Azure Databricks-feladat paramétereinek konfigurálása, amelyekre az összes feladatfeladat hivatkozhat

2023. október 30.

Mostantól hozzáadhat paramétereket az Azure Databricks-feladatokhoz, amelyeket a rendszer automatikusan átad minden olyan feladatfeladatnak, amely kulcs-érték párokat fogad el. Lásd: Paraméterek hozzáadása az összes feladattevékenységhez. Emellett mostantól kibővített értékhivatkozásokkal is átadhatja a kontextust és az állapotot a feladattevékenységek között. Lásd: A feladat feladatfeladatokba való futtatásával kapcsolatos kontextus átadása.

Törlési vektorok automatikus engedélyezése

2023. október 30.

Mostantól engedélyezheti a törlési vektorokat a Databricks Runtime 14.0-s és újabb verziójában található összes új Delta-táblán a munkaterület rendszergazdai beállításával , amely automatikusan engedélyezi a törlési vektorokat. Ez a viselkedés jelenleg leiratkozhat, de a jövőben leiratkozási módra változik. A Databricks azt javasolja, hogy manuálisan konfigurálja ezt a beállítást. Lásd: Törlési vektorok automatikus engedélyezése.

A Unity Catalog támogatása a UNDROP TABLE ga

2023. október 25.

Egy elvetett felügyelt vagy külső táblát az elvetéstől számított hét napon belül törölhet egy meglévő sémában. A Databricks Runtime 12.1-et vagy újabb verzióját igényli. Lásd: UNDROP TABLE and SHOW TABLES DROPPED.

A Partner Connect támogatja a Dataiku-t

2023. október 25.

Mostantól a Partner Connect használatával csatlakoztathatja az Azure Databricks-munkaterületet a Dataikuhoz. Lásd: Csatlakozás a Dataikuhoz.

A Databricks AutoML által létrehozott jegyzetfüzetek mostantól MLflow-összetevőkként vannak mentve

2023. október 24.

A Databricks AutoML által létrehozott jegyzetfüzetek mostantól MLflow-összetevőként vannak mentve a Machine Learning összes Databricks Runtime-verziójában.

Új régió: Katar középső régiója

2023. október 23.

Az Azure Databricks már elérhető a Qatar Centralban. Tekintse meg az Azure Databricks-régiókat.

Az Azure Firewall és a Private Link által támogatott Unity Catalog-kötetek

2023. október 23.

Mostantól a Unity Catalog-köteteket az Azure Firewall vagy a Private Link használatával konfigurált Azure Storage-fiókokkal együtt használhatja. Ez eltávolít egy korábbi korlátozást.

Prediktív optimalizálás (nyilvános előzetes verzió)

2023. október 24.

A prediktív optimalizálás nem igényli manuálisan a Karbantartási műveletek kezelését a Delta-táblákhoz. A karbantartási műveletek csak szükség szerint futnak, így kiküszöbölik a karbantartási műveletek szükségtelen futását, valamint a nyomon követési és hibaelhárítási teljesítményhez kapcsolódó terheket. Lásd a Delta Lake prediktív optimalizálása című témakört.

Már elérhetők a számítási rendszertáblák (nyilvános előzetes verzió)

2023. október 23.

A system.compute séma két új táblát tartalmaz, amelyek segítségével figyelheti a fiók számítási erőforrásait: clusters és node_types.

A fürtök táblázata egy lassan változó dimenziótábla, amely a fürtkonfigurációk teljes előzményeit tartalmazza az összes célú és feladatfürt esetében. A csomóponttípusok táblája az alapszintű hardverinformációkkal rögzíti a jelenleg elérhető csomóponttípusokat. Ha nem fér hozzá ezekhez a rendszertáblákhoz, győződjön meg arról, hogy engedélyezte a számítási sémát a fiókjában (lásd: Rendszertábla-sémák engedélyezése).

További információ a számítási rendszertáblákról: Számítási rendszertáblák referenciája.

Igény szerinti funkciószámítás a GA

2023. október 19.

A gépi tanulási funkciók mostantól igény szerint, következtetési időpontban kiszámíthatók. Ez lehetővé teszi a modellek számára, hogy olyan bemeneteket használva számítsák ki a funkciókat, amelyek csak következtetési időpontban érhetők el, például a felhasználó aktuális tartózkodási helye, vagy olyan funkciókat használnak, amelyek költségesek az előzetes előkészítéshez, tároláshoz és frissítéshez. A modell betanítási kódja tetszőleges gráfot definiálhat a modell betanítása és következtetése során végrehajtott funkciókeresések és számítások közül.

A funkciószámítási logikát, modelleket és adatokat a Unity Catalog szabályozza. További információ: Igény szerinti számítási funkciók a Python által definiált függvények használatával.

A Unity Catalog szolgáltatásfejlesztése ga

2023. október 19.

A Unity Catalog szolgáltatásfejlesztésével a Unity Catalog lesz a funkciótár. Bármely Delta-táblát használhat elsődleges kulccsal funkciótábláként a modell betanításához vagy következtetéséhez. A Unity Katalógus funkciófelderítést és szabályozást biztosít.

AI által létrehozott táblabejegyzések (nyilvános előzetes verzió)

2023. október 18.

Az Azure Databricks használata során az AI használatával történő segítségnyújtásra irányuló kezdeményezés részeként az Azure Databricks AI által létrehozott táblázat- és oszlopbejegyzéseket vezet be a nyilvános előzetes verzióban. A Katalóguskezelőben megtekintheti, szerkesztheti és hozzáadhat egy AI által létrehozott megjegyzést a Unity Catalog által kezelt bármely tábla- vagy táblaoszlophoz. Az AI által létrehozott megjegyzések külső modellpartnereket is használhatnak a válaszok megadására. Az ezekre a szolgáltatásokra küldött adatok nem használhatók modellbetanításhoz.

Lásd: AI által létrehozott megjegyzések hozzáadása egy táblához.

A Unity Catalog modelljei ga

2023. október 17.

A Unity Katalógusban már általánosan elérhetőek az ML-modellek. A Unity Catalog központosított hozzáférés-vezérlést, naplózást, vonalvezetést, modellmegosztást biztosít a munkaterületeken, és jobb MLOps-üzembehelyezési munkafolyamatokat biztosít. Az Azure Databricks a Modellek használatát javasolja a Unity Catalogban a munkaterületi modellregisztrációs adatbázis helyett. A részletekért lásd: Modell életciklusának kezelése a Unity Katalógusban .

A számítási szabályzatokban már támogatott kódtárak (nyilvános előzetes verzió)

2023. október 17.

A munkaterület rendszergazdái mostantól kódtárakat adhatnak a számítási szabályzatokhoz. A szabályzatot használó számítás automatikusan telepíti a kódtárat. A felhasználók nem telepíthetnek vagy távolíthatnak el számítási hatókörű kódtárakat a szabályzatot használó számításhoz. A korábban telepített kódtárak törlődnek.

A Databricks azt javasolja, hogy az init-szkriptekkel telepített összes kódtárat migrálja számítási szabályzatok használatára. Lásd: Kódtárak hozzáadása szabályzathoz.

A Partner Connect támogatja a Monte Carlo-t

2023. október 16.

Mostantól a Partner Connect használatával csatlakoztathatja Az Azure Databricks-munkaterületet Monte Carlo-hoz. További információ: Az Azure Databricks csatlakoztatása Monte Carlohoz.

Szemantikai keresés (nyilvános előzetes verzió)

2023. október 16.

Mostantól természetes nyelven is kereshet a Unity-katalógus tábláiban a speciális Keresés párbeszédpanelen. Lásd: Szemantikai keresés.

A Databricks Assistant engedélyezése munkaterületi szinten

2023. október 11.

A munkaterület rendszergazdája mostantól engedélyezheti vagy letilthatja a Databricks Assistant szolgáltatást egy adott munkaterületen, ha a fiókadminisztrátor engedélyezte azt. További információ: Hogyan a Databricks Assistant engedélyezése?.

Új photon alapértelmezések

2023. október 11.

Amikor új fürtöt hoz létre a felhasználói felületen keresztül, az alapértelmezett Databricks Runtime motor engedélyezve van a Photon-ben. Ez minden célú és feladatfürtre vonatkozik.

A Photon-kompatibilis fürtszabályzattal létrehozott új fürtök alapértelmezés szerint engedélyezve vannak a Photonnel. A fürtszabályzat fotonkompatibilis, ha a Databricks Runtime támogatja, a csomópont típusa támogatott, és nincs runtime_engine explicit módon beállítva STANDARD.

A Databricks Runtime 14.1 ga

2023. október 11.

A Databricks Runtime 14.1 és a Databricks Runtime 14.1 ML már általánosan elérhető.

Lásd: Databricks Runtime 14.1 és Databricks Runtime 14.1 for Machine Learning.

Fejlesztői eszközök kibocsátási megjegyzések áthelyezve

2023. október 10.

Az Azure Databricks fejlesztői eszközeihez 2023. október 10. után kiadott kibocsátási megjegyzések mostantól az Azure Databricks fejlesztői eszközeiben és SDK-jaiban jelennek meg az Azure Databricks platform kibocsátási megjegyzései helyett.

A Visual Studio Code Databricks-bővítménye az 1.1.5-ös verzióra frissítve

2023. október 9.

A Visual Studio Code 1.1.5-ös verziójához készült Databricks-bővítmény néhány kisebb javítást tartalmaz. További részletekért tekintse meg az 1.1.5-ös verzióra vonatkozó változásnaplót.

A frissítések prediktív I/O-jához ga

2023. október 9.

A databricks runtime 14.0-s és újabb verziókban már általánosan elérhető a prediktív I/O a frissítésekhez. Lásd : Mi a prediktív I/O?.

A törlési vektorok ga

2023. október 9.

A törlési vektorok mostantól általánosan elérhetők a Databricks Runtime 14.0-s és újabb verziókban. Lásd: Mik azok a törlési vektorok?.

A Partner Connect támogatja a RudderStacket

2023. október 5.

Mostantól a Partner Connect használatával csatlakoztathatja az Azure Databricks-munkaterületet a RudderStackhez. További információ: Csatlakozás a RudderStackhez.

A Databricks CLI a 0.207.0-s verzióra frissítve (nyilvános előzetes verzió)

2023. október 4.

A Databricks parancssori felülete (Databricks CLI) a 0.207.0-s verzióra lett frissítve. Ez a kiadás funkciófrissítéseket és javításokat tartalmaz a Databricks-eszközcsomagokhoz, kiegészítéseket és módosításokat végez több parancscsoporton és parancson, és így tovább. További részletekért tekintse meg a 0.207.0-s verzióra vonatkozó változásnaplót.

Kijelölt cellák futtatása jegyzetfüzetben

2023. október 4.

Mostantól csak a kijelölt cellák futtathatók egy jegyzetfüzetben. Lásd: Kijelölt cellák futtatása.

A munkaterület-katalógus kötésének használata a katalógus írásvédett hozzáférésének biztosításához

2023. október 4.

Ha munkaterület-katalógus kötéssel korlátozza a katalógus hozzáférését a fiókjában lévő adott munkaterületekhez, ezt a hozzáférést írásvédetté teheti. Az írásvédett munkaterület-katalógus kötés olyan helyzetekben hasznos, mint például a fejlesztői munkaterületről származó éles adatok írásvédett hozzáférésének biztosítása a felhasználóknak a fejlesztés és tesztelés engedélyezéséhez.

Ez a frissítés az API-végpontot is elavultatja /api/2.1/unity-catalog/workspace-bindings/ , és lecseréli a következőre /api/2.1/unity-catalog/bindings/: .

Lásd: Katalógushozzáférés korlátozása adott munkaterületekhez.

A Visual Studio Code Databricks-bővítménye az 1.1.4-es verzióra frissítve

2023. október 2.

A Visual Studio Code 1.1.4-es verziójához készült Databricks-bővítmény támogatja az egyéni Azure Databricks-munkaterület URL-címeit. További részletekért tekintse meg az 1.1.4-es verzióra vonatkozó változásnaplót.

A Pythonhoz készült Databricks SDK a 0.10.0-s verzióra frissítve (bétaverzió)

2023. október 3.

A Python 0.10.0-s verziójához készült Databricks SDK 7 kompatibilitástörő módosítást vezet be, 10 adatosztályt ad hozzá, 6 mezőt ad hozzá, és egy szolgáltatást ad hozzá. További részletekért tekintse meg a 0.10.0-s verzióra vonatkozó változásnaplót.

A Databricks SDK for Go a 0.22.0-s verzióra frissült (bétaverzió)

2023. október 3.

A Databricks SDK for Go 0.22.0-s verziója egy kompatibilitástörő API-módosítást vezet be, és egy API-t ad hozzá. További részletekért tekintse meg a 0.22.0-s verzióra vonatkozó változásnaplót.

Unity Catalog-kötetek mostantól nyilvános előzetes verzióban az Azure China-hoz

2023. október 2.

A Unity Catalog-kötetek mostantól nyilvános előzetes verzióként érhetők el az Azure China régióiban. Lásd: Mik azok a Unity Catalog-kötetek?.