2022. július

Ezek a funkciók és az Azure Databricks platform fejlesztései 2022 júliusában jelentek meg.

Feljegyzés

A kiadások szakaszosak. Előfordulhat, hogy az Azure Databricks-fiók csak egy vagy több héttel a kezdeti kiadási dátum után frissül.

A Databricks Runtime 11.1 és 11.1 ML a GA

2022. július 27.

A Databricks Runtime 11.1 és a Databricks Runtime 11.1 ML már általánosan elérhető.

Lásd: Databricks Runtime 11.1 (EoS) és Databricks Runtime 11.1 for Machine Learning (EoS).

A Photon ga

2022. július 27.

A Photon mostantól általánosan elérhető, a Databricks Runtime 11.1-től kezdve.

A Photon az Azure Databricks natív vektorizált lekérdezési motorja, amely közvetlenül kompatibilis az Apache Spark API-kkal, így működik a meglévő kóddal. A Photon a C++-ban lett kifejlesztve, hogy kihasználja a modern hardver előnyeit, és a vektoros lekérdezésfeldolgozás legújabb technikáival kihasználja az adatok és utasítások szintű párhuzamosság előnyeit a processzorokban, növelve a valós adatok és alkalmazások teljesítményét – mindezt natív módon a data lake-en.

A Photon egy nagy teljesítményű futtatókörnyezet része, amely gyorsabban futtatja a meglévő SQL- és DataFrame API-hívásokat, és csökkenti az egy számítási feladatra eső teljes költségeket. A Photon alapértelmezés szerint a Databricks SQL-adattárakban használatos.

Lásd: Photon is GA a Databricks Runtime 11.1 kibocsátási megjegyzésekben.

Értesítés a jegyzetfüzet befejezésekor

2022. július 27. – augusztus 15.

Ha futás közben távolodik egy jegyzetfüzettől, egy értesítés jelenik meg, amikor befejeződik. Ezeket az értesítéseket engedélyezheti vagy letilthatja a böngészőben.

Az Azure Databricks-munkaterületeken lévő feladatok számának növelése

2022. július 19–22.

Mostantól akár 10 000 feladatot is létrehozhat egy Azure Databricks-munkaterületen, ha engedélyezi a megnövekedett számú feladat váltását az Azure Databricks felügyeleti konzolján. Ez a funkció lehetővé teszi a többoldalas feladatok listáját is, amikor a Feladatok felhasználói felületen tekinti meg a feladatokat , ezzel csökkentve a Feladatok listanézet betöltéséhez szükséges időt.

A Databricks a Jobs API 2.1 használatát javasolja, ha engedélyezi a megnövekedett feladatkorlátot. A Jobs 2.0 API használata csökkentett teljesítményt eredményez nagy számú feladat visszaadásakor.

A részletes naplózási naplók mostantól rögzítik a Databricks SQL-lekérdezések futtatásakor

2022. július 14.

Most már konfigurálhatja a naplókat úgy, hogy rögzítve legyenek a Databricks SQL-lekérdezések futtatásakor. Ehhez használja a munkaterület konfigurációs beállítását részletes naplózási naplókkal. Lásd: Részletes naplók engedélyezése. A lekérdezés elküldéséhez egy naplórekord, a lekérdezés befejezéséhez pedig egy másik rekord tartozik (beleértve a törlést is).

Ha a részletes naplók már engedélyezve lettek a munkaterületen a jegyzetfüzet-parancsok naplózásához, a részletes naplók mostantól automatikusan tartalmazzák a databricks SQL-lekérdezéseket a munkaterülethez.

Databricks JDBC-illesztő 2.6.27

2022. július 11.

Megjelent a Databricks JDBC-illesztőprogram 2.6.27-es verziója (letöltés). Ez a kiadás frissíti a külső kódtárakat, például az Apache Arrow 7.0.0-t. Ez a kiadás a licencfájl és a konfiguráció telepítési útmutatójának frissítéseit is tartalmazza.

Emellett ez a kiadás a következő problémákat oldja meg:

• Bizonyos esetekben, ha egy HTTP-kapcsolat hosszú ideje aktív, az összekötő hibát ad NoHttpResponseException vissza.
• Bizonyos esetekben az összekötő JAR-fájljának nem árnyékolt Log4j osztályai ütköznek a végfelhasználó környezetében üzembe helyezett fájlokkal. A nem árnyékolt osztályok el lettek távolítva az összekötő JAR-fájljából.
• DataSource-osztály használata esetén az alprotocolok neve helytelen.

Databricks ODBC-illesztő 2.6.25

2022. július 11.

Megjelent a Databricks ODBC-illesztőprogram 2.6.25-ös verziója (letöltés). Ez a kiadás támogatást ad az összekötő konfigurálásához a széteső eredményfájl letöltési műveleteinek csökkentése érdekében.

Databricks Runtime 11.1 (bétaverzió)

2022. július 8.

A Databricks Runtime 11.1, 11.1 Photon és 11.1 ML már bétaverzióként érhető el.

Tekintse meg a Databricks Runtime 11.1 (EoS) és a Databricks Runtime 11.1 for Machine Learning (EoS) teljes kibocsátási megjegyzéseit.

Továbbfejlesztett jegyzetfüzet-vizualizációk

2022. július 5–11.: 3.75-ös verzió

A jegyzetfüzetekben lévő diagramok és vizualizációk beépített támogatása mostantól több diagramot és adatprofilt is támogat. Ha sql-cellát futtat egy jegyzetfüzetben, vagy a függvényt egy DataFrame-en használja display , a jegyzetfüzet a Databricks SQL-ben megjelenő eredményekhez hasonlóan többlapos eredményeket jelenít meg. Most már létrehozhatja ugyanazokat a gazdag vizualizációkat egy jegyzetfüzetben, amelyet a Databricks SQL-ben is létrehozhat. További információ: Vizualizációk a Databricks-jegyzetfüzetekben.