A Databricks SQL API kiadási megjegyzései
Ez a cikk az új Databricks SQL-funkciókat és -fejlesztéseket, valamint az ismert problémákat és gyakori kérdéseket sorolja fel.
Kiadási folyamat
A Databricks folyamatosan frissíti a Databricks SQL-webalkalmazás felhasználói felületét, és minden felhasználó rövid időn belül ugyanazokat a frissítéseket kapja.
Emellett a Databricks általában rendszeresen kiadja az SQL Warehouse új számítási verzióit. Két csatorna mindig elérhető: előzetes verzió és Aktuális.
Feljegyzés
A kiadások szakaszosak. Előfordulhat, hogy a Databricks-fiók nem frissül új SQL Warehouse-verzióval vagy Databricks SQL-funkcióval a kezdeti kiadás dátuma után egy vagy több hétig.
Feljegyzés
A Databricks SQL Serverless nem érhető el az Azure China-ban. A Databricks SQL nem érhető el az Azure Government-régiókban.
Csatornák
A csatornák segítségével választhat az SQL Warehouse aktuális számítási vagy előzetes verziója között. Az előzetes verziókkal kipróbálhatja a funkciókat, mielőtt az a Databricks SQL-szabványsá válik. Az előzetes verziókkal tesztelheti éles lekérdezéseit és irányítópultjait a közelgő változások ellen.
Az előzetes verziót általában körülbelül két héttel azután léptetik elő az aktuális csatornára, hogy megjelent az előnézeti csatornán. Egyes funkciók, például a biztonsági funkciók, a karbantartási frissítések és a hibajavítások közvetlenül az aktuális csatornán jelenhetnek meg. A Databricks időről időre előléptethet egy előzetes verziót az aktuális csatornára egy másik ütemezés szerint. Minden új verziót a következő szakaszokban fogunk bejelenteni.
Ha tudni szeretné, hogyan válthat meglévő SQL-tárolót az előnézeti csatornára, olvassa el a Csatornák előnézete című témakört. A felhasználói felület frissítési szakaszaiban felsorolt funkciók függetlenek a kibocsátási megjegyzések Rögzített problémák szakaszában ismertetett SQL Warehouse számítási verzióktól.
Elérhető Databricks SQL-verziók
Aktuális csatorna: Databricks SQL 2024.40-es verzió
- A 2024.40-ben elérhető funkciók megtekintése.
2024. november 6.
Ember által olvasható ütemezés támogatása Databricks SQL-streamtáblákhoz és materializált nézetekhez
A felhasználók mostantól elkezdhetik, létrehozhatják és módosíthatják a streamelő táblák és a materializált nézetek ütemezését a CRON-ütemezés emberi olvasásra alkalmas szintaxisának használatával. Lásd: ALTER MATERIALIZED VIEW, ALTER STREAMING TABLE, CREATE MATERIALIZED VIEW, AND CREATE STREAMING TABLE.
A streamelő táblák mostantól támogatják az időutazási lekérdezéseket
Mostantól időutazással lekérdezheti a korábbi táblaverziókat időbélyeg vagy táblaverzió alapján (a tranzakciónaplóban rögzítettek szerint). Előfordulhat, hogy időutazási lekérdezések használata előtt frissítenie kell a streamelési táblát. Lásd : Mi a Delta Lake időutazás?.
Az időutazási lekérdezések nem támogatottak a materializált nézetek esetében.
2024. október 31.
Felhasználói felület frissítései
Új SQL-szerkesztő (nyilvános előzetes verzió)
- Most már futtathatja az aktív SQL-lekérdezést a billentyűparancs (vagy
Ctrl
) +Shift
Enter
+ billentyűkombinációval.Command
- A paraméterek beviteli területe ekkor görgetősávot jelenít meg, amikor a szöveg a megjelenítési ablakon kívülre terjed ki.
- Kijavítottunk egy hibát, amely megakadályozta, hogy a lekérdezésprofil részleteinek oldala teljesen megnyílt.
- Most már átnevezheti a lekérdezéseket, ha beírja az új nevet a lap címébe.
- Az Ütemezés gomb mostantól le van tiltva az olyan lekérdezések esetében, amelyeket még soha nem mentettek.
2024. október 24.
Kibocsátási megjegyzések az AI/BI-eszközökhöz
Az AI/BI-irányítópultok és az AI/BI Genie kibocsátási megjegyzései átkerültek az AI/BI kibocsátási megjegyzéseibe. A jövőbeni kiadások és frissítések itt lesznek dokumentálva.
2024. október 17.
Az értesítési célhelyek már általánosan elérhetők
Létrehozhat és konfigurálhat olyan értesítési célhelyeket, amelyeket a munkaterület felhasználói hozzáadhatnak bizonyos munkafolyamatokhoz, például riasztásokhoz, Databricks-feladatokhoz és AI/BI-irányítópultok ütemezéséhez, hogy e-maileket vagy webhookokat küldjenek egy esemény futtatásakor. Lásd: Értesítési célhelyek kezelése.
2024. október 10.
A materializált nézetek és streamtáblák mostantól általánosan elérhetők a Databricks SQL-ben
A streamelő táblák növekményes betöltést tesznek lehetővé a felhőbeli tárolókból és üzenetsorokból, míg a materializált nézetek előre kiszámított nézetek, amelyek automatikusan és növekményesen frissülnek az új adatok érkezésekor. Lásd: Materialized views in Databricks SQL and Load data using streaming tables in Databricks SQL.
Lekérdezési elemzések
- Az új oszlopok
query_source
bekerültekexecuted_as
executed_as_user_id
a lekérdezési előzmények rendszertábláiba. Lásd a lekérdezéselőzmények rendszertáblázatának hivatkozását.
2024. október 3.
Kibővült a kiszolgáló nélküli SQL Warehouse támogatása
A kiszolgáló nélküli SQL-raktárak már elérhetők a swedencentral
régióban. Tekintse meg Korlátozott regionális elérhetőségű funkciók témakört.
Felhasználói felület frissítései
Az ebben a szakaszban felsorolt funkciók függetlenek az SQL Warehouse fent ismertetett számítási verzióitól.
Katalóguskezelő
- Az AI által létrehozott megjegyzések mostantól támogatottak a katalógusokhoz, sémákhoz, kötetekhez, modellekhez és függvényekhez, és a felhasználók a beágyazott csevegőasszisztens segítségével szerkeszthetik megjegyzéseiket.
SQL AI-függvények A vector_search()
függvény mostantól nyilvános előzetes verzióban érhető el. Lásd: vector_search függvény
2024. szeptember 26.
Kibővült a kiszolgáló nélküli SQL Warehouse támogatása
A kiszolgáló nélküli SQL-raktárak már elérhetők a francecentral
régióban. Tekintse meg Korlátozott regionális elérhetőségű funkciók témakört.
2024. szeptember 11.
Felhasználói felület frissítései
Az ebben a szakaszban felsorolt funkciók függetlenek az SQL Warehouse fent ismertetett számítási verzióitól.
SQL-szerkesztő
Mostantól használhatja a névvel ellátott paraméterjelölő szintaxisát az SQL-szerkesztőben. Az elnevezett paraméterjelölő szintaxisa az SQL-szerkesztőben, a jegyzetfüzetekben és az AI/BI-irányítópultokon használható. Lásd: Lekérdezési paraméterek használata.
Lekérdezések és örökölt irányítópultok
AZ SQL-lekérdezések és az örökölt irányítópultok esetében a törölt elemek már nem jelennek meg a listázási oldalakon. Törölt elemek keresése a munkaterület kukamappájában. A munkaterület rendszergazdái megtekinthetik a törölt elemeket az összes felhasználó kukamappájában.
2024. szeptember 5.
Változások 2024.40-ben
A Databricks SQL 2024.40-es verziója a következő viselkedési változásokat, új funkciókat és fejlesztéseket tartalmazza.
Működésbeli változások
Váltás a nézetek alapértelmezett sémakötési módjára
A nézetek mostantól a sémaváltozásokhoz igazodnak az alapul szolgáló lekérdezésben a séma-kompenzáció és a normál öntési szabályok használatával. Ez egy változás az előző alapértelmezett
BINDING
módhoz képest, ami hibákat eredményezett, amikor a nézetre való hivatkozáskor nem sikerült biztonságos leadást végrehajtani.Lásd: CREATE VIEW és cast függvény.
A nem dokumentált
!
szintaxis használatának letiltása külső logikai kifejezések helyettNOT
Ezzel a kiadással a logikai kifejezéseken kívüli szinonimák
NOT
használata!
már nem engedélyezett. Például a következőhöz hasonló utasítások:CREATE ... IF ! EXISTS
, IS ! NULL,! NULL
oszlop- vagy mezőtulajdonság,! IN
és! A BETWEEN függvényt a következőre kell cserélni:CREATE ... IF NOT EXISTS
,NOT NULL
IS NOT NULL
oszlop- vagy mezőtulajdonság ésNOT IN
NOT BETWEEN
.Ez a módosítás biztosítja a konzisztenciát, igazodik az SQL szabványhoz, és hordozhatóbbá teszi az SQL-t.
A logikai előtag operátorát
!
(például!is_mgr
!(true AND false)
) ez a módosítás nem érinti.Nem dokumentált oszlopdefiníció szintaxisának letiltása nézetekben
A Databricks nevesített oszlopokkal és oszlop megjegyzésekkel támogatja a CREATE VIEW nézetet . Korábban az oszloptípusok,
NOT NULL
korlátozások vagyDEFAULT
korlátozások specifikációja engedélyezve volt. Ezzel a kiadással már nem használhatja ezt a szintaxist.Ez a módosítás biztosítja a konzisztenciát, igazodik az SQL szabványhoz, és támogatja a jövőbeli fejlesztéseket.
CHECK
Érvénytelen oszlopra vonatkozó korlátozás hozzáadása mostantól a hibaosztályt adja eredményül.UNRESOLVED_COLUMN.WITH_SUGGESTION
Ha hasznosabb hibaüzenetet szeretne nyújtani, a Databricks Runtime 15.3-ban és újabb verziókban egy
ALTER TABLE ADD CONSTRAINT
érvénytelen oszlopnévre hivatkozó korlátozást tartalmazóCHECK
utasítás adja vissza a UNRESOLVED_COLUMN. WITH_SUGGESTION hibaosztály. Korábban vissza lett adva egyINTERNAL_ERROR
.
Új funkciók és fejlesztések
UniForm Iceberg engedélyezése ALTER TABLE használatával
Mostantól adatfájlok újraírása nélkül engedélyezheti az UniForm Iceberget a meglévő táblákon. Lásd: Engedélyezés meglévő tábla módosításával.
UTF-8 érvényesítési függvények
Ez a kiadás az alábbi függvényeket mutatja be az UTF-8 sztringek érvényesítéséhez:
- is_valid_utf8 ellenőrizte, hogy egy sztring érvényes UTF-8 sztring-e.
- make_valid_utf8 egy potenciálisan érvénytelen UTF-8 sztringet konvertál érvényes UTF-8 sztringgé helyettesítő karakterek használatával
- validate_utf8 hibát jelez, ha a bemenet nem érvényes UTF-8 sztring.
- try_validate_utf8 akkor ad
NULL
vissza, ha a bemenet nem érvényes UTF-8 sztring.
to_avro és from_avro függvények
A to_avro és from_avro függvények lehetővé teszik az SQL-típusok Avro bináris adatokké és visszaalakítását.
try_url_decode függvény
Ez a kiadás bemutatja a try_url_decode függvényt, amely egy URL-kódolt sztringet dekódol. Ha a sztring nem a megfelelő formátumban van, a függvény hibafelismertetés helyett ad vissza
NULL
.Opcionálisan lehetővé teszi az optimalizáló számára, hogy nem kényszerített idegenkulcs-korlátozásokra támaszkodjon
A lekérdezési teljesítmény javítása érdekében mostantól megadhatja a kulcsszót a
RELY
táblák létrehozásakor vagy módosításakor.FOREIGN KEY
Az ellenőrzési korlátozások táblafunkciójának elvetése
Szelektív felülírás olyan most futtatott feladatok használatával
replaceWhere
, amelyek adatokat törölnek és új adatokat szúrnak be párhuzamosan, ezáltal javítva a lekérdezési teljesítményt és a fürt kihasználtságát.Párhuzamos feladatfuttatások szelektív felülírásokhoz
Szelektív felülírás olyan most futtatott feladatok használatával
replaceWhere
, amelyek adatokat törölnek és új adatokat szúrnak be párhuzamosan, ezáltal javítva a lekérdezési teljesítményt és a fürt kihasználtságát.Jobb teljesítmény a szelektív felülírásokkal rendelkező adatcsatornák módosításához
A módosítási adatcsatornával rendelkező táblák szelektív
replaceWhere
felülírása többé nem ír külön módosítási adatfájlokat a beszúrt adatokhoz. Ezek a műveletek a mögöttes Parquet-adatfájlokban található rejtett_change_type
oszlopot használják a módosítások íráserősítés nélküli rögzítéséhez.Továbbfejlesztett lekérdezési késés a COPY INTO paranccsal
Ez a kiadás tartalmaz egy módosítást, amely javítja a parancs lekérdezési késését
COPY INTO
. Ez a fejlesztés úgy valósul meg, hogy a RocksDB állapottároló aszinkron módon tölti be az állapotot. Ezzel a módosítással javulni fog a nagy állapotú lekérdezések kezdési ideje, például a nagy számú már betöltött fájllal rendelkező lekérdezések esetében.
Felhasználói felület frissítései
Az ebben a szakaszban felsorolt funkciók függetlenek az SQL Warehouse fent ismertetett számítási verzióitól.
Vizualizációk
- Az elemleírások összege mostantól csak halmozott diagramok esetén jelenik meg.
2024. augusztus 22.
Vizualizációk
Csoportosított és többmezős konfigurációk esetén az elemleírások mostantól az összegeket jelenítik meg, amikor a diagramelemekre mutat.
2024. augusztus 15.
Vizualizációk
Kijavítottunk egy hibát, amely miatt a táblázatvizualizációk sorszámai nem frissülnek az oldalméret módosítása után.
Adatfelderítés
Mostantól támogatott a beágyazott összetett oszloptípusok kibontása és összecsukása a Unity Catalog-táblákban.
2024. augusztus 1.
Vizualizációk:
- A táblázatrendezés megmarad, ha az adatok szűrés miatt változnak.
SQL-szerkesztő:
- A lekérdezés utolsó sora és az eredmény kimenete közötti további kitöltés hozzáadásával növelhető az olvashatóság.
2024. július 25.
Databricks REST API:
- Megváltoztak a lekérdezések, riasztások, adatforrások és engedélyek kezelésére szolgáló API-k. Az örökölt verzió hat hónapig továbbra is támogatott lesz. Ez az átmeneti időszak elegendő időt biztosít az alkalmazások és integrációk új verzióra való migrálásához a régebbi verzió fokozatos kivonása előtt. Lásd : Update to the latest Databricks SQL API version
2024. július 18.
Felhasználói felület frissítései
Katalóguskezelő:
- Egy új katalóguskonfigurációs varázsló már elérhető munkaterület-kötések, katalógusjogjogok és metaadatok beállításához katalógus létrehozásakor.
SQL Warehouse monitorozása:
- A CAN MONITOR engedély általánosan elérhető. Lehetővé teszi a jogosultsággal rendelkező felhasználók számára az SQL-raktárak monitorozását, beleértve a kapcsolódó lekérdezési előzményeket és lekérdezési profilokat. Lásd: Vektorkeresési végpont ACL-ek.
2024. július 11., csütörtök
A Databricks SQL 2024.35-ös verziója elérhető
Bevezetés ütemezése: Előzetes bevezetés a 2024.35-ös verzióhoz: július 9. és július 15. között
Változások 2024.35-ben
Oszlopleképezés letiltása az elvetési funkcióval
Mostantól DROP FEATURE
letilthatja az oszlopleképezést a Delta-táblákon, és leminősítheti a táblaprotokollt. Lásd: Oszlopleképezés letiltása.
Változattípus szintaxisa és függvényei a Nyilvános előzetes verzióban
A beépített Apache Spark-támogatás a félig strukturált adatok típusként való VARIANT
használatához már elérhető a Spark DataFramesben és az SQL-ben. Lásd a Lekérdezésvariáns adatokat.
A Delta Lake változattípus-támogatása nyilvános előzetes verzióban
Most már VARIANT
használhatja a részben strukturált adatok tárolására a Delta Lake által támogatott táblákban. Lásd a Variant támogatását a Delta Lake-ben.
Különböző sémafejlődési módok támogatása nézetekben
A CREATE VIEW és az ALTER VIEW mostantól lehetővé teszi a sémakötési mód beállítását, ami növeli, hogy a nézetek hogyan kezelik az alapul szolgáló objektumok sémamódosításait. Ez a funkció lehetővé teszi, hogy a nézetek tolerálják vagy alkalmazkodjanak a mögöttes objektumok sémaváltozásaihoz. A lekérdezési sémában az objektumdefiníciók módosításából eredő változásokat kezeli.
Néhány ablakfüggvény teljesítménybeli javulása
Ez a kiadás tartalmaz egy módosítást, amely javítja egyes Spark-ablakfüggvények teljesítményét, különösen olyan függvényeket, amelyek nem tartalmaznak záradékot ORDER BY
vagy paramétert window_frame
. Ezekben az esetekben a rendszer újraírhatja a lekérdezést, hogy egy összesítő függvény használatával futtassa. Ez a módosítás lehetővé teszi a lekérdezés gyorsabb futtatását részleges összesítés használatával, és elkerülve az ablakfüggvények futtatásának többletterhelését. A Spark konfigurációs paramétere spark.databricks.optimizer.replaceWindowsWithAggregates.enabled
vezérli ezt az optimalizálást, és alapértelmezés szerint be van állítva true
. Az optimalizálás kikapcsolásához állítsa be a következőt spark.databricks.optimizer.replaceWindowsWithAggregates.enabled
false
: .
try_mod
A hozzáadott függvény támogatása
Ez a kiadás támogatja a PySpark try_mod()
függvényt. Ez a függvény támogatja az egész szám fennmaradó részének ANSI SQL-kompatibilis kiszámítását két numerikus érték osztásával. Ha az osztó argumentum 0, a függvény null try_mod()
értéket ad vissza a kivétel helyett. Használhatja a függvényt ahelyett try_mod()
mod
vagy %
, amely kivételt eredményez, ha az osztó argumentum 0, és az ANSI SQL engedélyezve van.
Felhasználói felület frissítései
SQL-szerkesztő:
A beágyazott segéd mostantól elérhető az SQL-szerkesztőben. Kattintson a szerkesztőablak asszisztens ikonra a bemenet váltásához. Írjon be egy kérdést vagy megjegyzést angol nyelven, majd nyomja le az Enter billentyűt (nem a Shift+Enter billentyűkombinációt, amely egy lekérdezést futtat), hogy egy másik nézettel rendelkező választ hozzon létre közvetlenül a szerkesztőben.
Platform:
Már elérhető egy API az értesítési célhelyekhez. Mostantól programozott módon kezelheti a riasztások és a feladatfuttatási értesítések webhook- és e-mail-célhelyeit. Lásd: Értesítési célhelyek.
2024. július 4.
A Databricks SQL 2024.30-es verziója elérhető
Bevezetés ütemezése: Előzetes bevezetés 2024.30-ra: július 9. és július 15. között
Változások 2024.30-ban
A Lakehouse Federation általánosan elérhető (GA)
A Lakehouse összevonási összekötők az alábbi adatbázistípusokban már általánosan elérhetők (GA):
- MySQL
- PostgreSQL
- Amazon Redshift
- Snowflake
- Microsoft SQL Server
- Azure Synapse (SQL Data Warehouse)
- Databricks
Ez a kiadás a következő fejlesztéseket is bevezeti:
Az egyszeri bejelentkezés (SSO) hitelesítésének támogatása a Snowflake és a Microsoft SQL Server-összekötőkben.
Az Azure Private Link támogatása az SQL Server-összekötőben kiszolgáló nélküli számítási környezetekből. Lásd : 3. lépés: Privát végpontszabályok létrehozása.
További leküldéses leküldések (sztring, matematikai, egyéb függvények) támogatása.
Továbbfejlesztett leküldéses sikerességi arány a különböző lekérdezési alakzatok között.
További leküldéses hibakeresési képességek:
- A
EXPLAIN FORMATTED
kimenet megjeleníti a leküldéses lekérdezés szövegét. - A lekérdezésprofil felhasználói felülete megjeleníti a leküldéses lekérdezés szövegét, az összevont csomópontazonosítókat és a JDBC-lekérdezés végrehajtási idejét (részletes módban). Lásd: Rendszer által létrehozott összevont lekérdezések megtekintése.
- A
DESCRIBE HISTORY
mostantól a folyékony fürtözést használó táblák fürtözési oszlopait jeleníti meg
Lekérdezés futtatásakor DESCRIBE HISTORY
az operationParameters
oszlop alapértelmezés szerint egy clusterBy
mezőt jelenít meg a műveletekhez és OPTIMIZE
a műveletekhezCREATE OR REPLACE
. Folyékony fürtözést használó Delta-tábla esetén a clusterBy
mező a tábla fürtözési oszlopaival van feltöltve. Ha a tábla nem használ folyékony fürtözést, a mező üres.
Általánosan elérhető az elsődleges és idegen kulcsok támogatása
A Databricks Runtime elsődleges és idegen kulcsainak támogatása általánosan elérhető. A GA-kiadás a következő módosításokat tartalmazza az elsődleges és idegen kulcsok használatához szükséges jogosultságokon:
- Egy idegen kulcs meghatározásához rendelkeznie kell a
SELECT
táblában az elsődleges kulccsal, amelyre az idegen kulcs hivatkozik. A táblának nem kell az elsődleges kulccsal rendelkeznie, amelyre korábban szükség volt. - Az elsődleges kulcs záradékkal
CASCADE
történő elvetése nem igényel jogosultságokat az elsődleges kulcsra hivatkozó idegen kulcsokat meghatározó táblákon. Korábban a hivatkozó táblákat kellett birtokolnia. - A korlátozásokat tartalmazó táblák elvetéséhez ugyanazok a jogosultságok szükségesek, mint a kényszereket nem tartalmazó táblák elvetése.
Ha szeretné megtudni, hogyan használhatja az elsődleges és idegen kulcsokat táblákkal vagy nézetekkel, tekintse meg a CONSTRAINT záradékot, az ADD CONSTRAINT záradékot és a DROP CONSTRAINT záradékot.
A folyékony fürtözés ga
A folyékony fürtözés támogatása mostantól általánosan elérhető a Databricks Runtime 15.2 és újabb verziók használatával. Lásd: Folyékony fürtözés használata Delta-táblákhoz.
A típusszűkítés nyilvános előzetes verzióban érhető el
Mostantól engedélyezheti a típusszűkítést a Delta Lake által támogatott táblákon. A típusszűkítést engedélyező táblák lehetővé teszik az oszlopok típusának szélesebb adattípusra való módosítását a mögöttes adatfájlok újraírása nélkül. Lásd: Típusszűkítés.
Sémafejlődési záradék hozzáadva az SQL-egyesítés szintaxisához
Most már hozzáadhatja a WITH SCHEMA EVOLUTION
záradékot egy SQL-egyesítési utasításhoz, hogy lehetővé tegye a sémafejlődést a művelethez. Az egyesítéshez lásd a sémafejlődés szintaxisát.
Vákuumleltár támogatása
Most már megadhatja azokat a fájlleltárat, amelyeket figyelembe kell venni a VACUUM
parancs Delta-táblán való futtatásakor. Tekintse meg az OSS Delta-dokumentációt.
A Zstandard tömörítési függvények támogatása
Mostantól a zst_compress, zstd_decompress és try_zstd_decompress függvényekkel tömörítheti és tömörítheti BINARY
az adatokat.
Az SQL felhasználói felületén lévő lekérdezéstervek most már helyesen jelennek meg PhotonWriteStage
Amikor megjelenik az SQL felhasználói felületén, write
a lekérdezéstervek parancsai helytelenül jelennek meg PhotonWriteStage
operátorként. Ezzel a kiadással a felhasználói felület frissül, hogy szakaszként jelenjen meg PhotonWriteStage
. Ez csak a felhasználói felület módosítása, és nincs hatással a lekérdezések futtatására.
Felhasználói felület frissítései
API-támogatás:
- Mostantól a REST API használatával kezelheti az értesítési célhelyeket. Lásd: Értesítési célhelyek.
2024. június 27.
A Databricks SQL materializált nézeteiben és streamelőtábláiban lévő sorszűrők és oszlopmaszkok nyilvános előzetes verziójúak
A Databricks SQL materializált nézeteiben és streamelőtábláiban lévő sorszűrők és oszlopmaszkok nyilvános előzetes verziójúak. A nyilvános előzetes kiadás a következő módosításokat tartalmazza:
Sorszűrőket és oszlopmaszkokat is hozzáadhat a Databricks SQL materializált nézetéhez vagy streamelőtábláihoz.
- A Databricks SQL materializált nézeteit vagy streamelő táblázatait sorszűrőket és oszlopmaszkokat tartalmazó táblákon definiálhatja.
Lásd: CREATE MATERIALIZED VIEW and CREATE STREAMING TABLE.
Felhasználói felület frissítései
Vizualizációk:
- Továbbfejlesztett interaktivitás az elemleírások megjelenítésében, ha több adatpontot tartalmazó kör-, pont- és hőtérkép-diagramokra mutat.
Katalóguskezelő:
- Az átalakított Katalóguskezelő felhasználói felülete megkönnyíti a Unity Catalog legutóbbi eszközeinek felderítését és kedvencét a Gyorselérési nézetben. A navigációs felület is egyszerűbb lett, így a képernyő bal felső sarkában található Beállítások segítségével megismerheti a számítás, a tárolás, a hitelesítő adatok, a kapcsolatok, a DBFS és a felügyeleti adatokat. A Delta Sharing, a Clean Rooms és a External Data mostantól dedikált lapokkal rendelkezik.
2024. június 6.
A Databricks SQL materializált nézeteinek és streamelési tábláinak javítása
Az a probléma, amely ALTER SCHEDULE
miatt a Databricks SQL-ben materializált nézetek és streamtáblák lekérdezései csak a következő FRISSÍTÉSi művelet kijavítása után lépnek érvénybe. Most a ALTER SCHEDULE
rendszer azonnal alkalmazza a lekérdezéseket. Lásd: Materializált nézetfrissítések ütemezése.
A Databricks SQL materializált nézetei és streamtáblái nyilvános előzetes verziók
A Databricks SQL materializált nézetei és streamtáblái nyilvános előzetes verzióban érhetők el, és minden ügyfél számára elérhetők. A nyilvános előzetes kiadás a következő módosításokat tartalmazza:
REFRESH
a Databricks SQL materializált nézetei és streamtáblái alapértelmezés szerint szinkronban lesznek. Lásd: FRISSÍTÉS (MATERIALIZED VIEW vagy STREAMING TABLE).- A Databricks SQL materializált nézetének vagy streamelési táblájának frissítési művelete során előforduló hibák az SQL-szerkesztőben jelennek meg.
A Databricks SQL materializált nézeteinek és streamtábláinak használatáról a Databricks SQL materializált nézeteinek használata és az adatok betöltése streamtáblák használatával a Databricks SQL-ben című témakörben olvashat.
Felhasználói felület frissítései
Irányítópultok:
- A fiókfelhasználók mostantól letölthetik a vizualizációs adatokat a közzétett irányítópultokról
- A közzé nem tett irányítópultok mostantól közzétehetők az irányítópult tetején található Piszkozat/Közzététel legördülő listával.
- Kijavítottunk egy hibát, amely miatt a rendszer nem észlelte a korlátnak nevezett paramétereket.
Vizualizációk:
- Továbbfejlesztett dobozdiagram-renderelés sötét módban.
Lekérdezési elemzések:
- Az SQL-raktárakhoz csatolt összes jegyzetfüzet esetében a lekérdezésprofil eléréséhez kattintson a Lekérdezést tartalmazó cella Teljesítmény megtekintése gombjára. Ha a cella több lekérdezést is tartalmaz, az egyes utasításokhoz a lekérdezési profilra mutató hivatkozást kell megadni.
2024. május 30.
Új engedélyszint az SQL-raktárakhoz
Az engedély monitorozásával a felhasználók figyelhetik az SQL-raktárakat, beleértve a kapcsolódó lekérdezési előzményeket és lekérdezési profilokat. A Can monitor engedély mostantól nyilvános előzetes verzióban érhető el. Lásd: Vektorkeresési végpont ACL-ek.
Felhasználói felület frissítései
Irányítópult fejlesztései:
- Hozzáadtunk egy kebab menüt az irányítópult vezérlőihez képek és adatok letöltéséhez.
- A felhasználók áttelepíthetik a régi irányítópult lekérdezési háttérű paramétereit és a legördülő lista paramétereit az irányítópultokra.
2024. május 23.
Felhasználói felület frissítései
- Mostantól több elemet is kijelölhet a munkaterületen az áthelyezéshez vagy a törléshez. Ha több objektum van kijelölve, megjelenik egy műveletsáv, amely lehetővé teszi az elemek áthelyezését vagy törlését. Emellett több elemet is kijelölhet az egérrel, és áthúzhatja őket egy új helyre. Az objektumokra vonatkozó meglévő engedélyek továbbra is érvényesek a tömeges áthelyezési és törlési műveletek során.
- Mostantól kedvencként megjelölheti a Unity Catalog-objektumokat a Katalóguskezelőben és a Sémaböngészőben. Ide tartoznak a katalógusok, sémák, táblák, modellek, kötetek és függvények. A kedvencként megjelölt Unity Catalog-objektumok könnyen elérhetők az Azure Databricks kezdőlapjáról.
Irányítópult-frissítések:
- A kéttengelyes kombinált diagramok mostantól helyesen jelenítik meg a sáv jelmagyarázatait a jobb tengelyen és a vonal jelmagyarázatait ennek megfelelően.
- A kéttengelyes diagramok mostantól helyesen jelenítik meg a címkéket a sávokon.
A vizualizációk frissítései:
- A táblázatszerkesztő feltételes formázási címkéi az if és a now parancshoz támogatják a sötét módot.
- A redundáns megnyitási hivatkozás ikonja el lett távolítva a táblázatszerkesztő formázási elemleírásaiból.
- A táblázatszerkesztő alapértelmezett betűszínének felirata mostantól automatikusan igazodik.
2024. május 16.
Bevezetés ütemezése
- Előzetes verzió bevezetése a 2024.25-ös verzióhoz: május 1-jei befejezés
- Aktuális bevezetés a 2024.25-ös verzióhoz: május 14. és május 21. között
Feljegyzés
A Panda Python-kódtárra (2.0.3-s verzió) való frissítés kompatibilitástörő változást okozott a Databricks SQL 2024.20-s verziójában. Az Azure Databricks nem telepítette a 2024.20-es verziót az aktuális csatornára. Ehelyett az előzetes csatorna 2025. május 1-jén frissült 2024.25-re. Az aktuális csatorna bevezetése közvetlenül 2024.15-től 2024.25-ös verzióig tart.
Változások 2024.25-ben
Adatszabályozás
A hitelesítő adatok átengedése és a Hive metaadattár táblahozzáférési vezérlői elavultak.
A hitelesítő adatok átengedése és a Hive metaadattár táblahozzáférési vezérlői örökölt adatszabályozási modellek. Frissítsen a Unity Katalógusra az adatok biztonságának és szabályozásának egyszerűsítése érdekében azáltal, hogy központi helyet biztosít az adatokhoz való hozzáférés felügyeletéhez és naplózásához a fiók több munkaterületén. Lásd a Mi az a Unity katalógus? témakört.
A hitelesítő adatok átengedése és a Hive metaadattár táblahozzáférési vezérlőinek támogatása egy közelgő DBR-verzióban megszűnik.
SQL nyelvi funkciók
A * (csillag) záradék mostantól támogatott a WHERE záradékban.
Mostantól a záradékban szereplő WHERE
csillag (*
) záradék használatával hivatkozhat a SELECT
lista összes oszlopára.
Például: SELECT * FROM VALUES(1, 2) AS T(a1, a2) WHERE 1 IN(T.*)
.
A Cloudflare R2 storage támogatása a régiók közötti kimenő díjak elkerülése érdekében 2024.15-től
Mostantól a Cloudflare R2-t használhatja felhőbeli tárolóként a Unity Katalógusban regisztrált adatokhoz. A Cloudflare R2 elsősorban deltamegosztási használati esetekre szolgál, amelyekben el szeretné kerülni a felhőszolgáltatók által a régiók közötti adatforgalom során felszámított adatforgalom-díjakat.
A Cloudflare R2 Storage az Azure Data Lake Storage Gen2-ben támogatott összes Databricks-adatot és AI-eszközt támogatja.
Lásd: Cloudflare R2-replikák használata vagy tároló áttelepítése R2-be , és tároló hitelesítő adatainak létrehozása a Cloudflare R2-hez való csatlakozáshoz.
Felhasználói felület frissítései
Az ebben a szakaszban felsorolt funkciók függetlenek az SQL Warehouse fent ismertetett számítási verzióitól.
Adatfelderítési frissítések: A Hive Metastore to Unity Catalog frissítési varázslója támogatja a Hive metaadattár által felügyelt táblák frissítését teljes körű számítási vagy SQL-raktárak használatával. Több mint 20 tábla frissítése létrehoz egy új jegyzetfüzetet, amely tartalmazza a SYNC
konvertálást végrehajtó AND ALTER TABLE
parancsokat.
Irányítópult-frissítések:
- A kéttengelyes funkció mostantól elérhető terület-, sáv-, vonal- és pontdiagramtípusokhoz.
- Ha engedélyezi a kéttengelyes diagramot, a rendszer a tengely címét és tartományát már nem másolja a másodlagos tengelyre.
- A vizualizáció konfigurációjában azonosított utolsó mező automatikusan át lesz helyezve a jobb oldali y tengelyre.
2024. május 9.
Az SQL-szerkesztő javításai:
- Az Eredmények tábla vágólap felügyeleti beállításai mostantól az SQL-szerkesztő Új eredménytáblájára vonatkoznak.
Irányítópult fejlesztései:
- A lekérdezésalapú paraméterek lehetővé teszik, hogy a szerzők meghatározhassanak egy listát a választható értékekről, amelyeket a megtekintők paraméterekként használhatnak az irányítópult-vásznon lévő más vizualizációkhoz. Lásd: Lekérdezésalapú paraméterek használata.
- A táblázat widgetből letöltött fájlok oszlopsorrendje mostantól megmarad.
- A táblázatszerkesztő mostantól az oszlopok nevét megjelenítő rámutatási elemleírásokat is tartalmaz.
- Ha más vizualizációtípusokról hisztogramra vált, az információkódolás jobban megmarad.
Irányítópult javításai:
- Kijavítottunk egy hibát, amely miatt egy rácsmagasságszűrő szükségtelen túlcsordulási görgetősávot jelenített meg.
- Kijavítottunk egy hibát, amely helytelenül renderelt vizualizációkat okozott a közzétett irányítópultokon, ahol törölték a hivatkozott adathalmazoszlopot.
2024. május 2.
Irányítópult-frissítések:
- A lekérdezések és vizualizációk mostantól átmásolhatók egy új irányítópultra az SQL-szerkesztőből. Az SQL-szerkesztőből továbbra is hozzáadhat vizualizációkat az örökölt irányítópultokhoz. Lásd: Irányítópult szerkesztése, letöltése vagy hozzáadása.
- Az irányítópultok mostantól 24 órás eredmény-gyorsítótárat tartanak fenn a kezdeti betöltési idők optimalizálása érdekében. Lásd : Adathalmazok optimalizálása és gyorsítótárazása.
- A kategorikus X és mennyiségi Y sávdiagramok mostantól a Databricks Assistant válaszai között vannak rendezve.
- Kijavítottuk az örökölt hisztogrammal
COUNT (*)
kapcsolatos migrálási problémát a pontos migrálás érdekében. - Implementálta a numerikus típusok és a dátumtípusok egy szűrő widgetben való kombinálásának lehetőségét.
- Diagramok létrehozásakor a Databricks Assistant mostantól gépelés közben automatikusan javasol releváns oszlopokat.
Vizualizációfrissítések:
- A táblák felhasználó által kiválasztott színe mostantól világos és sötét módokon is megmarad az örökölt diagramokon.
- Az adat csonkítási logikája javult a kombinált, torta-, hőtérkép- és hisztogramdiagramok teljesítményének növelése érdekében.
- Az alapszintű diagramok kvantitatív tengelyének tetején mostantól mindig megjelenik egy osztásjel.
2024. április 23.
Felhasználói felület frissítései:
- A felhasználói felületen lévő összes Megosztás párbeszédpanelen a
All Users
csoport átnevezveAll Workspace Users
lett. Az új név pontosabban tükrözi a csoport hatókörét, amely mindig a munkaterülethez rendelt felhasználókat tartalmazza. Az átnevezés részeként a csoporttagság nem módosul.
Irányítópult fejlesztései:
- Amikor egy irányítópult SQL-raktára elindul, megjelenik egy párbeszédpanel, amely ismerteti a várakozási időt.
- A görgetési pozíció megmarad a vászon és az Adatok lap közötti váltáskor.
- Ha egy örökölt irányítópultot klónoz egy Lakeview-irányítópult létrehozásához, már támogatja a paraméterátalakítást. Lásd: Régi paraméterek módosítása.
- A relatív dátumok( például a Ma, a Holnap és a 7 nappal ezelőtt) mostantól támogatottak a dátum- és dátumidő-paraméterek esetében.
- A számtartomány csúszkái szűrőkként hozzáadhatók az irányítópultokhoz.
- A hisztogramok mostantól megjeleníthetik a nem összesített adatokat.
- A pontdiagramok mostantól támogatják a méretkódolást.
Irányítópult javításai:
- Az időbeli színkódolás mostantól helyesen módosíthatja a színhozzárendeléseket.
Vizualizációfrissítések:
- Az egyéni eszközkészlet-formátumok mostantól helyesen működnek a többtengelyes diagramokhoz.
- Az Új diagramok előnézeti címke akkor törlődik, ha a felhasználók az elmúlt 14 napban nem módosították a kapcsolót.
2024. április 18.
A Lakeview-irányítópultok általánosan elérhetők
Mostantól a Lakeview-irányítópultok az alapértelmezett irányítópult-eszköz. A felhasználói felületen irányítópultokként lettek átnevezve. A Databricks SQL-irányítópultokat mostantól örökölt irányítópultoknak nevezzük. A kapcsolódó API-eszközök neve nem változott.
- Irányítópult fejlesztései:
- A naplók a Lakeview-irányítópultokhoz érhetők el. Tekintse meg az irányítópultok eseményeit.
- Az irányítópultokról letöltött adatok tiszteletben tartják az alkalmazott paramétereket.
- A Databricks Assistant az Adat lapon az adathalmazok első hozzáadása nélkül engedélyezve van.
- A több Y mezővel rendelkező halmozott sávdiagramok támogatják az X tengely rendezését az Y tengely értékeinek összege alapján.
- Váltás a lineáris és a log(szimmetrikus) skálázási függvények között a vizualizáció tengelyének menüjében.
- A szűrő widget alapértelmezett mérete mostantól kompaktabb.
- A szövegbeviteli szűrő widget kezdeti betöltési ideje csökkent.
- Továbbfejlesztett automatikus diagramkonverziók az örökölt irányítópultokról való migráláskor.
- Irányítópult javításai:
- A korlátozott megtekintési beállításokra vonatkozó figyelmeztetés nem jelenik meg, ha az irányítópult meg lett osztva másokkal.
- Az Adatok lap SQL-szerkesztőjében lévő hibaüzenetek mostantól engedélyezve vannak a sötét módban.
Felhasználói felület frissítései
Az ebben a szakaszban felsorolt funkciók függetlenek az SQL Warehouse fent ismertetett számítási verzióitól.
Fejlesztések:
- A halmozott diagramok elemleírásai alapértelmezés szerint megjelenítik a verem értékét és százalékos értékét.
- A többtengelyes diagramok elemleírásai most kiemelik a rámutatott elemet.
- A Databricks SQL táblavizualizációi mostantól egy új lekérdezési eredmény adattípusát módosítják, amikor az SQL-szerkesztőben szerkesztik.
- A Katalóguskezelő Lekérdezéselőzmények táblája faszerű nézetet jelenít meg a lekérdezési forrás hozzárendeléséhez. Ezzel megtekintheti, hogy mely entitások aktiválták a lekérdezési utasítás futtatását.
2024. április 11.
Felhasználói felület frissítései
Az ebben a szakaszban felsorolt funkciók függetlenek az SQL Warehouse fent ismertetett számítási verzióitól.
Fejlesztések:
- Mostantól százalék szerint csoportosíthatja a vizualizációkat a Databricks SQL-ben és a jegyzetfüzetekben.
- Új diagramok esetén (nyilvános előzetes verzióban) egyetlen tengely mentén nagyíthat, ha a tengelyrel párhuzamos egyenes vonalra kattint és húz.
- A Unity Catalog megosztott fürt engedélyezési felhasználói felülete általánosan elérhető. A Katalóguskezelő Metastore részletek lapján érhető el. Lásd: Elemek hozzáadása az engedélyezési listához.
- A külső helyek létrehozásához és szerkesztéséhez létrehozott űrlapok mostantól teljes oldalként nyílnak meg. Tartalmazzák a tárolási hitelesítő adatok hozzáadásának lehetőségét.
Javítások:
- Kijavítottunk egy hibát a hisztogramdiagramok esetében, amelyekben a negatív értékek hibásan pozitívként lettek megjelölve.
2024. április 4.
Felhasználói felület frissítései
Az ebben a szakaszban felsorolt funkciók függetlenek az SQL Warehouse fent ismertetett számítási verzióitól.
Fejlesztések:
Fejlesztések a Hisztogram-diagramok terén a Lakeview-irányítópultokon.
- A címkék támogatása hozzáadva.
- A tárolóbeállítások mostantól megmaradnak a különböző mezők közötti váltáskor.
Az irányítópult listaoldalán található mintagyűjtemény mostantól Lakeview-irányítópultokat hoz létre. Lásd : Oktatóanyag: Minta irányítópultok használata.
A Lakeview-irányítópulton lévő widget szegélyére a jobb gombbal kattintva megnyit egy helyi menüt.
A bal oldali navigációs sáv megmarad a közzétett Lakeview-irányítópultokat megtekintő munkaterület-felhasználók számára.
A szűrőkijelölések megmaradnak a közzétett és a piszkozati Lakeview-irányítópultok közötti navigáláskor.
Az oszlopnevek mostantól beszúrhatók az SQL-szerkesztőbe, amikor egy lekérdezést szerkesztenek a Lakeview-irányítópult Adat lapján.
A Lakeview-irányítópult cseréje megőrzi a meglévő irányítópult nevét, és lecseréli a tartalmat.
A hőtérképek és más diagramtípusok közötti vizualizációk közötti váltás mostantól jobban megőrzi a releváns mezőket.
Javítások:
- A színkódolást tartalmazó sávdiagramok mostantól helyesen korlátozzák több Y tengelyű mező hozzáadását.
- Megoldotta azt a hibát, amely miatt néhány vizualizációból hiányzott a Letöltés PNG-ként gomb.
- Kijavítottuk a negatív nagy egész számok formázását, amelyeknél korábban több ezer elválasztójel hiányzott.
- Kijavítottuk a helytelen rámutatási vonalelhelyezést, amikor a vonaldiagramok feliratai fölé viszi az egérmutatót.
2024. március 28.
A Databricks SQL 2024.15-ös verziója elérhető
Bevezetés ütemezése
- Előzetes verzió a 2024.15-ös verzióhoz: február 14. és március 4. között
- Aktuális bevezetés a 2024.15-ös verzióra: március 25. és április 8. között
Változások 2024.15-ben
Delta-frissítések
- A Delta UniForm mostantól általánosan elérhető: az UniForm mostantól általánosan elérhető, és az IcebergCompatV2 táblafunkciót használja. Mostantól engedélyezheti vagy frissítheti az UniFormot a meglévő táblákon. Lásd: Delta-táblák olvasása Az UniForm használata Iceberg-ügyfelekkel.
- Adatkiugrás statisztikáinak újrakomponálása a Delta-táblákhoz: Mostantól újrafordíthatja a Delta-naplóban tárolt statisztikákat, miután módosította az adatkiugráshoz használt oszlopokat. Lásd: Deltastatisztikai oszlopok megadása.
SQL-nyelvi frissítések
- Ideiglenes változók deklarálása EGY SQL-munkamenetben: Ez a kiadás lehetővé teszi az ideiglenes változók deklarálását egy olyan munkamenetben, amely beállítható, majd a lekérdezésekben hivatkozhat rá. Lásd: Változók.
- Natív XML-fájlformátum támogatása (nyilvános előzetes verzió): A natív XML-fájlformátum támogatása mostantól nyilvános előzetes verzióban érhető el. Az XML-fájlformátum támogatása lehetővé teszi az XML-adatok kötegelt feldolgozáshoz vagy streameléshez való betöltését, lekérdezését és elemzését. Képes automatikusan sémákat és adattípusokat kikövetkeztetni és fejleszteni, támogatja az OLYAN SQL-kifejezéseket, mint például
from_xml
az XML-dokumentumok létrehozása. Nem igényel külső üvegeket, és zökkenőmentesen működik az Automatikus betöltővel ésread_files
COPY INTO
a Delta Live Tables szolgáltatással. Lásd: XML-fájlok olvasása és írása.
Apache Spark SQL-frissítések
A Databricks SQL 2024.15 tartalmazza az Apache Spark 3.5.0-t. Az SQL további hibajavításai és fejlesztései a Databricks Runtime 14.3 kibocsátási megjegyzésében találhatók. Tekintse meg az [SQL]
Apache Sparkot, és keressen egy teljes listát.
Felhasználói felület frissítései
Az ebben a szakaszban felsorolt funkciók függetlenek az SQL Warehouse fent ismertetett számítási verzióitól.
A Katalóguskezelő entitáslapjának új áttekintési lapja olyan fontos metaadatokat jelenít meg, mint a fájlok, az adatforrás, a tulajdonos, a táblaséma és a megjegyzések.
Lakeview-irányítópult frissítései:
- A Lakeview-irányítópultok mostantól támogatják a paramétereket. A szerzők az Adat lapon adhatnak hozzá paramétereket az adathalmaz-lekérdezésekhez, majd egyértékű választók és dátumválasztók használatával adhatnak meg paramétereket a vásznon. Lásd: Irányítópult-paraméterek használata.
- A Lakeview-irányítópultok mostantól támogatottak a munkaterületengedélyek API-ban. Lásd a PATCH /api/workspace/workspace/updatepermissions részt a REST API-referenciaban.
- A vásznon lévő vezérlő widgetek át lettek nevezve Szűrő widgetek névre.
- A kombinált diagramok már nem engedélyezik az x tengelyen lévő nem összesített mezőket.
- A Megosztás párbeszédpanel Másolás hivatkozás gombja mostantól tartalmazza az URL-ben tárolt paramétereket.
- A közzétett irányítópultokon lévő widgetek már nem mutatnak szegélyeket rámutatáskor.
- Elhárítottunk egy hibát, amely miatt a Databricks Assistant és a Download PNG gombok átfedésben vannak a diagramvizualizációkkal.
A hőtérképek és más diagramtípusok közötti vizualizációk közötti váltás mostantól jobban megőrzi a releváns mezőket.
A színkódolást tartalmazó sávdiagramok mostantól helyesen korlátozzák több Y tengelyű mező hozzáadását.
2024. március 21.
- A Unity Catalog-modell termékcsaládja most nyilvános előzetes verzióban érhető el.
A Katalóguskezelő táblázatnézete mostantól egy Áttekintés laplal rendelkezik az elsődleges metaadatok leírásához.
- A jegyzetfüzetekhez készült SQL-raktárak mostantól általánosan elérhetőek, lehetővé teszik a teljes körűen felügyelt, azonnali és méretezhető számítási feladatok előnyeit az SQL-számítási feladatokhoz a jegyzetfüzet gazdag, együttműködésen alapuló szerzői környezetében. Lásd: Jegyzetfüzet használata SQL-raktárral.
A Lakeview-irányítópultokra az alábbi javítások és fejlesztések vonatkoznak:
- A Lakeview kiterjesztett API-támogatása lehetővé teszi irányítópultok létrehozását, lekérését, frissítését és kukák létrehozását. Lásd a Lakeview-t a REST API-referenciaban.
- Hozzáadott egy frissítés gombot a katalógusböngészőhöz az Adatok lapon.
- A Lakeview-irányítópultok mostantól az Irányítópultok előtt jelennek meg a munkaterület oldalsávJának Új menüjében. Az irányítópult-listaoldalon az Irányítópultok lap bal oldalán megjelenik a Lakeview irányítópultok lap.
- A Databricks Assistant Lakeview-hoz készült felülete egy beviteli mezővel és javaslatokkal frissült, amelyek javítják a felderíthetőséget, és segítenek a felhasználóknak megérteni az általuk feltett kérdéseket.
- A Lakeview-vizualizációk mostantól támogatják a medián aggregációkat.
- Frissítette a Színválasztót a Lakeview irányítópult vizualizációszerkesztőjében, hogy egyszerűbb felhasználói élményt nyújtsunk a táblák létrehozásakor.
- Továbbfejlesztett kördiagram-migrálás kizárólag szög- vagy színdefiníciókkal rendelkező forgatókönyvek támogatására.
- Kijavítottunk egy hibát, amely megakadályozta a szám nevű diagramok szerinti csoportosítást. A diagramok mostantól a darabszám nevű mezők szerint csoportosíthatók.
- Sávdiagramok esetén a csoport- és veremelrendezés vezérlői el vannak rejtve, ha nem alkalmazhatók a felhasználó által kiválasztott konfigurációra.
2024. március 14.
Lakeview-irányítópultok esetén:
A hisztogramok mostantól támogatják az egyéni kategorikus színeket.
- A hőtérképek mostantól támogatják a mennyiségi méretezést.
- A címek és leírások megmaradnak a vizualizációtípusok, köztük a kombinált diagramok közötti váltáskor.
- Most már megnyithatja a piszkozat irányítópult-vezérlőhöz társított mögöttes adatkészletet, ha a jobb gombbal rá kattint. Az adatkészlet az Adatok lapon nyílik meg.
Az új diagramok mostantól aliasokat és egyéni színeket alkalmaznak a numerikus oszlopokban lévő null értékekhez.
Az új diagramok mostantól osztásjeleket jelenítenek meg az y tengely tetején.
2024. március 7.
Amikor megtekint egy táblát a Catalog Explorerben, a Létrehozás gomb lehetőséget biztosít arra, hogy a Databricks SQL-irányítópult helyett Lakeview-irányítópultot hozzon létre.
A hisztogramok mostantól elérhetők a Lakeview-irányítópultokhoz. A hisztogramokat gyakran használják numerikus mezők eloszlásának vizualizációjára.
Amikor egy Databricks SQL-irányítópultot klónoz egy Lakeview-irányítópult létrehozásához, az adathalmaz-átalakítással kapcsolatos problémák a Lakeview-irányítópult új vezérlőjében hibaüzenetként jelennek meg.
Színátmenetek akkor érhetők el, ha numerikus mezőt használnak vizualizációhoz egy Lakeview-irányítópulton.
A színátmenetek mostantól a Lakeview irányítópult vizualizációszerkesztőjében lesznek közzétéve, ha egy Szín mező van megadva.
A vizualizációhoz társított cím és leírás már nem szerkeszthető, ha a megtekintő nem rendelkezik szerkesztési jogosultságokkal a Lakeview-irányítópult vázlatán.
Kijavítottunk egy hibát, amely miatt a több mint 100 adatsort tartalmazó diagramok elemleírásai helytelenül mutatták az összes adatsort. Most csak a szűrt sorozat jelenik meg.
Teljesítményoptimalizálással 30%-kal csökkent a gépelési késés az SQL-szerkesztőben.
Amikor lekérdezéseket kezel az SQL-szerkesztőben, a lekérdezések kukába helyezése automatikusan bezárja a lapot.
Kijavítottunk egy hibát az SQL-szerkesztőben, amely miatt a szöveg véletlenül ki lett jelölve az oldalpanel szélességének módosításakor.
2024. február 29., csütörtök
A Catalog Explorer sémaböngészője mostantól megjeleníti az oszlop elsődleges és idegenkulcs-korlátozásait.
A Katalóguskezelő Életút lapján látható megőrzési idő egy évre nőtt.
A jegyzetfüzetekben lévő új diagramok elemleírásai mostantól mindig a vizualizáció határán belül jelennek meg.
Megtudhatja, hogyan kezelheti programozott módon a Lakeview-irányítópultokat a REST API használatával. Lásd: Irányítópultok kezelése munkaterületi API-kkal.
A Lakeview-irányítópultok mostantól támogatják a hisztogramokat.
Továbbfejlesztett megosztás és közzététel a Lakeview-irányítópultokon:
- Továbbfejlesztett megosztási és közzétételi párbeszédpanelek, amelyek biztonságos és egyszerű megosztást tesznek lehetővé bármely fiókfelhasználó számára.
- A munkaterület böngészőből megnyitott irányítópultok a közzétett irányítópultot jelenítik meg, ha létezik. A megtekintők mostantól a legújabb közzétett verzió részleteit is megtekinthetik, beleértve a közzétevőt, az időt és a hitelesítő adatokat.
- A szerkesztők számára a Lakeview irányítópult felhasználói felületén található új legördülő kapcsolóval gyorsan válthat a piszkozatok és a közzétett verziók között.
Feburary 22, 2024
A Katalóguskezelő táblázatnézetben a Mintaadatok lap fejlesztései lehetővé teszik az oszlopok rendezését, a kijelölt adatok vágólapra másolását és a sorszámok megtekintését. Mostantól jobban megjeleníthet speciális értékeket, például JSON-objektumokat, dátumokat, numerikus és null értékeket.
A Lakeview-irányítópultok mostantól támogatják az irányítópult időszakos PDF-pillanatképeinek küldését a munkaterület felhasználóinak és értesítési célhelyeinek. Lásd: Ütemezések és előfizetések.
A Lakeview legördülő listaválasztó vizualizációs beállításainak listája betűrendbe van rendezve.
A Databricks SQL-irányítópultok Lakeview-irányítópultokra való másolásakor a nem konvertálható widgetek hibaüzenet helyett a vizualizáció konfigurációválasztóját jelenítik meg.
2024. február 15.
A kódalapú lekérdezésszűrők, például
SELECT action AS 'action::filter'
a dokumentáció el lett távolítva. A Databricks a lekérdezések frissítését javasolja a minta eltávolításához.A Lakeview-irányítópultok esetében a kördiagramok egyenlő méretű szeleteket jelenítenek meg, ha nincs megadva szögmező.
A Lakeview mostantól támogatja a kombinált diagramokat, amelyek sáv- és vonaldiagramokat kombinálva két különböző értéket jelenítenek meg ugyanazon a diagramon.
A Lakeview-ban mostantól elérhetőek a hőtérképdiagramok, amelyek színintenzitást használnak a két különálló változó közötti korreláció nagyságának megjelenítéséhez.
2024. február 8.
- Mostantól hozzáférést is kérhet, ha olyan Lakeview-irányítópultra mutató hivatkozást nyit meg, amelyhez nincs engedélye.
- A Lakeview-irányítópult szűrői mostantól explicit All and None beállításokkal rendelkeznek. A szerzők dönthetnek úgy, hogy elrejtik a Minden beállítást egyetlen választó szűrőben.
- Mostantól beállíthatja a tengelyek minimális és maximális értékeit a Lakeview-irányítópult-diagramokon.
2024. február 1.
A Databricks SQL 2024.10-es verziója elérhető
Bevezetés ütemezése
- Előzetes verzió bevezetése 2024.10-re: 2024. január 30. és 2024. február 5. között
- Aktuális bevezetés 2024.10-ben: 2023. február 13. és 2024. február 20. között
Változások 2024.10-ben
- Kijavítottuk a sérült fájlkezelést a DML-parancsokban: A DML-parancsok
DELETE
,UPDATE
ésMERGE INTO
már nem tartják be az olvasási beállításokatignoreCorruptFiles
ésignoreMissingFiles
a . Ha olvashatatlan fájlba ütközik egy táblában, ezek a parancsok akkor is sikertelenek lesznek, ha ezek a beállítások meg vannak adva. - A sorszintű egyidejűség általánosan elérhető és alapértelmezés szerint be van kapcsolva: A sorszintű egyidejűség csökkenti az egyidejű írási műveletek közötti ütközéseket a sorszintű módosítások észlelésével. A sorszintű egyidejűség csak particionálás nélküli táblákon támogatott, beleértve a folyékony fürtözésű táblákat is. A sorszintű egyidejűség alapértelmezés szerint engedélyezve van a deltatáblákon, és engedélyezve van a törlési vektorok. Lásd: Írási ütközések sorszintű egyidejűséggel.
- Sekély klón a Unity Catalog külső tábláihoz (nyilvános előzetes verzió): Mostantól használhatja a sekély klónt a Unity Catalog külső tábláival. Lásd: Shallow clone for Unity Catalog tables.
- Gyorsabb többszálas statisztikai gyűjtemény: A statisztikai adatgyűjtés akár tízszer gyorsabb a kis fürtökön, amikor Iceberg- és Parquet-táblákból fut
CONVERT TO DELTA
vagy klónoz. Lásd: Konvertálás Delta Lake-gé , parquet- és Iceberg-táblák növekményes klónozása Delta Lake-be. - Leküldéses szűrők a DeltaSource-ban a Delta-fájlokon: A jobb kihasználtság érdekében a Delta-táblák streamelési lekérdezéseinek partíciószűrői most le lesznek küldve a Delta-ba a sebességkorlátozás előtt.
Felhasználói felület frissítései
Az ebben a szakaszban felsorolt funkciók függetlenek az SQL Warehouse fent ismertetett számítási verzióitól.
A Databricks SQL-objektumok (lekérdezések, irányítópultok és riasztások) listaoldalainak Rendszergazdai nézet lapja el lett távolítva. A munkaterület rendszergazdai felhasználói megtekinthetik az összes objektumot a saját listaoldalaikon. Tekintse meg a mentett lekérdezések, az örökölt irányítópultok és a Databricks SQL-riasztások elérését és kezelését.
A lekérdezéselőzmények lapon alapértelmezés szerint az elmúlt 24 óra lekérdezései láthatók. Lásd a lekérdezési előzményeket.
A Databricks SQL-irányítópult felhasználói felületén a Klónozás a Lakeview-irányítópultra menüpont lett hozzáadva. Ezzel az eszközzel létrehozhat egy új Lakeview-irányítópultot, amely ugyanazokat a lekérdezéseket és vizualizációkat tartalmazza a meglévő Databricks SQL-irányítópultokon. Lásd: Örökölt irányítópult klónozása AI/BI-irányítópultra.
A Lakeview-irányítópultok sávdiagramjai támogatják a sávok 100%-ra normalizálását.
Kijavítottunk egy hibát, amely miatt a közzétett Lakeview-irányítópultok nagyítása helytelen nagyítási időközökre összpontosított.
2024. január 24.
- A Lakeview irányítópult vászon automatikusan módosítja a widgetek elhelyezését, hogy lehetőség szerint eltávolítsa a sorok közötti üres függőleges szóközöket.
- A Lakeview-irányítópult vizualizációinak cím- és leírásszövege között kisebb a térköz.
2024. január 18.
Kijavítottunk egy megjelenítési hibát olyan vizualizációk esetében, amelyekben az x tengelyen egyetlen dátumot megjelenítő sávdiagramok nagyon vékony sávot eredményeztek. Az új diagramvizualizációk a várt módon jelennek meg.
A Lakeview irányítópult listaoldala alapértelmezés szerint megjeleníti az irányítópultokat. Ezen a lapon szűrőkkel érheti el a más munkaterület-felhasználók tulajdonában lévő Lakeview-irányítópultokat.
2024. január 11.
A Databricks SQL-lekérdezések és irányítópult API-k támogatják a futtatás szerepkör-beállítás programozott módon történő módosítását.
A Lakeview támogatja az irányítópultok fájlokként való exportálását és importálását, hogy megkönnyítse a munkaterületek közötti vázlat irányítópultok reprodukálását. Lásd: Irányítópult exportálása, importálása vagy cseréje
2024. január 4.
- Az elsődleges kulcs és az idegen kulcs entitáskapcsolati diagramjai a Catalog Explorerben. Lásd : Az entitáskapcsolati diagram megtekintése.
2023. december 21.
A Lakeview Counter vizualizációtípus színeket jelenít meg a fő Érték és Cél mezők értékeinek összehasonlításakor
BigInt
.A Lakeview-táblák oszlop láthatóságának egyesítésekor megjelenő elemleírások javultak. A várt módon viselkednek, és nem maradnak meg.
A felhasználók mostantól a Databricks Assistant használatával vizualizációkat hozhatnak létre a Lakeview-ban. Lásd: Vizualizációk létrehozása a Databricks Assistant használatával.
Új diagramok esetén a hőtérkép típusú diagramok megfelelnek a fordított beállításnak.
Kijavítottunk egy megjelenítési teljesítményproblémát a nagy számú vizualizációval rendelkező jegyzetfüzetek esetében.
2023. december 14.
- Kijavítottunk egy hibát, amely miatt a Lakeview-irányítópultok nem jelentek meg a Lakeview-listaoldalon manuális oldalfrissítés nélkül.
- A feloldókulcs használatával megszakíthatja a Lakeview widget létrehozását, amikor a vásznon helyezi el.
- A Katalóguskezelő mostantól a Felhasználói felületen jeleníti meg a Vector Search-indexeket a Mozaik AI Vector Search nyilvános előzetes verziójának részeként.
2023. december 7.
Felhasználói felület frissítései
A Lakeview-irányítópultok hozzáadhatók a kedvencekhez a gyors hozzáférés érdekében.
A Lakeview-irányítópultok készítésekor a billentyűparancsok másolása és beillesztése támogatott. Emellett a törlési kulcs eltávolítja a kijelölt widgeteket.
Továbbfejlesztett Lakeview widgetcímek és leírások, amelyek megakadályozzák a szöveg kivágását a betöltés során.
Kijavítottuk a vizualizáció formázási problémáját, amely miatt a nagy egész számértékek tévesen lebegőpontosként jelentek meg.
Kijavítottunk egy hibát a Databricks SQL-irányítópultokkal kapcsolatban, amelyekben a kibontott diagramnézetek néha üres diagramokat mutattak.
Az X és az Y tengelyen egyaránt mennyiségi mezőket tartalmazó sávdiagramok olvashatóbb adatfeliratokat jelenítenek meg.
Az SQL-szerkesztőben kijavítottuk a hibát, hogy a címben szereplő szót
stream
tartalmazó táblák többé ne ütközhessenek a fenntartott kulcsszóval. Ezek a táblák mostantól a várt módon jelennek meg a sémaböngészőben, és nem jelennek meg hibakijelölésben.A lekérdezéselőzmények lapja mostantól támogatja az oszlopok átméretezését és az oszlopkijelöléseket.
A lekérdezéselőzmények lap két új oszlopot támogat: a lekérdezés forrását és a lekérdezés forrástípusát.
Az OLYAN BI-beállítások, mint a Tableau és a Power BI, könnyebben megtalálhatók a Katalóguskezelőben a jogosult oldalakon.
2023. november 30.
Felhasználói felület frissítései
Az ebben a szakaszban felsorolt funkciók függetlenek az SQL Warehouse fent ismertetett számítási verzióitól.
A Lakeview-ban a tortadiagramok mostantól testre szabott színhozzárendelésekkel rendelkeznek.
A lakeview-beli vizualizációátalakítások mostantól megmaradnak a kompatibilis mezőtípusok közötti váltáskor.
A Lakeview kördiagram szögcsatornáinak címbeállításai hozzáadva.
A Lakeview-adathalmaz legördülő listája mostantól kereshető a könnyebb navigálás érdekében.
A Lakeview támogatja a 10 000 alatti értékek teljes numerikus megjelenítését, kiküszöbölve a rövidítéseket.
A Lakeview színkód-kategorikus dátummezőihez hozzáadott képesség.
A Lakeview-felhasználók mostantól kiemelhetik a diagram jelmagyarázatait a kurzorukkal az értékek másolásához és beillesztéséhez.
A Lakeview-ban a kördiagramok mostantól egy feliratváltó kapcsolóval rendelkeznek.
Szabványosított egy alapértelmezett kék színt az összes Lakeview-vizualizációban.
Az átalakítások Lakeview oszlopikonjai mostantól következetesen egyeznek a használt átalakítási módszerrel.
A Lakeview szerkesztési paneljének vezérlői mostantól automatikusan körbefuttatják a jobb olvashatóságot.
Megjelent egy továbbfejlesztett színszerkesztő a Lakeview-vizualizációkhoz.
A Lakeview-ban a táblázat betűtípus-feltételeinek vezérlője mostantól be van csomagolva az olvasási állapot javítása érdekében.
Továbbfejlesztett sötét módú kompatibilitás az új diagramok címkéihez.
Az új diagramok mostantól következetesen rangsorolják a címkék megjelenítését a sávokban.
Kijavítottunk egy hibát, amely miatt néhány jobb gombbal kattintott menüművelet nem működött az SQL-szerkesztőben.
2023. november 16.
Felhasználói felület frissítései
Az ebben a szakaszban felsorolt funkciók függetlenek az SQL Warehouse fent ismertetett számítási verzióitól.
A Databricks SQL-lekérdezések, riasztások és irányítópultok új ütemezővel és ütemezési felülettel rendelkeznek.
A Lakeview-vezérlők mostantól könnyebben átméretezhetők egy nagyobb átméretezés triggerzónája miatt.
A munkaterület rendszergazdái mostantól módosíthatják a Lakeview-irányítópultok tulajdonosát . Szerkesztési módból Egy Lakeview-irányítópulton:
- Kattintson a Megosztás gombra
- Kattintson a következőre:
- Kattintson az Új tulajdonos hozzárendelése elemre
A felhasználók be- és kikapcsolhatják a címkéket a Lakeview-ban.
Vizualizációk:
- Az új diagramfeliratok most már jobban szeretik a sávon belül lenni, ha lehetséges.
- Az új diagramfeliratok mostantól megfelelően jelennek meg a halmozott sávokon, amelyek elég szélesek a teljes címke megjelenítéséhez.
- A sávdiagramokon belüli címkeszínek mostantól egységesebbek.
2023. november 9.
Változások 2023.50-ben:
Kiemeli:
- Mostantól használhatja az elnevezett paraméter-meghívást az SQL-en és a Python UDF-en.
SQL Language-frissítések: A következő beépített függvények lettek hozzáadva:
from_xml
: XML-fájlSTRING
elemzése egySTRUCT
.schema_of_xml
: Séma származtatása XML-fájlbólSTRING
.session_user
: A bejelentkezett felhasználót adja vissza.try_reflect
: Kivétel helyett visszaadjaNULL
, ha egy Java-metódus meghibásodik.
A következő beépített függvények lettek továbbfejlesztve:
- függvényhívás. A függvények táblaargumentumai támogatják a particionálást és a rendezést: Mostantól
PARTITION BY
a záradékok ésORDER BY
a záradékok segítségével szabályozhatja, hogy a táblaargumentumok hogyan legyenek átadva egy függvénynek. mode
: Egy determinisztikus eredményt kényszerítő opcionális paraméter támogatása.to_char
: Új támogatás aDATE
,TIMESTAMP
ésBINARY
.to_varchar
: Új támogatás aDATE
,TIMESTAMP
ésBINARY
.array_insert()
negatív indexek esetén 1-alapú: Aarray_insert
függvény 1-alapú mind a pozitív, mind a negatív indexekhez. Most egy új elemet szúr be a -1 index bemeneti tömbjeinek végére.
Felhasználói felület frissítései
Az ebben a szakaszban felsorolt funkciók függetlenek az SQL Warehouse fent ismertetett számítási verzióitól.
Képi:
- Az új diagramok elemleírásai csak a magas számosságú diagramok rámutatott elemeit jelenítik meg.
- Az új diagramok automatikusan nullára igazítják a kéttengelyes diagramokat.
- A diagramok -90 fokról 90 fokra módosították a elforgatott feliratot és a tengely szövegének irányát.
- A diagramok mostantól a címke szélességével határozzák meg a forgatást.
Lakeview-irányítópultok:
- Javítás: A Lakeview-irányítópultok táblázatsorai már nem adnak hozzá függőleges kitöltést, ha csak kis számú sort adnak vissza.
- Az új Lakeview irányítópult widget klónozása először megpróbálja elhelyezni a klónt az eredeti jobb oldalán, feltéve, hogy elegendő hely van a vásznon. Ha nincs elegendő hely, a klón az eredeti alá kerül.
- A Megosztás párbeszédpanelen mostantól hozzárendelheti egy Lakeview-irányítópult tulajdonosát.
SQL-szerkesztő: Az automatikus kiegészítés mostantól kevésbé agresszív, és az utasítások végén automatikusan elutasítja azokat
2023. november 2.
Fejlesztések:
Az alábbiakban a Lakeview irányítópult-leállás fejlesztéseit találjuk:
- Különböző ikonokat adott hozzá a táblákhoz, nézetekhez és materializált nézetekhez.
- Számos felsőbb rétegbeli adatforrás esetén támogatott a függőleges görgetés.
- Továbbfejlesztett hibaüzenet, ha a megjelenítő nem rendelkezik engedélyekkel a felsőbb rétegbeli objektumon.
- Tisztázott üzenetkezelés mintaadattáblák és HMS-adatok köré.
- Kulcsértékcímkéket adott hozzá a felsőbb rétegbeli adatforrásokhoz.
Rögzít:
- Kijavítottunk egy hibát az új diagramokban, amely megakadályozta a renderelést egy logikai értékekkel rendelkező sorozat átnevezése után.
2023. október 26.
A Databricks SQL 2023.45-ös verziójának változásai
Kiemeli:
- Általánosan elérhető a prediktív I/O a frissítésekhez. Lásd : Mi a prediktív I/O?
- A törlési vektorok már általánosan elérhetők. Mik azok a törlési vektorok?
Lekérdezésoptimalizálások:
- Eltávolította a külső illesztést, ha mindegyik különböző összesítő függvény. SPARK-42583
- Optimalizálta a szűrési predikátumok sorrendjét. SPARK-40045
SQL-függvényfrissítések:
- Az implicit oldaloszlop-aliasfeloldás támogatása hozzáadva a következőhöz
Aggregate
: . SPARK-41631 - Implicit oldaloszlop-alias támogatása a Windows lekérdezéseiben. SPARK-42217
- A Datasketches
HLLSketch
támogatása. Lásd hll_sketch_agg összesítő függvényt. - Hozzáadta a függvényt
try_aes_decrypt()
. Lásd try_aes_decrypt függvényt. - A CBC mód támogatása és
aes_decrypt()
aaes_encrypt()
. Lásd aes_decrypt függvényt. - Adjon hozzá 3-args függvény aliasokat DATE_ADD és DATE_DIFF.
- A aes_encrypt virtuális gép és az AAD támogatása hozzáadva. SPARK-43290
- Bitképfüggvények implementálása. SPARK-44154
- Hozzáadta az aliast a
to_varchar
következőhözto_char
: . Lásd to_varchar függvényt. - Támogatás hozzáadva
array_compact
. Lásd array_compact függvényt. - Az udf
luhn_check
támogatása. Lásd luhn_check függvényt. - A beépített függvények nevesített argumentumainak elemzői támogatása hozzáadva. SPARK-44059
TABLE
Az argumentumelemző szabály támogatása a következőhözTableValuedFunction
: . SPARK-44200array_insert
most 0 indextel meghiúsul. SPARK-43011- Hozzáadott
NULL
értékek aINSERT
céltáblánál kevesebb oszlopot tartalmazó, felhasználó által megadott listákhoz. SPARK-42521 DECODE
függvény hibás eredményt ad vissza, ha a null értéket adja vissza. SPARK-41668
Felhasználói felület frissítései
Fejlesztések:
A Lakeview SQL-szerkesztő mostantól támogatja a billentyűparancsokat a lekérdezések futtatásához.
A Lakeview szűrői mostantól az elmúlt 7, 14, 28, 30, 60 és 90 napra vonatkozó gyors relatív dátumtartomány-kijelöléseket sorolják fel.
Az adatmezőnevekben lévő időszakok többé nem eredményeznek üres diagramokat.
Az örökölt sémaböngésző mostantól a Unity Catalogtal működik.
Teljesítménybeli fejlesztéseket hajtott végre, hogy csak az aktív lap legyen betöltve az SQL-szerkesztőben, így a kezdeti betöltési idő akár 20%-kal is csökkenhet.
Az AI által létrehozott táblabejegyzések mostantól általánosan elérhetők a Katalóguskezelőben.
Javítások:
- Az idősávdiagramokon lévő sávok mostantól a dátum osztásjele fölé vannak igazítva.
- Az összesítő kifejezéseket tartalmazó adatfelirat-sablonok most már a megfelelő numerikus formázókat használják.
- Az új diagramok nagyítása mostantól kategorikus méretezési csoporttal működik az időbeli adatok használatával.
Új cikk:
- Megjelent egy új cikk, amely az összes Lakeview-vizualizációt tartalmazza, beleértve a képernyőképeket és jegyzeteket, amelyek bemutatják, hogyan hozhatja létre újra az egyes vizualizációkat az egyes képernyőképeken. Lásd az irányítópult vizualizációs típusait.
2023. október 19.
Fejlesztések:
Mostantól elérhető a sémaböngésző húzása.
A Lakeview-irányítópultok Tábla kiválasztása modálisa megkönnyíti a katalógusban vagy sémában lévő összes tábla kiválasztását, és mostantól automatikus kiegészítési keresési előrejelzéseket használ beíráskor.
Javítások:
A jelmagyarázat-kijelölési elemleírás útmutatása a Mac-felhasználók és a Windows-felhasználók használatát
cmd
határozza megctrl
.A csonkolt üzenetek jobb láthatósága a Lakeview-irányítópultokon, ha a renderelt adatok túllépik a korlátokat.
A csonkolt adatokat tartalmazó diagramok a szerkesztőben látható egységes színeket jelenítik meg.
2023. október 12.
Fejlesztések:
A speciális karaktereket tartalmazó szövegszűrő értékek mostantól helyesen szűrnek a Lakeview-irányítópultokon.
Az új diagramok támogatják
@@name
a pontdiagramok adatfeliratait.A testreszabott százalékformátumok az új diagramokban lévő csoportosított diagram elemleírásokra vonatkoznak.
A munkaterület kötési bővítményének felhasználói felülete ga.
Javítások:
- Továbbfejlesztett címkemegjelenítés új diagramokon, hogy a címkék ne terjedjenek ki a diagram határain kívülre.
- A jobb láthatóság érdekében megnövelte az új diagramok osztásjeleinek és rácsvonalainak kontrasztját.
- A tengelycímke térközének növelése az új diagramok olvashatóságának javítása érdekében.
2023. október 5.
Fejlesztések:
Pontos elemleírások lettek hozzáadva a közzétételi mód műveleteihez és a dátumhoz a Lakeview-irányítópultokon.
A Lakeview-táblavizualizációk feltételes formázási és hivatkozássablonjai mostantól támogatják a rejtett oszlopokat.
Optimalizált címkehelyezés széles sávú időbeli diagramokhoz az új diagramok egyértelműségének javítása érdekében.
A Lakeview számlálóvizualizációja a többi mező eltávolítása után is megőrzi az átalakításokat, biztosítva a konzisztenciát.
Ha egy diagram egy adatsorára mutat, az elemleírásban elhalványítja a környező sorozatokat, így javítva az új diagramok olvashatóságát.
A százalékértékeket használó új diagramok mostantól abszolút értékekkel jelenítik meg az elemleírásokat.
Automatikus kiegészítési támogatás hozzáadva a kötetek létrehozásához.
A nem aktív lapok bezárása többé nem váltja a lapokat.
A kijelölt futtatás egyértelműen jelzi a szöveg kiemelését.
Javítások:
Továbbfejlesztett hibaüzenet-szövegezés a kimutatástáblákban az adatok csonkolásakor.
Kijavítottunk egy megjelenítési hibát a kimutatástáblákban, ahol a színek nem voltak láthatók BigInt-adattípusok használatakor.
Amikor számos jelmagyarázatelemet tartalmazó új diagramba tölt le PNG-ket, eltávolította a túlcsordulás jelmagyarázat-bejegyzéseinek színszimbólumát.
Az új diagramokon lévő vonalak egyenletes vastagságot tartanak fenn még a legfelső nézethatáron is.
A Lakeview-ban, ha nincs adathalmaz, a vászon adathalmazválasztója üres.
Az SQL-elemző megfelelően észleli a Delta Live-táblákat, és nem jelenik meg érvénytelen táblaként a Sémaböngészőben.
Elemleírások hozzáadva az oldalsávhoz.
2023. szeptember 28.
Fejlesztések:
A közzétett Lakeview-irányítópultok most már rendelkeznek frissítési gombbal.
Továbbfejlesztett hibaüzenetek azok számára, akik nem férnek hozzá a Lakeview-irányítópultokhoz.
A Lakeview-irányítópultok szűrőkonfigurációja mostantól a kijelölési lista tetején lévő érvényes mezőket sorolja fel.
Ha egy diagramot PNG-ként tölt le egy Lakeview-irányítópultról, az megőrzi a címet és a leírást.
A Katalóguskezelőben a deltatáblák előzményeinek javítása magában foglalja a dátumtartomány, a felhasználó és a művelettípus szűrőinek hozzáadását, valamint a rendezhető oszlopokat, valamint a kapcsolódó feladatokra és jegyzetfüzetekre mutató beágyazott hivatkozásokat.
A sötét mód támogatása jelmagyarázatok, elemleírások és táblázatvizualizációk között is elérhető.
Rögzít:
- A szűrőkijelölések már nem törlődnek a Lakeview-irányítópultok frissítésekor.
2023. szeptember 21.
Fejlesztések:
- Javult a kimutatástáblák renderelési teljesítménye.
- Új DuBois-minta a felhasználói felületen a vonalas táblázatos nézetekhez.
2023. szeptember 14.
Javulás:
- A fájlnevek mostantól megmaradnak, amikor új diagramvizualizációkba töltik le a PNG-ket. Lásd: Új diagramvizualizációk a Databricksben.
2023. szeptember 7.
A Databricks SQL 2023.40-es verziója elérhető
Bevezetés ütemezése
- Előzetes verzió a 2023.40-hez: 2023. szeptember 5. és 2023. szeptember 11. között
- Aktuális bevezetés 2023.40-ben: 2023. szeptember 18. és 2023. szeptember 25. között
Változások 2023.40-ben:
- A Címkék mostantól elérhetők a Unity Katalógusban.
- A Databricks Runtime hibát ad vissza, ha egy fájl módosul a lekérdezéstervezés és a hívás között.
- Az Azure Databricks ODBC/JDBC-illesztőprogramok támogatása.
- Idősor oszlopcímkézésének engedélyezése.
- Új bitkép SQL-függvények.
- Továbbfejlesztett titkosítási függvények.
- Unity Catalog-támogatás a következőhöz:
REFRESH FOREIGN.
INSERT BY NAME
mostantól támogatott.- Materializált nézetek megosztása a Delta Sharing szolgáltatással.
Felhasználói felület frissítései
Fejlesztések:
Új diagramok érhetők el, amelyek gyorsabb renderelési teljesítményt, gyönyörű színeket és továbbfejlesztett interaktivitást mutatnak be. Lásd: Új diagramvizualizációk a Databricksben.
A Lekérdezésprofil gráfnézetében mostantól megtekintheti az Illesztés típust a lekérdezéstervben illesztést tartalmazó csomópontokon.
Az Adatkezelőt a Katalóguskezelőre nevezték át, hogy felismerje azt a tényt, hogy a Unity Catalogban az összes biztonságos objektummal dolgozhat, nem csak adatobjektumokkal. Lásd: Mi az a Katalóguskezelő?.
A Databricks SQL Statement Execution API mostantól ga, a Databricks SQL 2023.35-ös és újabb verziójával. Az API lehetővé teszi sql-utasítások küldését a Databricks SQL Warehouse-beli végrehajtáshoz, az állapot ellenőrzéséhez és az eredmények lekéréséhez, vagy egy futó SQL-utasítás végrehajtásának megszakításához. Lásd: Utasításvégrehajtási API.
2023. augusztus 31., csütörtök
Új funkció:
- A Unity-katalógus címkézése nyilvános előzetes verzióban érhető el. Címkék használatával egyszerűsítheti az adategységek keresését és felderítését. Lásd: Címkék alkalmazása a Unity Catalog biztonságos objektumaira.
2023. augusztus 24.
Javulás:
- Az automatikus kiegészítés nem javasol javaslatokat a szóközbillentyű lenyomása után.
- A Sémaböngésző
live
már nem látja hibás táblákként a Delta Live Tableset.
2023. augusztus 16.
Javulás:
- A katalógus legördülő menüje az SQL-szerkesztőben most bezárul, amikor lapokat vált. Korábban, amikor füleket váltott, a legördülő lista nyitva marad.
2023. augusztus 10.
Javulás:
- Az automatikus kiegészítés mostantól támogatja a Unity-katalóguscímkék beállításának új szintaxisát. A parancsokkal kapcsolatos információkért tekintse meg az SQL nyelvi referenciát.
2023. augusztus 3.
Fejlesztések:
- A mögöttes Monaco-szerkesztő mostantól a 37.1-es verziót használja.
- A Delta-parancsok automatikus kiegészítésének
SHOW ARCHIVED FILES FOR
támogatása.
2023. július 27.
Fejlesztések:
- Az SQL-szerkesztő mostantól kompatibilis a Windows újvonalas karaktereivel, biztosítva, hogy a lekérdezésformázás minden esetben a várt módon működjön.
- A lekérdezésprofil-navigációt a jegyzetfüzet eredményeiből nyithatja meg. Lekérdezések esetén futtassa a lekérdezést az SQL Warehouse-nal.
2023. július 20.
A Databricks SQL 2023.35-ös verziója elérhető
Bevezetés ütemezése
- Előzetes verzió bevezetése a 2023.35-ös verzióhoz: 2023. július 18. és 2023. július 24. között
- Aktuális bevezetés a 2023.35-ös verzióhoz: 2023. július 31. és 2023. augusztus 8. között
2023.35-ös változások:
- Fokozott megbízhatóság a Unity Catalog sekély klónozásához
VACUUM
. - Python UDF-ek támogatása az SQL-ben.
- A Delta Lake UniForm for Iceberg nyilvános előzetes verzióban érhető el.
- A Delta Lake folyékony fürtözés nyilvános előzetes verzióban érhető el.
- A Delta Lake archiválási támogatása.
- AZ IDENTIFIER záradék támogatása.
- A Unity Catalog támogatása Python és Pandas felhasználó által definiált függvényekhez (UDF-ekhez).
Javulás:
- A Katalóguskezelőben a táblázat népszerűsége minden Unity Catalog-felhasználó számára elérhető.
2023. július 13.
Javulás:
- A Unity Catalog felhasználói mostantól további táblázatelemzéseket tekinthetnek meg a Katalóguskezelőben, például a gyakran csatlakoztatott táblákat, egy adott tábla gyakori felhasználóit, valamint a gyakran használt jegyzetfüzeteket és irányítópultokat.
2023. június 22.
Nyilvános előzetes verzió:
- A Databricks SQL mostantól támogatja a végpontokat kiszolgáló modellen üzemeltetett nagy nyelvi modelleket (LLM-eket). Hívás
ai_query()
az LLM eléréséhez. Ez a függvény csak nyilvános előzetes verzióban érhető el a Databricks SQL Pro és a Kiszolgáló nélküli verzióban. A nyilvános előzetes verzióban való részvételhez küldje el az AI Functions nyilvános előzetes verziós regisztrációs űrlapját.
2023. június 15.
Új funkció:
- A Feladatok sql-feladatai mostantól általánosan elérhetők. A Lekérdezések, irányítópultok és riasztások a Feladatok lapon vezénylhetők. A feladatokhoz lásd az SQL-feladatot.
- Az új sémaböngésző mostantól nyilvános előzetes verzióban érhető el, amely egy frissített UX-t, egy For You lapot és továbbfejlesztett szűrőket tartalmaz. A sémaböngésző a Databricks SQL-ben, a Catalog Explorerben és a jegyzetfüzetekben érhető el. Lásd: Adatok tallózása.
2023. június 8.
A DBSQL 2023.30-ás verziója elérhető
Változások 2023.30-ban
- Új beépített SQL-függvények, például
array_prepend(array, elem)
: ,try_aes_decrypt(expr, key [, mode [, padding]])
éssql_keywords()
. - Most már használhatja a sekély klónt új, felügyelt Unity Catalog-táblák létrehozásához a Unity Catalog meglévő felügyelt tábláiból. Lásd: Shallow clone for Unity Catalog tables.
- Mostantól használhat
CLONE
CONVERT TO DELTA
olyan Iceberg-táblákat, amelyek csonkolt típusúint
oszlopokon definiált partíciókat tartalmaznak,long
ésstring
. A csonkolt típusúdecimal
oszlopok nem támogatottak. START VERSION
mostantól elavult a következőreALTER SHARE
: .
Felhasználói felület frissítései
Rögzít:
- A számlálóvizualizáció mostantól támogatja a formázást nagy egész számok használatakor.
2023. június 1., csütörtök
Fejlesztések:
A bináris adatok mostantól hexa sztringként jelennek meg a nyílformátum használatakor.
Az SQL Statement API-ban a CSV formátum mostantól támogatott a
EXTERNAL_LINKS
diszpozícióhoz. Ez lehetővé teszi, hogy az ügyfelek akár 100 GiB-adatot is kinyerjenek CSV formátumban, előre aláírt URL-címekkel, míg aINLINE
JSON korlátja 16 MiB.Az Azure Databricks SQL Pro minden kínai régióban elérhető. Mostantól az SQL Pro az alapértelmezett raktár a felhasználói felületen. Az API alapértelmezett értéke továbbra is klasszikus.
2023. május 29.
Új funkció:
- Most már használhatja az adatfeladási felhasználói felületet az adatok egy külső Unity Catalog-helyként definiált felhőobjektum-tárolási útvonalról való betöltésére. További információ: Adatok betöltése Unity-katalógus külső hely használatával.
2023. május 25.
Fejlesztések:
- Most már válthat az automatikus kiegészítés eredménypaneljén.
- Tiltsa le az enter billentyűt, hogy többé ne fogadja el az automatikus kiegészítési javaslatokat. A DBSQL felhasználói beállításai területen kattintson a Szerkesztő beállításai, majd az Új szerkesztő beállításai elemre. Az Enter billentyű kikapcsolása automatikus kiegészítési javaslatokat fogad el.
Javítások:
- A rendezett táblázatfejlécek mostantól színekkel rendelkeznek.
- A diagramvonalak most már helyesen jelennek meg.
2023. május 18.
Javulás:
- Az SQL Statement API-ban a
EXTERNAL_LINKS
diszpozíció mostantól támogatja aJSON_ARRAY
formátumot. Akár 100 GiB-adatot is kinyerhet JSON formátumban, előre aláírt URL-címekkel. AINLINE
JSON korlátja 16 MiB.
2023. május 11.
Új funkció:
- A Sémaböngésző mostantól általánosan elérhető a Catalog Explorerben.
Fejlesztések:
- A rámutatásos táblázat részleteinek panelje kevésbé érzékeny.
- A feloldókulcs ekkor bezárja az automatikus kiegészítés panelt.
- A nézetdefiníciók szintaxiskiemelést kaptak a Katalóguskezelő részletek lapján.
Javítások:
- A kimutatástáblák mostantól helyesen jelennek meg Windows-eszközökön.
- A befejezési javaslatok most már megfelelően követik az első kulcsszó esetét.
2023. május 4.
A Databricks SQL 2023.26-os verziója elérhető
Bevezetés ütemezése
- Előzetes verzió a 2023.26-os verzióhoz: 2023. április 19. és 2023. április 25. között
- A 2023.26-os verzió aktuális bevezetése: 2023. május 3. és 2023. május 10. között
Változások 2023.26-ban
- A Photon hibát ad vissza, ha egy fájl módosul a lekérdezések tervezése és végrehajtása között.
- Új funkciók és kiterjesztett támogatás a prediktív I/O-funkciókhoz. Lásd: Databricks Runtime 13.0 (EoS).
- Az Azure Databricks-összekötő használatával csatlakozhat egy másik Azure Databricks-munkaterülethez.
CREATE TABLE LIKE
funkció a Delta-táblákhoz.- Új metaadatoszlopmezők, amely a fájlblokk kezdetét és hosszát jelöli.
- Új H3 térinformatikai függvények. Lásd: H3 térinformatikai függvények.
- Új beépített SQL-függvények. Lásd: Databricks Runtime 13.0 (EoS).
Felhasználói felület frissítései
Fejlesztések:
- A rendszergazdák a felhasználói felületen vagy az API-val módosíthatják a raktártulajdonosokat. Lásd: SQL-raktár kezelése.
- A Katalóguskezelő mostantól megjeleníti a fiókszolgáltatás-tagokat a Unity Catalogban található objektumok felhasználói listájában. A fiókszolgáltatás-tagok például láthatók a jogosultságok szerkesztésekor vagy a tulajdonosok módosításakor a Catalog Explorerben.
- Az egyéni diagramcímkék támogatják az adathalmaz bármely oszlopának hivatkozását.
- Az irányítópult-szűrők mostantól betöltik az oszlopneveket, még akkor is, ha olyan lekérdezéseket használnak, amelyek nem rendelkeznek katalógus- vagy sémainformációval.
2023. április 27.
Fejlesztések:
- Az SQL-szerkesztő mostantól a Monaco-szerkesztőre támaszkodik a megbízhatóbb szerkesztési élmény érdekében.
- Az SQL-előzmények listaoldala (Lekérdezések) mostantól a Dubois tervezőrendszert is tartalmazza.
2023. április 20.
Fejlesztések:
- Új kimutatástáblákat vezet be, amelyek lehetővé teszik több mint 64 ezres eredmények összesítését.
- A Databricks SQL-táblák és -vizualizációk mostantól támogatják a BigInt, a 38 bites decimális és a nem UTF-8 karaktereket. Számok esetében az alapértelmezett beállítás mostantól felhasználó által definiált számjegy pontossága.
- Az automatikus kiegészítés mostantól a Unity Catalog-táblák gyakori korábbi illesztéseit javasolja, amelyeket a Unity Catalog adatkészletadatai hajtanak végre a Databricks Runtime 12.0-s vagy újabb verziókban.
Új funkció:
- Egy kiválasztott nagy nyelvi modell (LLM) által létrehozott szöveget ad vissza a ai_generate_text. Ez a függvény csak nyilvános előzetes verzióban érhető el a Databricks SQL Pro és a Kiszolgáló nélküli verzióban. A nyilvános előzetes verzióban való részvételhez töltse ki és küldje el az AI Functions nyilvános előzetes verziós regisztrációs űrlapját.
2023. április 13.
Új funkció:
- A
TIMESTAMP_NTZ
típus az év, hónap, nap, óra, perc és másodperc mezőből álló értékeket jelöli. Minden műveletet az időzónától függetlenül hajtunk végre. Lásd TIMESTAMP_NTZ típust.
Fejlesztések:
- A felhasználók mostantól formázott eredményeket küldhetnek a riasztásokban a
QUERY_RESULT_TABLE
címkével egy egyéni riasztási üzenetben. - A felhasználók mostantól megtekinthetik a Unity Catalog-táblák fájladatainak méretét a Catalog Explorerben.
2023. április 6.
A Databricks SQL 2023.20-ás verziója elérhető
Bevezetés ütemezése
- Előzetes verzió bevezetése 2023.20-ra: 2023. március 15. és 2023. március 23. között
- Aktuális bevezetés 2023.20-ra: 2023. március 27. és 2023. április 3. között
Változások 2023.20-ban
- A Delta Lake sémafejlődése támogatja a forrásoszlopok egyesítési utasításokban való megadását.
- Távolítsa el az összes NULL elemet egy tömbből a array_compact használatával.
- Ha elemeket szeretne hozzáfűzni egy tömbhöz, használja a array_append.
- A bizalmas sztringértékek anonimizálásához használja a maszk függvényt.
- A gyakori hibafeltételek mostantól SQLSTATE-t adnak vissza.
- Táblaértékű generátorfüggvények meghívása egy lekérdezés normál
FROM
záradékában. - A bináris és a strukturált típusok közötti adatcseréhez használja az
from_protobuf
ésto_protobuf
a függvényeket. Lásd: Olvasási és írási protokollpufferek. - Továbbfejlesztett konzisztencia a Delta véglegesítési viselkedéséhez a ,
delete
ésmerge
parancsokkal kapcsolatosupdate
üres tranzakciók esetében. - Viselkedésváltozás
- Az oldalirányú oszlop alias funkciója viselkedésbeli változásokat vezet be a névfeloldás során. Lásd a viselkedés változásait.
Felhasználói felület frissítései
Fejlesztések:
- A Katalóguskezelő mostantól támogatja a Hive metaadattár törlését.
- A vizualizációszerkesztő kezdeti állapotának üzenete a Hiányzó kötelező oszlopokról a Nincs adat értékre módosult.
2023. április 3.
Új funkció:
- A tábla létrehozása vagy módosítása fájlfeltöltési oldalról mostantól támogatja a JSON-fájlok feltöltését. További információ: Tábla létrehozása vagy módosítása fájlfeltöltéssel.
2023. március 30.
Fejlesztések:
- A raktárfigyelési oldalon mostantól megtekintheti a kiválasztott időtartomány lekérdezési előzményeit, valamint a méretezési diagramokat. Megtekintheti az aktuálisan futó és várólistás lekérdezéseket, az aktív SQL-munkameneteket, a raktár állapotát és az aktuális fürtszámot is. Lásd: SQL-raktár figyelése.
- A térképfürtök alapértelmezés szerint ki van kapcsolva a jelölőtérképekben.
- Elemleírások lettek hozzáadva a vizualizáció csonkításához és a renderelési korlátokhoz.
Javítások:
- A diagramok most már megfelelnek az eredeti sorrendnek, amikor a rendezés le van tiltva a tengelyértékek esetében, és a diagram oszloponként csoportosítja a diagramot.
2023. március 23.
Fejlesztések:
- A vizualizációk mostantól támogatják a heti időzítést.
Total
Mostantól a 100 X 100 cellán túli összes adatot 64 ezres értékre számítja ki, így a jegyzetfüzetek kimutatástáblái is megjelennek.- A felhasználók mostantól formázhatják a cellaértékeket az új jegyzetfüzetek kimutatástáblájában.
- A fájl-, lekérdezés- és szolgáltatástár-leállás elérhető.
2023. március 16.
Javulás:
- Szintaxis támogatása
GROUP BY ALL
.
2023. március 9.
Új funkció:
- A Databricks SQL Statement Execution API nyilvános előzetes verzióban érhető el. Az utasításvégrehajtás olyan végpontokat biztosít, amelyek SQL-utasításokat futtatnak egy Databricks SQL Warehouse-on. Emellett ellenőrizheti az állapotot, lekérheti az eredményeket, és megszakíthatja a futó SQL-utasítást.
Javulás:
- Az SQL felügyeleti konzol az általános rendszergazdai beállításokkal kombinálva egységes felületet hoz létre a rendszergazdai felhasználók számára. Mostantól minden SQL-rendszergazdai beállítás elérhető a felügyeleti konzolról.
- A riasztási célhelyeket mostantól értesítési célhelynek nevezzük.
Javítások:
- A táblázatokban már nem jelenik meg két görgetősáv.
- Az üres widgetcímek már nem lesznek felülírva az irányítópultokon.
2023. március 2.
Rögzít:
- Mostantól a táblák relatív URL-címeit is használhatja az irányítópultok eléréséhez.
2023. február 23.
Javulás:
TINYINT
mostantól támogatott a jegyzetfüzetek eredménytábláiban.
Rögzít:
- Kijavítottunk egy hibát, amely miatt a létrehozási irányítópult-szűrő modális görgetése hibát eredményezett.
2023. február 16.
Fejlesztések:
- A diagramokon lévő adatfeliratok mostantól több karaktert mutatnak a leírások csonkolásának elkerülése érdekében.
- Az automatikus kiegészítés mostantól felismeri és a
range()
Python UDF-függvényeketcreate
. - Az automatikus kiegészítés mostantól nem kezdeményez kódrészleteket tizedesjeleken és kód megjegyzéseken belül.
Javítások:
- A felhasználók mostantól nagyíthatják a térképeket.
- A jegyzetfüzetekben a színek mostantól megfelelően vannak hozzárendelve a diagramokhoz.
2023. február 2., csütörtök
Fejlesztések:
- Támogatás a
DESCRIBE DETAILS
szerkesztőben. - Továbbfejlesztett sémaböngésző betöltési sebessége.
- Mostantól megtekintheti a lehetséges oszlopok listáját az oldalpanelen
SELECT *
.
2023. január 26.
Javulás:
- A lekérdezés hibaüzenetei mostantól a hibát leíró kapcsolódó dokumentációs témakörre mutató hivatkozásokat tartalmaznak.
2023. január 19.
Fejlesztések:
- Most már megtalálhatja az Újdonságok panelt, amely kiemeli a legfontosabb fejlesztéseket. A panelt az ajándék ikonra kattintva nyithatja meg és zárhatja be.
- A rendszergazdák mostantól módosíthatják az SQL-raktárak tulajdonjogát.
- Mostantól több vizualizációra is szűrhet egy irányítópulton, ha a Szűrő hozzáadása>gombra kattint, és kiválasztja a szűréshez szükséges lekérdezést és oszlopokat.
2023. január 12.
Fejlesztések:
- Az irányítópultok vizualizációs widget-címei mostantól vizualizációnévként vannak formázva – Alapértelmezés szerint lekérdezésnév .
- H3 Térinformatikai függvények hozzáadva a beágyazott panel referenciához.
- Beágyazott hivatkozásokat adtunk hozzá az SQL-szintaxishoz, például
CREATE TABLE
ésOVER
.
Javítások:
- A rendezés és a fordított kapcsolók már elérhetők, ha az X tengely méretezése automatikusra van állítva.
- A hőtérképek és a kimutatástáblák mostantól reagálnak bizonyos peremes esetekre.
- A kategorikus Y tengely osztásjelei alapértelmezés szerint vannak rendezve.
- A lekérdezési piszkozatok már nem vesznek el a böngészőfrissítés után.
2022. december 8.
- Az Azure Databricks SQL-riasztások mostantól támogatják az olyan lekérdezési eredményoszlopok összesítésére vonatkozó riasztásokat, mint a
SUM
.COUNT
AVG
- Az alapértelmezett vizualizáció címe mostantól "VisualizationName – QueryName", amikor új widgeteket hoz létre az irányítópultokon.
2022. november 17.
Riasztások:
- A Chatworks, a Mattermost és a Google Hangouts Chat már nem értesítési célhely.
Javulás:
- Az y tengely mostantól százalékértékként jeleníti meg a számokat a százalékértékek ellenőrzésekor.
- A feltöltési adatok felhasználói felületének letiltására szolgáló munkaterület-rendszergazdai beállítás mostantól az új feltöltési adatok felhasználói felületére vonatkozik. Ez a beállítás a Adattudomány > Mérnöki, Databricks Mozaik AI- és Databricks SQL-személyekre vonatkozik.
Javítások:
- Kijavítottunk egy hibát a Databricks SQL-riasztásokban, ahol a null értékekkel való összehasonlítás helytelenül lett kiértékelve.
- Kijavítottunk egy hibát, amely miatt a kimutatástáblák görgetősávjai eltűntek.
- Kijavítottunk egy hibát, amely miatt a sémaböngésző nem méretezhető át túlcsordult lapokkal.
2022. november 10.
Javulás:
- Mostantól létrehozhat egy irányítópult-szűrőt, amely egyszerre több lekérdezésen is működik. Az Irányítópult szerkesztése módban válassza a Hozzáadás, majd a Szűrés, majd az Új irányítópult szűrője lehetőséget.
- Az automatikus kiegészítés mostantól támogatja
CREATE MATERIALIZED VIEW
a következőt: .
Rögzít:
- Kijavítottunk egy hibát, amely miatt az irányítópult lapozott eredményeinek végére való görgetés hibát eredményezett.
- Kijavítottunk egy hibát, amely miatt a halmozott sávdiagramról vonaldiagramra váltva megőrizte a halmozási tulajdonságot.
- Kijavítottuk a duplikált beolvasási hívásokat.
2022. november 3.
Javulás:
- Amikor hozzáférést kér a Databricks SQL-ben, az alapértelmezett engedély most már "futtatható".
Javítások:
- Kijavítottunk egy hibát, amely miatt a Lekérdezések és irányítópultok API-val végzett
created_at
rendezés nem a megfelelő rendezési sorrendet adta vissza. - Kijavítottunk egy hibát, amely miatt a HTML-formázással rendelkező URL-címeket tartalmazó oszlopok túl széles oszlopszélességűek voltak.
- Kijavítottunk egy hibát, amely
WHERE
miatt a kulcsszó nem lett kiemelve.
2022. október 27.
Fejlesztések:
A lekérdezési eredmények Excelbe való letöltésének sorkorlátja 64 000 sorról 100 000 sorra nőtt. A CSV > TSV letöltési korlátai változatlanok maradnak (körülbelül 1 GB adat).
Az automatikus kiegészítés mostantól támogatja
LIST
a szintaxist, az URL-címeket és a hitelesítő adatokat.Konszolidált és modernizált Fix-me javaslatpanelek.
A Databricks SQL-hez egy új, Databricks SQL Pro nevű raktártípust vezetünk be. Ez a raktártípus lehetővé teszi a Databricks SQL Warehouse számára a feladatok integrációját, a lekérdezések összevonását, a térinformatikai funkciókat és a prediktív IO használatát.
Javítások:
- Kijavítottunk egy hibát, amely miatt a szerkesztőben lévő figyelmeztető szalagcím átfedésben volt a teljes magasságú vizualizációkkal.
- Kijavítottunk egy hibát, amely miatt a táblázat oszlopainak szélessége nem maradt meg a táblázat oszlopainak áthelyezésekor.
- Kijavítottunk egy hibát, amely miatt az irányítópultra mutató hivatkozás az előugró értesítésekben megszakadt, ha vizualizációt adtak hozzá az SQL-szerkesztőből.
2022. október 20.
Fejlesztések:
- Most már megtalálhatja a lekérdezési folyamatjelző sávot az élőlábban, a vizualizációs művelet szerkesztését pedig a kebab menüben.
- Az automatikus kiegészítés mostantól támogatja a Delta időutazást, és oszlop automatikus kiegészítést biztosít egy idegen kulcs definiálásakor.
Rögzít:
- Kijavítottuk azt a hibát, amely miatt több vizualizáció gyors egymásutánban történő hozzáadása azt eredményezte, hogy a vizualizációk nem jelennek meg az irányítópulton.
2022. október 13.
Fejlesztések:
- Mostantól eltávolíthatja a jelentett hibaüzeneteket.
COMMENT ON
utasítás mostantól támogatott a szerkesztőben.- Mostantól a Cmd+P vagy a Ctr+P (PC-hez) parancsikonként használhatja a top search parancsikonját. Paraméterek hozzáadásához használja a Cmd+I vagy a Ctr+I (PC-hez ) parancsot.
2022. október 11.
Fejlesztések:
- Az adathozzáférés felhasználói felülete hozzáférést biztosít a gyakori adatforrás-konfigurációkhoz és a fájlfeltöltési felhasználói felületekhez. Lásd: Fájlok feltöltése az Azure Databricksbe.
- Kis fájlokat feltölthet a Delta Lake-be egy felhasználói felülettel. Lásd: Tábla létrehozása vagy módosítása fájlfeltöltéssel.
2022. október 6.
Fejlesztések:
EXTERNAL
mostantól egy fenntartott táblatulajdonság. ParancsokCREATE TABLE ... TBLPROPERTIES
ésALTER TABLE ... SET TBLPROPERTIES
sikertelenség, haEXTERNAL
a tulajdonságok meg vannak adva.- Az
strfmt
informat_string(strfmt, obj, ...)
ésprintf(strfmt, obj, ...)
a már nem támogatja az első argumentum használatát0$
. Az első argumentumra akkor kell hivatkozni1$
, ha argumentumindex használatával jelzi az argumentum pozícióját az argumentumlistában. - A kördiagramszegmensek mostantól vékony szegéllyel rendelkeznek a különböző szegmensek kijelöléséhez.
- Mostantól a Cmd+I (Machez) vagy a Ctr+I (PC-hez) parancsikont használhatja a Paraméter hozzáadása parancsikonként. Használja a Cmd+P vagy a Ctr+P (PC-hez) parancsikont a globális kereséshez.
- A visszajelzés gomb jó vagy rossz lekérdezési hibaüzenetekhez érhető el.
- A javításra vonatkozó javaslatok mostantól gyorsjavításként is elérhetők.
Javítások:
lpad
ésrpad
a függvények mostantól megfelelően működnek a sztringbemenetekkelBINARY
. A sztringbemenetek kimenete és kimeneteBINARY
mostantól sztringBINARY
.rpad
lpad
- Kijavítottunk egy hibát, amely miatt a manuális riasztásfrissítések nem működtek.
- A formázási problémák megoldásához visszaállítottuk az automatikus számlálóméretezés módosításait.
2022. szeptember 29.
Fejlesztések:
- Mostantól hozzáférést kérhet a Databricks SQL-lekérdezésekhez, riasztásokhoz és irányítópultokhoz ezen objektumok tulajdonosaitól.
- Most már szűrhet a lekérdezés időtartama és az utasítás típusa alapján a Lekérdezéselőzmények lapon.
- A lekérdezés időtartamszűrőjének használatához adjon meg egy időtartamot, és válasszon egy időegységet. Az előzmények eredménye olyan lekérdezéseket ad vissza, amelyek a megadott időnél hosszabb ideig futnak.
- Az utasítástípus-szűrő használatához válasszon egy utasítástípust a legördülő listából. Az előzmények eredménye az adott utasítást tartalmazó lekérdezéseket adja vissza.
Rögzít:
- Kijavítottunk egy hibát, amely miatt nem minden támogatott HTML-címke működött egyéni riasztássablonokban. Az összes címke dokumentált módon érhető el.
- Kijavítottunk egy hibát, amely miatt a vizualizáció értesítése bejelentést jelent. A vizualizációk kicsinyítésére való dupla kattintás például korábban nem volt látható.
- Kijavítottunk egy hibát, amely miatt a diagram tengelyeinek felcserélése nem jelent meg a diagram nevében.
2022. szeptember 22.
Fejlesztések:
- Az azonos méretű számláló widgetek betűmérete megegyezik, ha több számláló widget jelenik meg egy irányítópulton.
- Frissítettük a kombinált diagramokat, hogy kettős tengely használata esetén ugyanazon a tengelyen csak ugyanaz a diagramtípus (például vonal, sáv) használható legyen. A rendszer az adatsor-aliasokat is alkalmazza a tengelyre.
- Automatikus kiegészítési támogatás a helyettesítő kulcsokhoz és
LIST
műveletekhez.
Rögzít:
- Kijavítottuk azt a hibát, amely miatt a szöveges paraméterek nem fogadták el
Null
érvényes értékként.
2022. szeptember 15.
Rögzít:
- Kijavítottunk egy hibát, amely miatt a lekérdezési előzmények megtekintése az SQL Warehouses listaoldaláról nem működött.
2022. szeptember 8.
Javulás:
- Az új "Nyílt forráskódú integrációk" kártya bemutatása a DSE/SQL-kezdőlapokon, amely nyílt forráskód integrációs lehetőségeket jelenít meg, például a Delta Live Tableset és a DBT Core-t.
Rögzít:
- Kijavítottunk egy hibát, amely miatt a vizualizáció lap letiltotta a paraméter legördülő menüit.
2022. szeptember 1., csütörtök
Fejlesztések:
- Új egyszerűsített felhasználói felület bevezetése paraméterek és szűrők hozzáadásához. Válasszon szűrőt vagy paramétert.
- Az SQL-jogkivonatok zárójelei, például az "OVER()" mostantól automatikusan ki lesznek egészítve.
Javítások:
- Kijavítottunk egy hibát, amely miatt az irányítópult teljes képernyős megtekintése figyelmen kívül hagyta a színpalettát.
- Kijavítottunk egy hibát, amely miatt a gyors gépelés, majd a Futtatás parancsikon használata az újonnan beírt lekérdezésszöveg helyett az előző lekérdezésszöveget futtatta.
- Kijavítottuk azt a hibát, +amely miatt a ctrl enter billentyűkombinációval futtatott lekérdezések ismétlődő lekérdezéseket küldenek.
2022. augusztus 25.
Rögzít:
- Kijavítottunk egy hibát, amely miatt az irányítópult-szűrők nem frissültek a lekérdezési paraméterek módosításakor.
2022. augusztus 18.
A Databricks SQL esetében a Unity Catalog (nyilvános előzetes verzió) elérhető az előzetes verziós csatornán. További információ: Mi az a Unity Catalog?.
Dokumentáció: A Riasztások API dokumentációja megjelent.
Vizualizációk: A felhasználók mostantól beállíthatják a dátumszűrők alapértelmezett értékeit. Amikor a szűrő frissül egy lekérdezésen vagy irányítópulton, az alapértelmezett érték lesz alkalmazva.
Javítások:
- Kijavítottunk egy hibát, amely miatt a módosítások alkalmazása nem működött, ha egy irányítópult még mindig újratöltődött.
- Kijavítottunk egy hibát, amely miatt az oszlopok túl keskenyek voltak, amikor egy lekérdezés nem ad vissza eredményt.
2022. augusztus 11.
Fejlesztések:
- A felhasználók e-maileket kaphatnak, ha a frissítések sikertelenek. Az ilyen értesítések engedélyezéséhez lépjen a felügyeleti konzol SQL-beállítások lapjára. A Sikertelen e-mailek csoportban válassza ki azt az objektumtípust (lekérdezés, irányítópult vagy riasztás), amelyhez hibaértesítéseket szeretne kapni. A hibajelentéseket óránként küldi el a rendszer.
- Képi
- Új, modern színpaletta bemutatása vizualizációkhoz és irányítópultokhoz. Ha új színpalettára szeretne módosítani egy irányítópultot, nyissa meg az irányítópultot, kattintson a – – elemre, és válassza ki a Databricks színpalettát. Az SQL-rendszergazdák a Beállítások –QL felügyeleti konzol –>>Importálás és az új paletta kiválasztásával
Javítások:
- Kijavítottunk egy hibát, amely miatt a szűrő alkalmazásához korábban a Módosításoknem működött, ha egy lekérdezést már végrehajtottak.
2022. augusztus 4.
Fejlesztések:
- Az irányítópult klónozása esetén mostantól lehetőség van arra is, hogy a lekérdezéseket is klónozni kell-e.
- A tabulátor tartalma szinkronizálva van a böngészőlapok között. A lekérdezés állapota mostantól szinkronizálva lesz az összes böngészőlapon. Ez azt jelenti, hogy ha az 1. böngészőlapon a lekérdezés1-en dolgozik, majd a 2. böngészőlapra vált, akkor a lekérdezés1 abban az állapotban jelenik meg, amelyben az eredeti böngészőlapon hagyta.
Rögzít:
- A kördiagram üres sztringjeinek címkéi most már azt tükrözik, hogy a sztring üres, nem pedig az érték indexe.
2022. július 28.
- Figyelmeztetések
- Az egyéni riasztási e-mail-sablonokat frissítettük, hogy letiltsunk bizonyos HTML-címkéket, amelyek biztonsági kockázatot jelenthetnek. A nem engedélyezett HTML-címkék és attribútumok automatikusan megtisztítva lesznek. Például
- A felhasználók mostantól anélkül iratkozhatnak fel a riasztásokra, hogy létre kellene hozniuk egy értesítési célhelyet, amelyhez rendszergazdai engedélyekre van szükség.
- Letöltések: A felhasználók most már legfeljebb 1 GB találati adatot tölthetnek le a Databricks SQL-ből CSV és TSV formátumban, akár 64 000 sorral korábban.
- Képi
- Mostantól közvetlenül az irányítópulton szerkesztheti a vizualizációkat. Szerkesztési módban kattintson a kebab menüre, és válassza a Vizualizáció szerkesztése lehetőséget a vizualizáció szerkesztésének megkezdéséhez.
- Az aggregációkat kihasználó vizualizációkhoz társított eredmények letöltésekor a letöltött eredmények is összesítve lesznek. A letöltési lehetőség az alsó kebabról a laphoz társított kebabra kerül. A letöltött eredmények a vizualizációt létrehozó lekérdezés legutóbbi végrehajtásából származnak.
- SQL-szerkesztő: Az eredménytáblák mostantól üzenetet jelenítenek meg, ha a böngészőben lévő tábla által megjelenített adatok száma 64 000 sorra korlátozódik. A TSV és a CSV letöltése továbbra is körülbelül 1 GB adat lesz.
- Lekérdezésszűrők:
- A lekérdezésszűrők úgy lettek frissítve, hogy dinamikusan működjenek az ügyfél- vagy kiszolgálóoldalon a teljesítmény optimalizálása érdekében. A korábbi lekérdezésszűrők (most már örököltek) csak ügyféloldali üzemeltetésűek. A felhasználók igény szerint továbbra is használhatnak régi szűrőket a
::
szintaxissal. - A frissített szűrők egyszerűbbek: a felhasználók a +Szűrő hozzáadása gombra kattintanak, és kiválasztanak egy oszlopot egy legördülő listából. Korábban a felhasználóknak közvetlenül kellett módosítaniuk a lekérdezés szövegét.
- A releváns értékek kiemelése megkönnyíti annak megtekintését, hogy a szűrőn belül mely kijelölések adnak vissza eredményeket más szűrőkijelölések alapján.
- A lekérdezésszűrők úgy lettek frissítve, hogy dinamikusan működjenek az ügyfél- vagy kiszolgálóoldalon a teljesítmény optimalizálása érdekében. A korábbi lekérdezésszűrők (most már örököltek) csak ügyféloldali üzemeltetésűek. A felhasználók igény szerint továbbra is használhatnak régi szűrőket a
- Lekérdezési előzmények: A lekérdezési előzmények lekérdezési adatai mostantól a lekérdezés forrását jelenítik meg, amely a végrehajtott lekérdezés forrása.
2022. július 21., csütörtök
- Megosztási értesítések: A felhasználók mostantól e-mailben értesítést kapnak, ha egy irányítópultot, lekérdezést vagy riasztást megosztanak velük.
- Továbbfejlesztett SQL-szerkesztői élmény az új beágyazott szerkesztőeszközkészlettel
- Élő szintaxissal kapcsolatos hiba kiemelése (például helytelen kulcsszó, a tábla nem létezik, és javaslatok a hiba kijavítására)
- Környezeti súgó: rámutatáskor (például teljes táblanév, részletes függvénypanel) és beágyazott végrehajtási hibaüzenetek (például a végrehajtás utáni hibasor kiemelése)
- Javaslatok intelligens rangsorolása (például paraméter automatikus kiegészítése, rangsorolási képlet, kevésbé zajos egyeztetés)
2022. július 14.
- Most már feltölthet TSV-fájlokat a
Create Table
felhasználói felületen a CSV-fájlok mellett. - A Databricks SQL mostantól lehetővé teszi, hogy e-mailben értesítse a felhasználókat, amikor irányítópultot, lekérdezést vagy riasztást oszt meg velük.
- A vizualizációs táblák mostantól opcionálisan az eredmények mellett megjelenített sorszámokat is tartalmazzák.
- Amikor kiválaszt egy földrajzi régiót a Chloropleth-vizualizációhoz, beágyazott tippeket kap az elfogadott értékekről.
2022. június 23.
- SQL-végpont nevének módosítása: A Databricks az SQL-végpontról az SQL Warehouse-ra módosította a nevet, mert ez nem csupán egy API-belépési pont az SQL-parancsok futtatásához. Az SQL Warehouse egy számítási erőforrás az összes adattárház-igényhez, amely a Databricks platform szerves része. A számítási erőforrások infrastruktúra-erőforrások, amelyek feldolgozási kapacitást biztosítanak a felhőben.
- A Choropleth-vizualizációk esetében a vizualizációszerkesztő kulcsoszlopa és célmező-kijelölései földrajzi oszlopra és földrajzi típusra lettek átnevezve. Ez a érthetőség érdekében történő átnevezés nem vezet be semmilyen viselkedésbeli változást az új vagy a meglévő Choropleth-ekben.
- A korlát 1000 lekérdezési beállítás az SQL-lekérdezésszerkesztő egyik jelölőnégyzetéből a futtatás gombra került.
- A Lekérdezéselőzmények táblában gyorsítótárazott lekérdezések mostantól gyorsítótárcímkével vannak megjelölve.
- Az irányítópult manuális frissítése az irányítópult raktárát használja (ha van ilyen) az egyes lekérdezések raktárai helyett.
- A riasztások frissítése mindig a riasztás raktárát használja, függetlenül a Futtatás megjelenítőként/Tulajdonosként beállítástól.
2022. június 9.
- Amikor rámutat a végpontválasztóra, a teljes végpont neve elemleírásként jelenik meg.
- Amikor az SQL-szerkesztő sémaböngészőjében szűr, a keresési kifejezés ki lesz emelve a keresési eredmények között.
- Az SQL-szerkesztő Minden bezárása párbeszédpanelén megjelenik a nem mentett lekérdezések listája.
- Az SQL-szerkesztő utolsó bezárt lapjának megnyitásához használja ezt az új billentyűparancsot:
<Cmd> + <Shift> + <Option> + T
- Most már hozzáadhat adatfeliratokat a kombinált diagramokhoz.
- A vizualizációs aggregációk műveleteinek listája mostantól varianciát és szórást is tartalmaz.
2022. május 26.
Szerzői fejlesztések:
- Mostantól elkerülheti az összesítéseket vizualizációk készítésekor. Ez különösen akkor hasznos, ha a lekérdezés már tartalmaz összesítést. Ha például a lekérdezés az
SELECT AVG(price_per_sqft), isStudio, location GROUP BY location, isStudio
, a diagramszerkesztőnek korábban explicit módon kellett megadnia egy másik összesítési réteget. - Irányítópultok létrehozásakor mostantól a következő műveletekre van lehetősége:
- Ismétlődő szövegdoboz-vezérlők
- A szövegdoboz szerkesztése panel méretének kibontása
- A vizualizációk készítésekor a hibaoszlop alapértelmezett összesítése a szórás.
Javítások:
- A vizualizációk szerkesztési műveletei csak akkor érhetők el, ha az irányítópult szerkesztési módban van. A szerkesztési műveletek már nem érhetők el megtekintési módú műveletként.
- Amikor új lekérdezést hoz létre, az a lap jobb oldalán, a fókuszban lévő lapon nyílik meg, nem pedig a lista végén.
- A megnyitott lekérdezési modal megjeleníti, hogy melyik lekérdezés van már megnyitva, és lehetővé teszi a fókusz váltását erre a lekérdezési lapra.
- A Sankey &Sunburst diagramok már nem kezelik null értékként a 0-t.
2022. május 19.
- Kijavított probléma: Ha az SQL-szerkesztő fókusza meg van nyitva egy adott vizualizációs lapon, és megosztja a hivatkozást egy másik felhasználóval, a felhasználó ugyanazzal a fókuszsal fog rendelkezni az SQL-szerkesztőben, amikor a megosztott hivatkozásra kattint.
- Fejlesztések:
- A Microsoft Teams mostantól támogatott értesítési célhely.
- A Dátumtartomány, a Dátum és időtartomány, valamint a Dátum és időtartomány (másodpercekkel) paraméterek mostantól támogatják a hét kezdő napját, alapértelmezettként pedig a vasárnapot.
2022. május 12.
- A vizualizációk mostantól támogatják az időtárolókat közvetlenül a felhasználói felületen. Mostantól egyszerűen válthat az adatok éves, havi, napi vagy óránkénti tárolói között egy legördülő érték módosításával ahelyett, hogy egy függvényt
date_trunc()
ad hozzá és módosítana magában a lekérdezésszövegben. - Az irányítópultok alapértelmezés szerint színkonzisztenciával rendelkeznek. Ha több diagramon is ugyanazt az adatsort használja, az adatsor mindig ugyanúgy van színezve az összes diagramon, anélkül, hogy manuális konfigurációt kellene igényelnie.
2022. május 3.
- Ha egy irányítópultot megoszt egy felhasználóval vagy csoporttal, mostantól lehetővé tesszük a vizualizációk és paraméterek által használt összes felsőbb rétegbeli lekérdezés megosztását is.
- Ha nem rendelkezik engedéllyel egy vagy több felsőbb rétegbeli lekérdezés megosztására, figyelmeztető üzenet jelenik meg arról, hogy nem minden lekérdezés osztható meg.
- Az irányítópultok megosztásakor megadott engedélyek nem felülbírálják, nem tiltják le vagy bontják ki a meglévő engedélyeket a felsőbb rétegbeli lekérdezéseken. Ha például egy felhasználó vagy csoport tulajdonosi engedélyekkel rendelkezik a megosztott irányítópulton, de csak megtekintői engedéllyel rendelkezik egy felsőbb rétegbeli lekérdezésen, a felsőbb rétegbeli lekérdezés érvényes engedélyei megtekintőként lesznek futtatva.
2022. április 27.
- Az irányítópult elrendezése mostantól megmarad, amikor igény szerint PDF-be exportál, és ütemezett előfizetési e-maileket hoz létre.
2022. március 17.
- A diagramok új kombinált vizualizációs lehetőséget tartalmaznak. Ez lehetővé teszi olyan diagramok létrehozását, amelyek sávokat és vonalakat is tartalmaznak.
2022. március 10.
- A Unity Catalog (előzetes verzió) lehetővé teszi az irányítás és az adatokhoz való hozzáférés kezelését a fiók szintjén. Központilag kezelheti a metaadattárakat és az adatengedélyeket, és hozzárendelhet egy metaadattárat több munkaterülethez a fiókjában. A Unity Catalog adatai és objektumai a Databricks SQL Catalog Explorer vagy az SQL-szerkesztő segítségével kezelhetők és kezelhetők, a Unity Catalog-adatok pedig irányítópultokon és vizualizációkban használhatók. Lásd a Mi az a Unity katalógus? témakört.
Feljegyzés
A Unity Catalog megköveteli, hogy az SQL-végpontok a 2022.11-es verziót használják, amely az előzetes verziójú csatornán található.
- A Delta Sharing (előzetes verzió) lehetővé teszi az írásvédett adatok megosztását a szervezeten kívüli címzettekkel. A Databricks SQL támogatja a Delta-megosztási adatok lekérdezését és vizualizációkban és irányítópultokon való használatát.
- Minden alkalommal, amikor manuálisan vagy ütemezés szerint frissít egy irányítópultot, az irányítópulton és a felsőbb rétegben lévő összes lekérdezés frissül, beleértve a paraméterek által használt lekérdezéseket is. Az egyes vizualizációk frissítésekor a rendszer minden felsőbb rétegbeli lekérdezést frissít, beleértve a paraméterek által használt lekérdezéseket is.
2022. március 3.
- A kohorszvizualizáció úgy lett frissítve, hogy a kohorszok a 0 és a 100 helyett a minimális és a maximális értékekből interpolálva legyenek. Mostantól sokkal könnyebb megkülönböztetni a kohorszokat a tényleges rendelkezésre álló adattartományon belül. Korábban, ha minden szám közel volt egymáshoz, ugyanazt a színt használták. Az egymáshoz közel álló számok nagyobb valószínűséggel használnak különböző színeket, mivel a kohorsz a maximálistól a minimális tartományig van osztva az egyes sorozatok létrehozásához.
- Könnyebb megállapítani, hogy az irányítópult-előfizetés ütemezése aktív vagy szüneteltetve van-e. Amikor a Feliratkozás gombra kattint, ha az irányítópult előfizetési ütemezése szüneteltetve van, megjelenik az az üzenet, amely szerint az ütemezés szüneteltetve van. Ha egy irányítópult-előfizetés ütemezése szünetel, feliratkozhat vagy leiratkozhat az irányítópultról, de az ütemezett pillanatképek nem lesznek elküldve, és az irányítópult vizualizációi nem frissülnek.
- A lekérdezési előzmények megtekintésekor mostantól időtartam szerint rendezheti a listát. Alapértelmezés szerint a lekérdezések a kezdési időpont szerint vannak rendezve.
2022. február 24.
- A Katalóguskezelőben mostantól megtekintheti a felhasználók vagy csoportok táblán, nézeten, sémán vagy katalóguson lévő engedélyeit. Kattintson az objektumra, majd az Engedélyek elemre, és használja az új szűrőmezőt.
2022. február 17.
- A vizualizációk csak egy kicsit okosabbak lettek! Ha egy lekérdezés egy vagy két oszlopot eredményez, a rendszer automatikusan kiválaszt egy ajánlott vizualizációtípust.
- Most már létrehozhat hisztogramokat az egyes értékek adathalmazon belüli gyakoriságának megjelenítéséhez, valamint annak megértéséhez, hogy az adathalmazok olyan értékeket tartalmaznak-e, amelyek kis számú tartomány köré vannak csoportosítva, vagy inkább szétterülnek.
- A lekérdezési előzményekben és a lekérdezésprofilban mostantól teljes szélességűre bonthatja a lekérdezési sztringet és a sikertelen lekérdezések hibaüzenetét. Ez megkönnyíti a lekérdezési tervek elemzését és a sikertelen lekérdezések hibaelhárítását.
- Sáv-, vonal-, terület-, kör- és hőtérkép-vizualizációkban mostantól közvetlenül a vizualizációk konfigurációs felhasználói felületén is elvégezheti az összesítést anélkül, hogy magát a lekérdezést módosítania kellene. Az új képességek kihasználásával az összesítés a teljes adatkészleten keresztül történik, nem pedig az első 64 000 sorra korlátozódik. A kiadás előtt létrehozott vizualizáció szerkesztésekor megjelenik egy üzenet, amely szerint
This visualization uses an old configuration. New visualizations support aggregating data directly within the editor.
ha az új képességeket szeretné használni, újra létre kell hoznia a vizualizációt. Lásd: Az összesítés engedélyezése vizualizációkban.
2022. február 10.
Mostantól egyéni színpalettát is beállíthat egy irányítópulthoz. Az irányítópulton megjelenő összes vizualizáció a megadott palettát használja. Az egyéni paletta beállítása nem befolyásolja, hogy a vizualizáció hogyan jelenik meg más irányítópultokon vagy az SQL-szerkesztőben.
Megadhat hexa értékeket egy palettához, vagy importálhat színeket egy másik palettáról, akár a Databricks, akár egy munkaterület-rendszergazda hozta létre.
Ha palettát alkalmaz egy irányítópultra, az irányítópulton megjelenő összes vizualizáció alapértelmezés szerint a kiválasztott színpalettát használja, még akkor is, ha egyéni színeket konfigurál a vizualizáció létrehozásakor. A viselkedés felülbírálásához lásd : Színek testreszabása vizualizációhoz.
A munkaterület rendszergazdái mostantól létrehozhatnak egy egyéni színpalettát a felügyeleti konzol használatával. Az egyéni színpaletta létrehozása után új és meglévő irányítópultokon is használható. Ha egyéni színpalettát szeretne használni egy irányítópulthoz, vagy testre szeretné szabni, szerkesztheti az irányítópult beállításait.
Amikor olyan vizualizációt ad hozzá, amely paramétereket használ egy irányítópulthoz az SQL menüből, a vizualizáció alapértelmezés szerint irányítópultszintű paramétereket használ. Ez megegyezik azzal a viselkedéssel, amikor egy widgetet a Vizualizáció hozzáadása gombbal ad hozzá egy irányítópulton.
Amikor megtekinti a lekérdezési előzményeket, és paraméterek kombinációjával szűri a listát, megjelenik az egyező lekérdezések száma.
A vizualizációkban kijavítottunk egy hibát, amely miatt az Y tengely tartománya nem módosítható adott értékekhez.
2022. február 3.
A többlapos SQL-szerkesztő mostantól alapértelmezés szerint engedélyezve van az összes felhasználó számára. További információkért vagy a többlapos szerkesztő letiltásához tekintse meg a Több lekérdezés szerkesztése című témakört.
Az irányítópult-e-mail-előfizetők mostantól melléklet helyett egy beágyazott képet kapnak, amelyen az irányítópult pillanatképe látható. A pillanatkép PDF-fájlja csatolva van az e-mailhez.
Mostantól kiegyensúlyozza a megbízhatóságot és a költségeket az SQL-végpontok kihasználatlan példányszabályzatának konfigurálásával. A kihasználatlan példányokra vonatkozó szabályzat határozza meg, hogy a feldolgozók csak igény szerinti példányokat vagy az igény szerinti és a kihasználatlan példányok kombinációját használják-e. A Költségoptimalizált (alapértelmezett) többnyire kihasználatlan példányokat és egy igény szerinti példányt használ. Az optimalizált megbízhatóság csak igény szerinti példányokat használ. Korábban az igény szerinti példányokat mindig sql-végpontokhoz használták. Ennek a viselkedésnek a megőrzéséhez állítsa a kihasználatlan példány szabályzatát megbízhatósági optimalizáltra. Lásd: A kihasználatlan példány házirendjének konfigurálása.
2022. január 27.
Továbbfejlesztettük a lekérdezés profiljának megtekintését, megosztását és importálását. Lásd: Lekérdezési profil.
A Részletek vizualizációval mostantól ugyanúgy átnevezheti az oszlopokat, mint a Táblavizualizációt.
Most már bezárhat egy lapot az SQL-szerkesztőben, ha középre kattint rá.
A lapozott SQL-szerkesztőhöz a következő billentyűparancsok lettek hozzáadva:
- Zárja be az összes lapot: Cmd+Option+Shift+A (macOS) / Ctrl+Option+Shift+A (Windows)
- Zárja be a többi lapot: Cmd+Option+Shift+W (macOS) / Ctrl+Option+Shift+W (Windows)
Ezek a billentyűparancsok alternatívát kínálnak arra, hogy a jobb gombbal a fülre kattintva elérhessék ugyanazokat a műveleteket. Az összes billentyűparancs megtekintéséhez kattintson a Füles SQL-szerkesztő Billentyűzet ikonja ikonra.
2022. január 20.
- A táblázatokban az egész szám és a lebegőpontos adattípusok alapértelmezett formázása úgy lett frissítve, hogy ne tartalmazzon vesszőt. Ez azt jelenti, hogy alapértelmezés szerint az olyan értékek, mint
10002343
a továbbiakban nem lesznek vesszők. Ha vesszővel szeretné formázni ezeket a típusokat, kattintson a Vizualizáció szerkesztése gombra, bontsa ki az oszlop területét, és módosítsa a formátumot vesszővel. - A böngésző renderelési korlátaihoz való jobb igazodás érdekében a vizualizációk mostantól legfeljebb 10 000 adatpontot jelenítenek meg. Egy pontdiagram például legfeljebb 10 000 elemet jelenít meg. Ha az adatpontok száma korlátozott, figyelmeztetés jelenik meg.
2022. január 13.
- Kijavítottunk egy hibát, amely miatt az SQL-szerkesztő Mentés gombja néha le volt tiltva. A Mentés gomb mostantól mindig engedélyezve van, és csillagot (
*
) tartalmaz a nem mentett módosítások észlelésekor.
2021. december 15.
- A Databricks SQL általánosan elérhető. Ez jelentős mérföldkövet jelent az adatok, az AI és a BI számítási feladatok egyetlen helyen történő egységességét biztosító lakehouse-platform biztosításában. A ga használatával a Databrickstől a legmagasabb szintű stabilitásra, támogatásra és nagyvállalati felkészültségre számíthat a kritikus fontosságú számítási feladatokhoz. További információért olvassa el a GA bejelentési blogját .
- A riasztások mostantól a lekérdezésektől függetlenül vannak ütemezve. Amikor új riasztást hoz létre és lekérdezést hoz létre, a rendszer kérni fogja, hogy hozzon létre ütemezést a riasztáshoz. Ha már volt riasztása, duplikáltuk az ütemezést az eredeti lekérdezésből. Ezzel a módosítással riasztásokat is beállíthat a Futtatás tulajdonosként és a Futtatás megtekintőként lekérdezésekhez. A tulajdonosi lekérdezések a kijelölt riasztási ütemezés szerint futnak a lekérdezés tulajdonosának hitelesítő adataival. A megtekintő lekérdezések a riasztás létrehozójának hitelesítő adataival futnak a kijelölt riasztási ütemezésben. Lásd: Mik azok a Databricks SQL-riasztások? és lekérdezés ütemezése.
- Mostantól az SQL-szerkesztőben és az irányítópultokon is újrarendelheti a paramétereket.
- A hőtérképes vizualizációk létrehozásának dokumentációja kibővült. Lásd: Hőtérkép beállításai.
2021. december 9.
- Táblázatvizualizáció létrehozásakor mostantól statikus értékre vagy értéktartományra állíthatja az oszlop betűszínét az oszlop mezőinek értékei alapján. A literális érték a küszöbértékhez képest van összehasonlítva. Például ha színezni szeretné azokat az eredményeket, amelyek értékei túllépik
500000
a küszöböt,> 500,000
ne pedig a küszöbértéket> 500000
hozza létre. Lásd: Oszlopszínek feltételes formázása. - A többlapos SQL-szerkesztő sémaböngészőjének ikonjai mostantól lehetővé teszik a táblák és nézetek megkülönböztetésére.
2021. december 1.
- Mostantól sql-konfigurációs paramétereket is alkalmazhat a munkaterület szintjén. Ezek a paraméterek automatikusan érvényesek a munkaterület összes meglévő és új SQL-végpontjére. Lásd: SQL-paraméterek konfigurálása.
2021. november 18.
A lekérdezések előzményeinek megtekintésekor mostantól szűrheti a lekérdezéseket az őket futtató szolgáltatásnévre. Lásd: Lekérdezési előzmények megtekintése.
Most már megnyithatja az SQL-szerkesztőt egy oldalsávos billentyűparanccsal. Az SQL-szerkesztő megnyitásához kattintson az SQL-szerkesztőre.
Ha rendelkezik engedéllyel Adattudomány & mérnöki fürtök létrehozására, most már létrehozhat SQL-végpontokat az oldalsáv Létrehozás gombjára kattintva, majd az SQL-végpontra kattintva.
A rendszergazdák mostantól a felhasználói felületen keresztül átadhatják egy lekérdezés, irányítópult vagy riasztás tulajdonjogát egy másik felhasználónak. Lásd:
2021. november 4.
- A Térkép (Choropleth) vizualizációk vizualizációiban a jelmagyarázat színátmenetes lépéseinek maximális száma 11-ről 20-ra nőtt. Az alapértelmezett érték 5 színátmenetes lépés, amely tartalmazza a Min színt és a Max színt.
- A többlapos SQL-szerkesztő mostantól támogatja a tömeges lapkezelést. Ha a jobb gombbal egy lapra kattint, megjelenik a mások bezárása, a bal oldali bezárás, a jobb oldali bezárás és az összes bezárása lehetőség. Vegye figyelembe, hogy ha a jobb gombbal az első vagy az utolsó fülre kattint, akkor a bal oldali vagy a jobb oldali bezárás lehetőség nem jelenik meg.
2021. október 28.
- Ha egy táblázatot a Catalog Explorerben tekint meg, két lehetőség közül választhat, amelyekkel egyszerűbben kezelheti a táblázatot:
- A Lekérdezés létrehozása > gombra kattintva hozzon létre egy lekérdezést, amely az összes oszlopot kijelöli, és az első 1000 sort adja vissza.
- A Gyors irányítópult létrehozása > gombra kattintva megnyithat egy konfigurációs lapot, ahol kiválaszthatja az érdekes oszlopokat, és létrehozhat egy irányítópultot, valamint olyan támogató lekérdezéseket, amelyek alapvető információkat nyújtanak ezen oszlopok használatával, valamint irányítópultszintű paramétereket és egyéb képességeket mutatnak be.
2021. október 19.
- Az új billentyűparancsok mostantól elérhetők a lapozott szerkesztőben:
- Új lap megnyitása:
- Windows:
Cmd+Alt+T
- Mac:
Cmd+Option+T
- Windows:
- Az aktuális lap bezárása
- Windows:
Cmd+Alt+W
- Mac:
Cmd+Option+W
- Windows:
- Lekérdezés megnyitása párbeszédpanel
- Windows:
Cmd+Alt+O
- Mac:
Cmd+Option+O
- Windows:
- Új lap megnyitása:
2021. szeptember 23.
- Most már létrehozhat egy új irányítópultot egy meglévő irányítópult klónozásával, amennyiben rendelkezik a CAN RUN, a CAN EDIT és a CAN MANAGE engedéllyel az irányítópulton és az összes felsőbb rétegbeli lekérdezésben. Lásd: Örökölt irányítópult klónozása.
- Mostantól több Y tengelyes oszlopot tartalmazó vizualizációkban is használható
GROUP BY
. Lásd: Pontdiagram. - Mostantól
{{ @@yPercent}}
formázhatja az adatfeliratokat egy nemnormalizált halmozott sávdiagramon. Lásd a sávdiagramot. - Ha SAML-hitelesítést használ, és az SAML-hitelesítő adatai néhány percen belül lejárnak, a rendszer proaktív módon kéri, hogy jelentkezzen be újra a lekérdezés végrehajtása vagy az irányítópult frissítése előtt. Ez segít megelőzni a lekérdezés végrehajtása során lejáró hitelesítő adatok miatti fennakadásokat.
2021. szeptember 20.
- Mostantól átviheti az irányítópultok, lekérdezések és riasztások tulajdonjogát az Engedélyek REST API használatával. Lásd a lekérdezési ACL-eket.
2021. szeptember 16.
- A lekérdezési eredményekben az eredmények sztringekként vannak szerializálva,
BIGINT
ha nagyobbak, mint 9007199254740991. Ez kijavít egy hibát, amelyBIGINT
miatt az eredmények csonkoltak lehetnek a lekérdezési eredményekben. A többi egész szám eredménye továbbra is számként van szerializálva. A tengelyfeliratok és elemleírások számformázása nem vonatkozik a sztringként szerializált eredményekreBIGINT
. További információ a Databricks SQL adattípusairól: BIGINT típus.
2021. szeptember 7.
A Databricks egy hét alatt végzi el a következő módosításokat. Előfordulhat, hogy a munkaterület szeptember 7-ig nem lesz engedélyezve ezekhez a módosításokhoz.
A Databricks SQL mostantól nyilvános előzetes verzióban érhető el, és az új munkaterületeken lévő összes felhasználó számára engedélyezve van.
Feljegyzés
Ha a munkaterület a Databricks SQL-hez engedélyezve volt a nyilvános előzetes verzióban – azaz a 2021. szeptember 7-ét megelőző héten – a felhasználók megtartják az adott dátum előtt hozzárendelt jogosultságot, hacsak Ön nem módosítja azt. Más szóval, ha egy felhasználó nem fért hozzá a Databricks SQL-hez a nyilvános előzetes verzióban, akkor most csak akkor kapják meg, ha egy rendszergazda átadja nekik.
A rendszergazdák kezelhetik, hogy mely felhasználók férhetnek hozzá a Databricks SQL-hez a Databricks SQL hozzáférési jogosultságának (
databricks-sql-access
az API-ban) a felhasználókhoz vagy csoportokhoz való hozzárendelésével. Alapértelmezés szerint az új felhasználók rendelkeznek ezzel a jogosultságtal.A rendszergazdák korlátozhatják, hogy egy felhasználó vagy csoport csak a Databricks SQL-hez férhessen hozzá, és megakadályozza, hogy hozzáférjenek Adattudomány > Mérnöki vagy Databricks Mozaik AI-hoz, ha eltávolítják a munkaterület-hozzáférési jogosultságot (
workspace-access
az API-ban) a felhasználótól vagy csoporttól. Alapértelmezés szerint az új felhasználók rendelkeznek ezzel a jogosultságtal.Fontos
Az Azure Databricks bejelentkezéséhez és eléréséhez a felhasználónak Rendelkeznie kell a Databricks SQL-hozzáféréssel vagy a Munkaterület hozzáférési jogosultságával (vagy mindkettővel).
A Starter Endpoint nevű kis klasszikus SQL-végpont előre konfigurálva van minden munkaterületen, így azonnal megkezdheti az irányítópultok, vizualizációk és lekérdezések létrehozását. Az összetettebb számítási feladatok kezeléséhez egyszerűen növelheti a méretét (a késés csökkentése érdekében) vagy a mögöttes fürtök számát (több egyidejű felhasználó kezeléséhez). A költségek kezeléséhez az alapvégpont úgy van konfigurálva, hogy 120 perc tétlenség után leálljon.
A gyors üzembe helyezése érdekében a rendszergazdák és a felhasználók számára egy új, irányított előkészítési felület áll rendelkezésre. Az előkészítési panel alapértelmezés szerint látható, és mindig láthatja, hogy hány előkészítési feladat maradt az oldalsávon. Kattintson a bal oldali feladatokra az előkészítési panel újbóli megnyitásához.
A Databricks SQL gyors használatbavétele két gazdag adatkészlettel, az összes munkaterületről elérhető írásvédett katalógusban
SAMPLES
érhető el. Ha megismerkedik a Databricks SQL-sel, ezekkel a sémákkal lekérdezéseket, vizualizációkat és irányítópultokat hozhat létre. Nincs szükség konfigurációra, és minden felhasználó hozzáfér ezekhez a sémákhoz.- A
nyctaxi
séma taxiútadatokat tartalmaz atrips
táblázatban. - A
tpch
séma a kiskereskedelmi bevételi és ellátási lánc adatait tartalmazza a következő táblákban:customer
lineitem
nation
orders
part
partsupp
region
supplier
Kattintson az első lekérdezés futtatása az előkészítési panelen a
nyctaxi
séma új lekérdezésének létrehozásához.- A
Ha tudni szeretné, hogyan jeleníthet meg adatokat a Databricks SQL-ben konfiguráció nélkül, importálhat irányítópultokat az Irányítópultminták gyűjteményből. Ezeket az irányítópultokat a katalógus adatkészletei működtetik
SAMPLES
.Az Irányítópultminták gyűjtemény megtekintéséhez kattintson a Minta irányítópult importálása elemre az előkészítési panelen.
Most már létrehozhat és elvethet natív SQL-függvényeket a CREATE FÜGGVÉNY és a DROP FÜGGVÉNY parancsokkal.
2021. szeptember 2.
A CAN EDIT engedéllyel rendelkező felhasználók mostantól kezelhetik az irányítópult frissítési ütemezését és előfizetési listáját. Korábban a CAN MANAGE engedélyre volt szükség. További információ: Irányítópult automatikus frissítése.
Alapértelmezés szerint a vizualizációk már nem méretezhetők át dinamikusan a visszaadott eredmények száma alapján, de az eredmények számától függetlenül változatlan magasságban maradnak. Az előző viselkedéshez való visszatéréshez és a vizualizáció dinamikus átméretezéséhez engedélyezze a panel magasságának dinamikus átméretezését a vizualizáció beállításai között az irányítópulton. További információt a Táblázat beállításai című témakörben talál.
Ha több munkaterülethez is rendelkezik hozzáféréssel ugyanabban a fiókban, a Databricks SQL-ben válthat munkaterületeket. Kattintson az Azure Databricks-munkaterület bal alsó sarkára, majd válasszon ki egy munkaterületet a váltáshoz.
2021. augusztus 12.
- A rendszergazda most már leállíthatja egy másik felhasználó lekérdezését a végrehajtás során. További információ: A végrehajtó lekérdezés leállása.
2021. augusztus 05.
- Továbbfejlesztett
EXPLAIN
eredményformázás- Az eredmények könnyebben olvashatók
- Sortörés nélküli monoterként formázva
2021. július 29.
- A lekérdezésszerkesztő több lapjának támogatásával egyszerűbbé lett a több lekérdezés zsonglőrítése. A többlapos szerkesztő használatához lásd : Több lekérdezés szerkesztése.
2021. július 08.
- Az irányítópultok vizualizációs vezérlői mostantól címekkel és leírásokkal rendelkeznek, így a több irányítópulton használt vizualizációk címét és leírását az irányítópulthoz igazíthatja.
- Az oldalsáv frissült a jobb láthatóság és navigáció érdekében:
- A raktárak mostantól SQL-végpontok, az előzmények pedig lekérdezési előzményekre lesznek átnevezve.
- A fiókbeállítások (korábbi nevén Felhasználók) át lettek helyezve a fiókba . A Fiók kiválasztásakor módosíthatja az Azure Databricks-munkaterületet, és kijelentkezhet.
- A felhasználói beállítások át lettek helyezve a Beállítások helyre, és a Beállítások és az SQL Felügyeleti konzolra lettek felosztva. Az SQL Felügyeleti konzol csak a rendszergazdák számára látható.
- A súgó ikonja súgóra változott.
2021. július 01.
- Az új Katalóguskezelő lehetővé teszi az adatbázisok és táblák engedélyeinek egyszerű felderítését és kezelését. A felhasználók megtekinthetik a séma részleteit, megtekinthetik a mintaadatokat, és megtekinthetik a táblázat részleteit és tulajdonságait. A rendszergazdák megtekinthetik és módosíthatják az adatobjektum-tulajdonosokat, az adatobjektum-tulajdonosok pedig engedélyeket adhatnak és vonhatnak vissza. További részletekért lásd : Mi az a Katalóguskezelő?.
- A vízszintes diagramokban lévő Y tengelyek ugyanúgy lettek frissítve, mint a táblázatokban. Ha korábban a fordított sorrendet választotta, az Y tengely lapon található Fordított sorrend váltógombbal megfordíthatja az új sorrendet.
2021. június 23.
- Az SQL-végpontok egyszerűen konfigurálhatók szolgáltatásnevek használatával. Most már létezik egy vezérlő, amely segít konfigurálni egy szolgáltatásnevet a globális SQL-végpontok beállításában. Lásd: Szolgáltatásnév konfigurálása.
- A temp nézetek mostantól támogatottak.
2021. június 17.
- A Photon, a Databricks új vektorizált végrehajtási motorja alapértelmezés szerint be van kapcsolva az újonnan létrehozott SQL-végpontok esetében (mind a felhasználói felületen, mind a REST API-n). A foton transzparensen felgyorsul
- Egyszerűen kezelheti a felhasználókat és csoportokat
CREATE GROUP
a ,DROP GROUP
,ALTER GROUP
,SHOW GROUPS
ésSHOW USERS
parancsokkal. További részletekért lásd a biztonsági utasításokat és a megjelenítési utasításokat. - A lekérdezésszerkesztő sémaböngészője több mint 100 táblát tartalmazó sémákhoz illesztettebb és gyorsabb. Ilyen sémák esetén a sémaböngésző nem tölti be automatikusan az összes oszlopot; a táblák listája továbbra is a szokásos módon jelenik meg, de az oszlopok csak akkor töltődnek be, ha egy táblára kattint. Ez a módosítás hatással van a lekérdezésszerkesztő automatikus kiegészítésére, mert ezektől az információktól függ, hogy javaslatokat jelenítsen meg. Amíg ki nem bont egy táblát, és be nem tölti az oszlopait, ezek a javaslatok nem érhetők el.
2021. június 03.
- Az újonnan engedélyezett Azure Databricks-munkaterületek rendszergazdái alapértelmezés szerint megkapják a Databricks SQL-jogosultságot, és már nem kell a Databricks SQL-hozzáférési jogosultságot megadniuk a felügyeleti konzol használatával.
- A Photon mostantól nyilvános előzetes verzióban érhető el, és alapértelmezés szerint engedélyezve van az új SQL-végpontok esetében.
- A többfürtes terheléselosztás most nyilvános előzetes verzióban érhető el.
- Mostantól a CAN EDIT engedéllyel engedélyezheti az irányítópultokon és lekérdezéseken való együttműködést a szervezet más tagjaival. Lásd: Hozzáférés-vezérlési listák.
2021. május 26.
- Az SQL Analytics átnevezve a Databricks SQL-re. Ez a változás az alábbi ügyféloldali hatásokat érinti:
A webes felhasználói felületen frissítettük a hivatkozásokat.
Átnevezték a Databricks SQL-hez való hozzáférésre való jogosultságot:
- Felhasználói felület: Databricks SQL-hozzáférés (korábban SQL Analytics-hozzáférés)
- SCIM API:
databricks-sql-access
(korábbansql-analytics-access
)
Az előző jogosultsággal rendelkező felhasználók, csoportok és szolgáltatásnevek át lettek migrálva az új jogosultságba.
A Databricks SQL-hez kapcsolódó naplózási naplóesemények címkéi megváltoztak:
- A Databricks SQL-események előtagja most már
databrickssql
. changeSqlAnalyticsAcl
most márchangeDatabricksSqlAcl
.
- A Databricks SQL-események előtagja most már
- Irányítópult-frissítések
- Az irányítópult exportálási fájlneve a UUID helyett az irányítópult + időbélyeg neve lett frissítve.
- Az exportálási rekordok korlátja 22k-ról 64k-ra nőtt.
2021. május 20.
Mostantól az Azure Key Vault saját kulcsával titkosíthatja az Azure Databricksben tárolt Databricks SQL-lekérdezéseket és lekérdezési előzményeket. Ha már konfigurálta a saját kulcsát egy munkaterülethez a felügyelt szolgáltatások (jegyzetfüzetek és titkos kódok) adatainak titkosításához, akkor nincs szükség további műveletekre. Ugyanez az ügyfél által felügyelt kulcs mostantól a Databricks SQL-lekérdezéseket és a lekérdezési előzményeket is titkosítja. Tekintse meg a felügyelt szolgáltatások ügyfél által felügyelt kulcsait. Ez a módosítás csak az inaktív állapotban tárolt új adatokat érinti. A ma tárolt Databricks SQL-lekérdezések és lekérdezési előzmények nem garantáltan ezzel a kulccsal vannak titkosítva.
A Databricks SQL-lekérdezés eredményei az Azure Databricks által a munkaterület beállítása során létrehozott legfelső szintű Azure Blob Storage-példányban vannak tárolva, és a felügyelt szolgáltatási kulcs nem titkosítja őket. A titkosításhoz azonban használhatja a saját kulcsát. Tekintse meg a DBFS-gyökér ügyfél által felügyelt kulcsait.
Ez a funkció a Prémium csomaggal érhető el.
A Korábbi végrehajtások lap most a relatív időt jeleníti meg.
2021. május 13.
A Databricks SQL már nem próbálja kitalálni az oszloptípusokat. Korábban a formátumot
xxxx-yy-dd
tartalmazó oszlopokat a rendszer automatikusan dátumként kezelte, még akkor is, ha az azonosító kód volt. Most, hogy az oszlop már nem lesz automatikusan dátumként kezelve. Ezt szükség esetén meg kell adnia a lekérdezésben. Ez a változás miatt előfordulhat, hogy az előző viselkedésre támaszkodó vizualizációk már nem működnek. Ebben a kiadásban módosíthatja >a Beállítások>visszamenőleges kompatibilitás beállítását, hogy visszatérjen az előző viselkedéshez. Egy későbbi kiadásban eltávolítjuk ezt a képességet.A lekérdezésszerkesztő most már rendelkezik egy lekérdezési folyamatjelzővel. Az állapotváltozások mostantól egy folyamatosan frissített folyamatsávon láthatók.
2021. május 06.
Mostantól PDF-fájlként is letöltheti az irányítópult tartalmát. Lásd: Letöltés PDF formátumban.
A rendszergazdai felhasználók mostantól megtekinthetik az összes lekérdezéshez és irányítópulthoz való hozzáférést. Ebben a nézetben a rendszergazda bármilyen lekérdezést vagy irányítópultot megtekinthet és törölhet. A rendszergazda azonban nem szerkesztheti a lekérdezést vagy az irányítópultot, ha nincs megosztva a rendszergazdával. Tekintse meg a Lekérdezési rendszergazda nézetet és az örökölt irányítópult rendszergazdai nézetét.
Mostantól minden fiók számára elérhető a végpont egyidejűségének növelése a többfürtes terheléselosztással. Létrehozhat olyan végpontokat, amelyek automatikusan skálázhatók a megadott minimális és maximális fürtszám között. A túlterhelt végpontok felskálázhatók, az alul betöltött végpontok pedig leskálázhatók.
2021. április 29.
- A lekérdezési beállítások és a részletek mostantól a lekérdezésszerkesztő bal oldalán található lapok halmazában vannak rendezve:
Adatforrások: Válasszon az elérhető adatforrásokból és sémákból. Lásd: Lekérdezés létrehozása.
Korábbi végrehajtások: Az SQL-szerkesztőben végrehajtott korábbi végrehajtások megtekintése. Ez nem jeleníti meg az ütemezett végrehajtásokat. Lásd: Lekérdezések írása és adatok feltárása az SQL-szerkesztőben.
Lekérdezési adatok: Adja meg a lekérdezés leírását, tekintse meg a lekérdezés adatait, és állítsa be a frissítés ütemezését. Lásd: Lekérdezések írása és adatok feltárása az SQL-szerkesztőben , és lekérdezés ütemezése.
2021. április 22.
- Kijavítottunk egy hibát, amely miatt a végpontok elérhetetlenek voltak, és belső hiba miatt törölték őket.
2021. április 16.
A Databricks SQL fenntartja a kompatibilitást az Apache Spark SQL szemantikával. Ez a kiadás frissíti a szemantikát, hogy megfeleljen az Apache Spark 3.1-es verziójának. Korábban a Databricks SQL az Apache Spark 3.0 szemantikához lett igazítva.
- Statisztikai aggregációs függvények, beleértve
std
a ,stddev
,stddev_samp
,variance
,var_samp
skewness
, ,kurtosis
,covar_samp
éscorr
, visszatérésiNULL
függvényeket, nemDouble.NaN
pedig akkor, amikorDivideByZero
a kifejezés kiértékelése során történik,stddev_samp
például egyetlen elemkészletre alkalmazva. A kiadás előtt vissza fog térniDouble.NaN
. grouping_id()
hosszú értékeket ad vissza. A kiadás előtt ez a függvény int értékeket adott vissza.- A lekérdezésterv ismerteti az eredményeket.
from_unixtime
,unix_timestamp
,to_unix_timestamp
, ésto_date
sikertelen lesz,to_timestamp
ha a megadott dátum/idő minta érvénytelen. A kiadás előtt visszatértekNULL
.- A Parquet, ORC, Avro és JSON adatforrások kivételt
org.apache.spark.sql.AnalysisException
képeznek: "Ismétlődő oszlop(ok) találhatók az adatsémában az olvasásban, ha ismétlődő neveket észlelnek a legfelső szintű oszlopokban és a beágyazott struktúrákban is." - A szerkezeteket és a térképeket a
{}
zárójelek burkolják, és sztringekbe öntötték őket. A művelet és ashow()
CAST
kifejezés például ilyen zárójeleket használ. A kiadás előtt a d szögletes zárójeleket ugyanerre a célra használták. - A struktúrák, tömbök és térképek NULL elemei "null" értékűvé alakulnak, amikor sztringekké alakítják őket. A kiadás
NULL
előtt az elemek üres sztringekké lettek konvertálva. - A decimális típusú oszlop túlcsordulásának összege null értéket ad vissza. A kiadás előtt a tizedesjel típusú oszlop összege null vagy helytelen eredményt adhat vissza, vagy futásidőben is meghiúsulhat (a lekérdezésterv tényleges végrehajtásától függően).
IllegalArgumentException
A függvény visszaadja a hiányos intervallumkonstansokat,INTERVAL '1'
INTERVAL '1 DAY 2'
például , amelyek érvénytelenek. A kiadás előtt ezek a literálok NULL-eket eredményeznek.- A Parquet-fájlok időbélyegeinek betöltése és mentése meghiúsul, ha az időbélyegek korábban
1900-01-01 00:00:00Z
vannak, és típuskéntINT96
betöltve (mentve) vannak. A jelen kiadás előtt a műveletek nem hiúsulnak meg, de a bemeneti időbélyegek eltolódásához vezethetnek, mivel a Proleptic Gergely-naptárba/-ról a Julián naptárba/-ra való átugorással váltanak át. - A
schema_of_json
függvényekschema_of_csv
a sémát sql formátumban adnak vissza, amelyben a mezőnevek idéznek. A kiadás előtt a függvény egy katalógussztringet ad vissza mező idézés nélkül, kisbetűvel. CHAR
,CHARACTER
ésVARCHAR
a típusok támogatottak a táblázatsémában. A táblázat vizsgálata és beszúrása tiszteletben tartja a karakter/varchar szemantikai értékeket. Ha a karaktert/varchart a táblasémán kívül más helyeken is használják, a rendszer kivételt ad ki (a CAST olyan kivétel, amely egyszerűen sztringként kezeli a karaktert/varchart, mint korábban).- A Hive külső katalógusából származó táblák esetében a következő kivételek lépnek fel:
ALTER TABLE .. ADD PARTITION
dob,PartitionsAlreadyExistException
ha már létezik új partíció.ALTER TABLE .. DROP PARTITION
NoSuchPartitionsException
nem létező partíciók esetén.
2021. április 13
- Továbbfejlesztett lekérdezési átviteli sebesség az SQL-végpontok sorba állításával. Az SQL-végpontra küldött lekérdezések most már várólistára kerülnek, ha a végpont már tele van futó lekérdezésekkel. Ez javítja a lekérdezések átviteli sebességét, mert nem terheli túl a végpontot a kérésekkel. A jobb teljesítményt a végpontfigyelési képernyőn tekintheti meg.
2021. április 01.
- Gyorsan megtalálhatja a lekérdezések fordításával, végrehajtásával és eredménylekérésével töltött időt a lekérdezések előzményei között. Lásd: Lekérdezési profil. Korábban ezek az információk csak egy lekérdezésre kattintva és a Végrehajtás részletei lap megnyitásával érhetők el.
- Az SQL-végpontok már nem lépik túl a maximálisan megadott fürtöket. Az SQL-végponthoz lefoglalt fürtök 24 óra elteltével újraindulnak, ami létrehozhat egy rövid ablakot, amelyben még egy fürt található.
2021. március 18.
- A lekérdezésszerkesztő automatikus kiegészítése mostantól támogatja a Databricks SQL szintaxisát, és környezet- és aliasérzékeny. Lásd: Lekérdezés létrehozása.
- A JDBC- és ODBC-kérések nem hiúsulnak meg érvénytelen munkamenethibákkal, miután a munkamenet túllépte a kiszolgáló időkorlátjait. A BI-ügyfelek mostantól zökkenőmentesen helyreállhatnak a munkamenet-időtúllépések esetén.
2021. március 11.
- A Databricks SQL-hez újonnan engedélyezett munkaterületek rendszergazdái és felhasználói már nem férnek hozzá automatikusan a Databricks SQL-hez. A Databricks SQL-hez való hozzáférés engedélyezéséhez a rendszergazdának a következőkkel kell rendelkeznie:
- Lépjen a rendszergazdai beállítások lapra.
- Kattintson a Felhasználók fülre .
- A fiókjuk sorában kattintson a Databricks SQL hozzáférési jelölőnégyzetére.
- Kattintson a Megerősítés gombra.
- Ismételje meg a 3. és a 4. lépést, hogy hozzáférést biztosítson a felhasználóknak a Databricks SQL-hez, vagy hozzáférést adjon a csoportoknak.
- Egyszerűen hozhat létre lekérdezéseket, irányítópultokat és riasztásokat az Új > [Lekérdezés | Irányítópult | Riasztás] az oldalsáv tetején.
- Lekérdezésszerkesztő mostantól menti a piszkozatokat, és visszaállíthatja a mentett lekérdezést. Lásd: Lekérdezések írása és adatok feltárása az SQL-szerkesztőben.
- Többé nem hozhat létre külső adatforrásokat.
- Javult az SQL-végpontok monitorozási diagramjának megbízhatósága. A diagramon már nem jelennek meg időnként hamis hibaüzenetek.
2021. március 04.
A Lekérdezések, irányítópultok és Riasztások API dokumentációja már elérhető. Lásd: Databricks REST API-referencia.
Az ütemezett irányítópult-frissítések mostantól mindig végrehajtva lesznek. A frissítések a webalkalmazásban lesznek végrehajtva, így az irányítópultot már nem kell megnyitnia egy böngészőben. Lásd: Irányítópult automatikus frissítése.
Az SQL Warehouse API-val létrehozott új SQL-végpontok mostantól két órás alapértelmezett időtúllépéssel engedélyezik az automatikus leállítást.
A Tableau Online felhasználói mostantól csatlakozhatnak AZ SQL-végpontokhoz. Tekintse meg az új Tableau Online rövid útmutatót.
2021. február 26.
Az Azure Databricks új Power BI-összekötője, amely 2020 szeptemberében jelent meg nyilvános előzetes verzióban, mostantól ga. Ez biztosítja:
- Egyszerű kapcsolatkonfiguráció: az új Power BI Azure Databricks-összekötő integrálva van a Power BI-ba, és néhány kattintással egy egyszerű párbeszédpanelen konfigurálja.
- A Microsoft Entra-azonosító hitelesítő adatain alapuló hitelesítés – a rendszergazdáknak már nincs szükségük a PAT-jogkivonatok konfigurálására.
- Az új Azure Databricks ODBC-illesztőprogramnak köszönhetően gyorsabban importálhatja és optimalizálhatja a metaadat-hívásokat, ami jelentős teljesítménybeli fejlesztésekkel jár.
- Az Azure Databricks-adatok Power BI-on keresztüli elérése tiszteletben tartja az Azure Databricks-tábla hozzáférés-vezérlését és a Microsoft Entra ID-identitáshoz társított Azure Storage-fiókengedélyeket.
További információ: Power BI csatlakoztatása az Azure Databrickshez.
2021. február 25.
- Az SQL-végpont engedélyeinek beállítása mostantól gyorsabb. Ez egy lépés közvetlenül egy új SQL-végpont létrehozása után, és könnyen elérhető egy meglévő végpont szerkesztésekor. Lásd: Csatlakozás SQL-raktárhoz és SQL-raktár kezelése.
- A vizualizációs beállítások újbóli felhasználásához mostantól duplikálhatja a vizualizációt. Lásd: Vizualizáció klónozása.
- A lekérdezési eredmények mostantól az Azure Databricks-fiók helyett a fiókjában vannak tárolva.
- Ha meg szeretné akadályozni, hogy az adatok kiszivárogjanak egy objektum összes meghatározott engedélyének felsorolásával, a futtatáshoz
SHOW GRANTS [<user>] <object>
a következőknek kell lennie:- A Databricks SQL-rendszergazda vagy a tulajdonos.
<object>
- A megadott felhasználó.
[<user>]
- A Databricks SQL-rendszergazda vagy a tulajdonos.
2021. január 7.
- A tétlen végpontokkal kapcsolatos költségek csökkentése érdekében az új SQL-végpontokon mostantól engedélyezve van az automatikus leállítás, amelynek alapértelmezett időkorlátja két óra. Az időkorlát elérése után a végpont leáll. Bármikor szerkesztheti az időkorlátot, illetve le is tilthatja az automatikus leállítást.
- A
TEXT
típusú lekérdezési paraméterek kivételével már nem lesznek idézőjelek hozzáadva a lekérdezési paraméterekhez. HaDropdown List
,Query Based Dropdown List
vagy bármelyDate
típusú lekérdezési paramétert használt, a lekérdezés működéséhez idézőjeleket kell hozzáadnia. Ha például a lekérdezés aSELECT {{ d }}
, mostantól így kell megadnia:SELECT '{{ d }}'
.
2020. november 18.
A Databricks örömmel mutatja be a Databricks SQL nyilvános előzetes verzióját, amely intuitív környezetet biztosít az alkalmi lekérdezések futtatásához és irányítópultok létrehozásához a data lake-ben tárolt adatokon. A Databricks SQL lehetővé teszi a szervezet számára egy többfelhős lakehouse-architektúra működtetését, amely adatraktározási teljesítményt nyújt a Data Lake Economics használatával. Databricks SQL:
- Integrálható az olyan jelenleg használt BI-eszközökkel, mint a Tableau és a Microsoft Power BI, így saját adattavából kérdezheti le a legteljesebb és legfrissebb tárolt adatait.
- A meglévő BI-eszközöket olyan SQL-natív felülettel egészíti ki, amely lehetővé teszi az adatelemzők és az adatszakértők számára, hogy közvetlenül az Azure Databricksen keresztül kérdezzék le az adattó adatait.
- Lehetővé teszi a lekérdezések megállapításainak megosztását gazdag vizualizációk és húzással átrendezhető irányítópultok segítségével, amelyekben automatikus riasztások jelzik a fontos adatváltozásokat.
- A Connect to a SQL Warehouse használatával megbízhatóságot, minőséget, skálázást, biztonságot és teljesítményt biztosít a data lake-hez, így a legutóbbi és teljes adatok használatával futtathat hagyományos elemzési számítási feladatokat.
- Bevezeti az
USAGE
adathozzáférés felügyeletének egyszerűsítésére vonatkozó jogosultságot. Ahhoz, hogy objektumot használhasson egy sémában, a művelet végrehajtásához szükséges jogosultságokon kívül meg kell adnia a séma HASZNÁLATI jogosultságát is. AUSAGE
jogosultság a sémáknak vagy a katalógusnak adható. A táblázat hozzáférés-vezérlését már alkalmazó munkaterületek esetében aUSAGE
jogosultságot aCATALOG
gyökéren lévő felhasználócsoport automatikusan megkapja. Részletekért tekintse meg a Hive metaadattár-jogosultságait és biztonságos objektumait (örökölt).
További részletekért tekintse meg az Azure Databricks mi az adattárházakat?
Megoldott problémák
- SQL-szerkesztő. Az SQL-szerkesztő mostantól megőrzi a kijelölt szöveget és görgetési pozíciót a lekérdezéslapok közötti váltáskor.
- SQL-szerkesztő. Ha az SQL-szerkesztőben egy lekérdezésen a "Futtatás" gombra kattint, lépjen egy másik oldalra, és térjen vissza a lekérdezés végrehajtása közben, a szerkesztő megjeleníti a megfelelő lekérdezési állapotot. Ha a lekérdezés befejeződik, amíg Ön egy másik oldalon van, a lekérdezés eredményei az SQL-szerkesztő oldalára való visszatéréskor lesznek elérhetők.
- Mostantól külső metaadattárként használhatja a MySQL 8.0-t.
DESCRIBE DETAIL
a Delta-táblák parancsai már nem fognak működnijava.lang.ClassCastException: java.sql.Timestamp cannot be cast to java.time.Instant.
- A parquet-fájlok időbélyegekkel való
INT96
olvasása már nem működik. - Ha egy felhasználó FUTTATÁSI engedéllyel rendelkezik egy lekérdezésen, és futtatja azt, ha a lekérdezést egy másik felhasználó hozta létre, a lekérdezés előzményei felhasználóként jelenítik meg a lekérdezés futóját.
- A null értékek mostantól figyelmen kívül lesznek hagyva a diagramok megjelenítésekor, így javítva a diagramok használhatóságát. Korábban például a sávdiagram sávjai nagyon kicsinek tűntek, ha null értékek voltak jelen. A tengelyek most már csak nem null értékek alapján vannak beállítva.
Ismert problémák
- A Delta Lake-től eltérő adatforrásokból származó, több fürtből álló, elosztott terhelésű SQL-végpontokból beolvasott adatok inkonzisztensek lehetnek.
- A Databricks SQL-ben elérhető deltatáblák feltöltik a séma- és táblatulajdonságaikat a konfigurált metaadattárba. Ha külső metaadattárt használ, látni fogja a Delta Lake információit a metaadattárban. A Delta Lake a képességeihez mérten próbálja a legnaprakészebb állapotban tartani ezt az információt. Emellett a
DESCRIBE <table>
parancsot is használhatja az információ metaadattárban történő frissítéséhez. - A Databricks SQL nem támogatja az olyan zónaeltolódásokat, mint a "GMT+8" munkamenet-időzónák. A megkerülő megoldás egy régióalapú időzóna https://en.wikipedia.org/wiki/List_of_tz_database_time_zoneshasználata , például "Etc/GMT+8" helyett. Az időzónák beállításáról további információt a SET TIME ZONE (IDŐZÓNA BEÁLLÍTÁSA) című témakörben talál.
Gyakori kérdések (GYIK)
- Hogyan számítják fel a Databricks SQL számítási feladatait?
- Hol futnak az SQL-végpontok?
- Használhatok SQL-végpontokat Adattudomány > Mérnöki munkaterület SQL-jegyzetfüzeteiből?
- Hozzáférést kaptam az adatokhoz egy felhőszolgáltató hitelesítő adataival. Miért nem férek hozzá ezekhez az adatokhoz a Databricks SQL-ben?
Hogyan számítják fel a Databricks SQL számítási feladatait?
A Databricks SQL számítási feladatait a standard feladatok számítási termékváltozata alapján számítjuk fel.
Hol futnak az SQL-végpontok?
Az Azure Databricks-fürtökhöz hasonlóan az SQL-végpontok is az Azure-fiókban jönnek létre és kezelhetők. Az SQL-végpontok automatikusan kezelik az SQL-optimalizált fürtöket a fiókban, és a végfelhasználói igényeknek megfelelően méretezhetők.
Használhatok SQL-végpontokat Adattudomány > Mérnöki munkaterület SQL-jegyzetfüzeteiből?
Szám Sql-végpontokat használhat Databricks SQL-lekérdezésekből, BI-eszközökből, valamint más JDBC- és ODBC-ügyfelekből.
Hozzáférést kaptam az adatokhoz egy felhőszolgáltató hitelesítő adataival. Miért nem férek hozzá ezekhez az adatokhoz a Databricks SQL-ben?
A Databricks SQL-ben az adatokhoz való hozzáférés az adathozzáférés-vezérlés hatálya alá tartozik, és a rendszergazdának vagy az adattulajdonosnak először meg kell adnia a megfelelő jogosultságokat.