Februari 2022

  • Artikel

Dessa funktioner och förbättringar av Azure Databricks-plattformen släpptes i februari 2022.

Kommentar

Versioner mellanlagras. Ditt Azure Databricks-konto kanske inte uppdateras förrän en vecka eller mer efter det första lanseringsdatumet.

Enklare schemaläggning för dina Delta Live Tables-pipelines (offentlig förhandsversion)

28 februari - 2 mars 2022

Nu kan du skapa ett schemalagt Azure Databricks-jobb för dina utlösta pipelines direkt från Delta Live Tables-användargränssnittet. Tidigare behövde du skapa jobbet och schemat för att köra jobbet från jobbgränssnittet.

Bläddra enkelt igenom historiken för dina pipelineuppdateringar för Delta Live Tables (offentlig förhandsversion)

28 februari - 2 mars 2022

Nu kan du se en historik över pipelineuppdateringar, inklusive uppdateringsstatus, information och händelser, med listrutan Uppdateringshistorik i Delta Live Tables-användargränssnittet.

Se till att jobb-idempotens för jobb-API:et Kör nu begäran

22-28 februari 2022: Version 3.66

Du kan nu använda den valfria idempotency_token parametern med åtgärden Jobb-API :et Kör nu för att säkerställa att exakt en körning av ett jobb startas. Tidigare kan det ha startat fler än en körning att skicka flera Run now begäranden för samma jobb.

Mer information om jobb-idempotens finns i Så här säkerställer du idempotens för jobb.

Förbättringar av jobbtjänstens stabilitet och skalbarhet

22-28 februari 2022: Version 3.66

Följande ändringar ökar stabiliteten och skalbarheten för jobbtjänsten:

  • Varje nytt jobb tilldelas en längre, unik, numerisk, icke-sekventiell identifierare. Klienter som använder jobb-API:et och är beroende av en fast identifierarlängd eller sekventiella eller monotont ökande identifierare måste ändras för att acceptera identifierare som är längre, icke-sekventiella och osorterade. Identifierartypen för int64 förblir oförändrad och kompatibiliteten bevaras för klienter som använder IEEE 754 64-bitars flyttalsnummer, till exempel JavaScript-klienter.
  • Värdet för fältet number_in_job , som ingår i svaret på vissa jobb-API-begäranden, är nu inställt på samma värde som run_id.

Jämföra MLflow-körningar från olika experiment

22-28 februari 2022: Version 3.66

Nu kan du visa och jämföra körningar från flera experiment. Se Jämför körningar från flera experiment.

Förbättringar av visning av MLflow-jämförelsekörningar

22-28 februari 2022: Version 3.66

Visning av jämförelsekörningar har förbättrats. Visualiseringar visas nu överst på sidan. Nu kan du bläddra igenom eller komprimera tabellerna som visar körningsinformation, parametrar och mått. Nu kan du också förenkla visningen genom att dölja parametrar och mått som inte varierar mellan körningar.

Information om jämförelsekörningssidan finns i Jämför körningar. Anvisningar om hur du jämför körningar finns i Jämför körningar.

Förbättrad insyn i jobbkörningsägare i klustrets användargränssnitt

22-28 februari 2022: Version 3.66

Fliken Jobbkluster i beräkningsgränssnittet har uppdaterats för att visa jobbkörningen som användare i stället för Jobbägare. Den här uppdateringen baseras på ändringar i jobbbehörighetsmodellen och ger bättre insyn i ägaren av en jobbkörning. Se Visa beräkning.

Ta bort datamängdskolumner i AutoML

22-28 februari 2022: Version 3.66

I Databricks Runtime 10.3 ML och senare kan du för klassificerings- och regressionsproblem nu ange kolumner i datauppsättningen som AutoML inte ska använda för träning. Se Parametrar för klassificering och regression.

Experimentsidan är GA

22-28 februari 2022: Version 3.66

Experimentsidan är nu allmänt tillgänglig.

Stöd för tillfälliga tabeller i Delta Live Tables Python-gränssnittet

22-28 februari 2022: Version 3.66

Du kan nu använda temporary egenskapen när du deklarerar tabeller med Delta Live Tables Python-gränssnittet. Om du definierar en tillfällig tabell instrueras Delta Live Tables att inte spara metadata för tabellen och förhindrar publicering av tabellen när target inställningen har konfigurerats. Mer information om hur du definierar Python-tabeller finns i Python-specifikationen .

Förbättringar av användargränssnittet för Delta Live Tables (offentlig förhandsversion)

22-28 februari 2022: Version 3.66

Den här versionen innehåller följande förbättringar av Delta Live Tables-användargränssnittet:

  • Nu kan du redigera dina pipelineinställningar i dialogrutan Inställningar i Delta Live Tables-användargränssnittet, vilket ger ett mer användarvänligt gränssnitt. Tidigare var du begränsad till att ändra inställningar genom att redigera JSON-specifikationen. Om du vill välja UI- eller JSON-vyn för att redigera pipelineinställningar klickar du på UI- eller JSON-knappen i dialogrutan Inställningar.
  • Händelseloggen på sidan Pipelineinformation markerar nu felposter, vilket gör det enklare att identifiera och åtgärda fel i dina pipelines.
  • Förloppsvisningen av pipelines som körs har förbättrats. När du nu visar diagrammet för din pipeline har noder i RUNNING tillståndet en animerad inkommande kant och en animerad övre kantlinje.

Stöd för Databricks Runtime 9.0-serien upphör

den 17 februari 2022

Stödet för Databricks Runtime 9.0 och Databricks Runtime 9.0 för Machine Learning upphörde den 17 februari. Se Supportlivscykler för Databricks-körning.

uppdateringar av Datavetenskap och teknisk landningssida

den 10 februari 2022

Vi har uppdaterat utseendet på landningssidan för Datavetenskap och teknik. Vissa länkar har ändrats, men det finns inga andra viktiga funktionsändringar.

Databricks Repos stöder nu AWS CodeCommit för Git-integrering

7-14 februari 2022: Version 3.65

Nu kan du använda AWS CodeCommit-lagringsplatser med Databricks Repos.

Förbättrad visualisering för dina Delta Live Tables-pipelines (offentlig förhandsversion)

7-14 februari 2022: Version 3.65

Dag-visualiseringen för pipeline har gjorts om för att förbättra användbarheten och navigeringen. Förbättringarna omfattar en ändring för att visa grafer från vänster till höger i stället för uppifrån och ned, vilket ger en mer intuitiv vy över pipelinekörningen.

Markdown-parser har uppdaterats

7-14 februari 2022: Version 3.65

Markdown-parsern som används i Azure Databricks-notebook-filer har uppdaterats. Några av de problem som noterades med den tidigare uppdateringen har åtgärdats. Mer specifikt är det inte längre nödvändigt att placera ett utrymme mellan hashtaggarna och texten i en rubrik, och länkar med blanksteg återges nu korrekt.

Delta Live Tables har nu stöd för bearbetning av ändringsdatainsamling (offentlig förhandsversion)

7-14 februari 2022: Version 3.65

Nu kan du implementera cdc-bearbetning (Change Data Capture) i dina Delta Live Tables-pipelines. CDC-bearbetning stöds med SQL- och Python-gränssnitten. Se Förenklad insamling av ändringsdata med API:et APPLY CHANGES i Delta Live Tables.

Ytterligare metaarkiv är nu tillgängliga i flera regioner

den 8 februari 2022

Följande metaarkiv är nu tillgängliga i följande regioner:

brazilsouth:

  • consolidated-brazilsouth-prod-metastore.mysql.database.azure.com

centralus:

  • consolidated-centralus-prod-metastore-addl-2.mysql.database.azure.com
  • consolidated-centralus-prod-metastore-addl-3.mysql.database.azure.com

eastus:

  • consolidated-eastus-prod-metastore-addl-2.mysql.database.azure.com
  • consolidated-eastus-prod-metastore-addl-3.mysql.database.azure.com
  • consolidated-eastus-prod-metastore-addl-4.mysql.database.azure.com

eastus2

  • consolidated-eastus2-prod-metastore-addl-2.mysql.database.azure.com
  • consolidated-eastus2-prod-metastore-addl-3.mysql.database.azure.com

francecentral

  • consolidated-francecentral-prod-metastore.mysql.database.azure.com

northeurope

  • consolidated-northeurope-prod-metastore-addl-2.mysql.database.azure.com
  • consolidated-northeurope-prod-metastore-addl-3.mysql.database.azure.com

southeastasia

  • consolidated-southeastasia-prod-metastore-addl-1.mysql.database.azure.com

switzerlandnorth

  • consolidated-switzerlandnorth-prod-metastore-0.mysql.database.azure.com

switzerlandwest

  • consolidated-switzerlandwest-prod-metastore-0.mysql.database.azure.com

uksouth

  • consolidated-uksouth-prod-metastore-addl-1.mysql.database.azure.com

westeurope

  • consolidated-westeurope-prod-metastore-addl-2.mysql.database.azure.com
  • consolidated-westeurope-prod-metastore-addl-3.mysql.database.azure.com

Du bör alltid inkludera alla relevanta värdnamn för varje region som du använder i dina användardefinierade vägar (UDR). Se Användardefinierade väginställningar för Azure Databricks.

Välj algoritmramverk som ska användas med AutoML

7-14 februari 2022: Version 3.65

I Databricks Runtime 10.3 ML och senare kan du ange algoritmramverk, till exempel scikit-learn, som AutoML inte bör överväga när det utvecklar modeller. Som standard tar AutoML hänsyn till modeller från scikit-learn, XGBoost och LightGBM för klassificerings- och regressionsproblem och från Prophet och Auto-ARIMA för prognosproblem. Se Parametrar för klassificering och regression.

Databricks värdbaserade MLflow-modeller kan nu söka efter funktioner från onlinebutiker

den 3 februari 2022

Modeller som paketeras med Feature Store-metadata kan automatiskt söka efter funktionsvärden från onlinebutiker vid serveringstid.

Databricks Runtime 10.3 och 10.3 ML är GA; 10.3 Foton är offentlig förhandsversion

den 2 februari 2022

Databricks Runtime 10.3 och Databricks Runtime 10.3 ML är nu allmänt tillgängliga. Databricks Runtime 10.3 Photon finns i offentlig förhandsversion.