Augusti 2021

  • Artikel

Dessa funktioner och förbättringar av Azure Databricks-plattformen släpptes i augusti 2021.

Kommentar

Versioner mellanlagras. Ditt Azure Databricks-konto kanske inte uppdateras förrän en vecka eller mer efter det första lanseringsdatumet.

Databricks Repos GA

den 31 augusti 2021

Databricks Repos är nu allmänt tillgängliga. Med Lagringsplatser kan du skapa nya eller klona befintliga Git-lagringsplatser i Azure Databricks, arbeta med notebook-filer i dessa lagringsplatser, följa Metodtips för git-baserad utveckling och samarbete och integrera dina CI/CD-arbetsflöden med Repos-API:er. Databricks Repos integreras med GitHub, Bitbucket, GitLab och Azure DevOps. Mer information finns i Git-integrering med Databricks Git-mappar och Repos API.

Ökad tidsgräns för långvariga notebook-jobb

23-30 aug 2021: Version 3.53

Nu kan du köra arbetsflödesjobb för notebook-filer som tar upp till 30 dagar att slutföra. Tidigare stöds endast jobb för notebook-arbetsflöden som tar upp till 48 timmar att slutföra. Mer information finns i Köra en Databricks-notebook-fil från en annan notebook-fil .

Förbättringar av jobbtjänstens stabilitet och skalbarhet

23-30 aug 2021: Version 3.53

Följande ändringar ökar stabiliteten och skalbarheten för jobbtjänsten:

  • Varje nytt jobb och körning tilldelas en längre, unik, numerisk, icke-sekventiell identifierare. Klienter som använder jobb-API:et och är beroende av en fast identifierarlängd eller sekventiella eller monotont ökande identifierare måste ändras för att acceptera identifierare som är längre, icke-sekventiella och osorterade. Identifierartypen för int64 förblir oförändrad och kompatibiliteten bevaras för klienter som använder IEEE 754 64-bitars flyttalsnummer, till exempel JavaScript-klienter.
  • Värdet för fältet number_in_job , som ingår i svaret på vissa jobb-API-begäranden, är nu inställt på samma värde som run_id.

Kommentar

Den här funktionen försenades till februari 2022.

Användarrättigheter som beviljas av gruppmedlemskap visas i administratörskonsolen

23-30 aug 2021: Version 3.53

Användarrättigheter som beviljas av gruppmedlemskap visas nu för varje användare på fliken Användare i administratörskonsolen.

Hantera MLflow-experimentbehörigheter (offentlig förhandsversion)

23-30 aug 2021: Version 3.53

Nu kan du hantera behörigheterna för ett MLflow-experiment från experimentsidan. Mer information finns i Ändra behörigheter för experiment.

Förbättrat jobbskapande från notebook-filer

23-30 aug 2021: Version 3.53

Nu kan du redigera och klona jobb som är associerade med en notebook-fil. Mer information finns i Skapa och hantera schemalagda notebook-jobb.

Virtuella datorer i Ddsv4-serien (offentlig förhandsversion)

23-30 aug 2021: Version 3.53

Azure Databricks stöder nu virtuella datorer i Ddsv4-serien. Mer information om dessa virtuella datorer finns i Ddv4- och Ddsv4-serien.

Förbättrat stöd för att komprimera notebook-rubriker

23-30 aug 2021: Version 3.53

Nu kan du komprimera eller expandera alla hopfällbara rubriker i en notebook-fil. Tidigare kunde du bara komprimera eller expandera en enda rubrik i taget. Mer information finns i Komprimerbara rubriker.

Databricks Runtime 9.0 och 9.0 ML är GA; 9.0 Foton är offentlig förhandsversion

den 17 augusti 2021

Databricks Runtime 9.0 och 9.0 ML är nu allmänt tillgängliga. 9.0 Foton finns i offentlig förhandsversion.

Mer information finns i den fullständiga viktig information på Databricks Runtime 9.0 (stöds inte) och Databricks Runtime 9.0 för ML (stöds inte).

Databricks Runtime 9.0 (Beta)

den 10 augusti 2021

Databricks Runtime 9.0 och Databricks Runtime 9.0 ML är nu tillgängliga som betaversioner.

Mer information finns i den fullständiga viktig information på Databricks Runtime 9.0 (stöds inte) och Databricks Runtime 9.0 för ML (stöds inte).

Hantera lagringsplatser programmatiskt med Databricks CLI (offentlig förhandsversion)

9-16 aug 2021: Version 3.52

Nu kan du hantera fjärranslutna Git-lagringsplatser med hjälp av Databricks-kommandoradsgränssnittet (CLI). Se Repos CLI (äldre).

Hantera lagringsplatser programmatiskt med Databricks REST API (offentlig förhandsversion)

9-16 aug 2021: Version 3.52

Nu kan du hantera fjärranslutna Git-lagringsplatser med hjälp av Databricks REST API. Se Repos-API.

Stöd för Databricks Runtime 7.6-serien upphör

den 8 augusti 2021

Stöd för Databricks Runtime 7.6, Databricks Runtime 7.6 för Machine Learning och Databricks Runtime 7.6 för Genomics avslutades den 8 augusti. Se Supportlivscykler för Databricks-körning.

Granskningshändelser loggas när du interagerar med Databricks Repos

9-13 augusti 2021: Version 3.52

När granskningsloggning är aktiverat loggas nu en granskningshändelse när du skapar, uppdaterar eller tar bort en Databricks-lagringsplats, när du listar alla Databricks Repos som är associerade med en arbetsyta och när du synkroniserar ändringar mellan en Databricks-lagringsplats och en fjärrlagringsplats. Mer information finns i Git-mapphändelser.

Förbättrat arbetsflöde för jobbskapande och hantering

9-13 augusti 2021: Version 3.52

Nu kan du visa och hantera jobb som är associerade med en notebook-fil. Mer specifikt kan du starta en jobbkörning, visa den aktuella eller senaste körningen, pausa eller återuppta jobbets schema och ta bort jobbet.

Användargränssnittet för att skapa notebook-jobb har ändrats och nya konfigurationsalternativ har lagts till. Mer information finns i Skapa och hantera schemalagda notebook-jobb.

Fotonkörningar är nu tillgängliga (offentlig förhandsversion)

9-13 augusti 2021: Version 3.52

Photon är den nya inbyggda vektoriserade motorn i Azure Databricks, direkt kompatibel med Apache Spark-API:er. Om du vill etablera kluster med Photon måste du använda en fotonavbildning.

Förenklade instruktioner för att ange Git-autentiseringsuppgifter (offentlig förhandsversion)

9-13 augusti 2021: Version 3.52

Anvisningarna på fliken Git-integrering på sidan Användare Inställningar har förenklats.

Importera flera notebook-filer i .html format

9-13 augusti 2021: Version 3.52

Du kan nu importera flera notebook-filer i .html format i en .zip fil. Tidigare kunde du bara importera en enskild notebook-fil i .html format åt gången.

Filen .zip kan innehålla mappar och notebook-filer i antingen .html format eller källfilformat (Python, Scala, SQL eller R). En .zip fil kan inte innehålla båda formaten.

Användbarhetsförbättringar för Delta Live Tables

9-13 augusti 2021: Version 3.52

Den här versionen innehåller följande förbättringar av Delta Live Tables-körningen och användargränssnittet:

  • När du skapar en pipeline kan du nu ange en måldatabas för publicering av dina Delta Live Tables-tabeller och metadata. Mer information om hur du publicerar datamängder finns i Pipelines för Publicera data från Delta Live Tables till Hive-metaarkivet .
  • Notebook-filer stöder nu syntaxmarkering för nyckelord i SQL-datauppsättningsdefinitioner. Du kan använda den här syntaxmarkeringen för att säkerställa att SQL-uttrycken i Delta Live Tables är korrekta. Se SQL-språkreferensen för mer information om SQL-syntaxen för Delta Live Tables.
  • Delta Live Tables-körningen genererar nu pipelinediagrammet innan du kör pipelinen, så att du kan se diagrammet i användargränssnittet tidigare.
  • Alla Python-bibliotek som konfigurerats i dina notebook-filer installeras nu innan du kör någon Python-kod, vilket säkerställer att biblioteken är globalt tillgängliga för alla Python-notebook-filer i din pipeline. Se [_]](.. /.. /.. /delta-live-tables/external-dependencies.md).