Delen via

Januari 2024

  • Artikel

Deze functies en verbeteringen in het Azure Databricks-platform zijn uitgebracht in januari 2024.

Notitie

Releases worden gefaseerd. Uw Azure Databricks-account wordt mogelijk pas een week of meer bijgewerkt na de eerste releasedatum.

Ondersteuning voor systeemeigen XML-bestandsindelingen (openbare preview)

31 januari 2024

Ondersteuning voor systeemeigen XML-bestandsindeling is nu beschikbaar in openbare preview. Ondersteuning voor XML-bestandsindeling maakt opname, query's en parsering van XML-gegevens mogelijk voor batchverwerking of streaming. Het kan automatisch schema- en gegevenstypen afleiden en ontwikkelen, ONDERSTEUNT SQL-expressies zoals from_xmlen kan XML-documenten genereren. Er zijn geen externe jar's vereist en werkt naadloos samen met Automatische laadprogramma's, read_filesen COPY INTODelta Live Tables. Zie XML-bestanden lezen en schrijven voor meer informatie.

AI-modellen delen met Databricks Marketplace (openbare preview)

31 januari 2024

U kunt Marketplace nu gebruiken om modellen te delen die zijn geregistreerd in Unity Catalog. Zowel de provider- als consumentenwerkruimten moeten zijn ingeschakeld voor Unity Catalog om deel te nemen aan het delen van modellen.

Zie Wat is Databricks Marketplace? en Voeg modellen toe aan een share.

Updates voor regels voor netwerkbeveiligingsgroepen

31 januari 2023

Om de schaalbaarheid van het platform te verbeteren, vereist het Azure Databricks-besturingsvlak nu nieuwe eindpunten waarmee het klassieke gegevensvlak verbinding kan maken. Voor werkruimten die zijn geïmplementeerd in uw eigen virtuele Azure-netwerk, worden de netwerkpoorten 3306 en 8443-8451 nu toegevoegd aan de bestaande beveiligingsregel naar de AzureDatabricks bestemming, waardoor uitgaand verkeer op poort 443 wordt afgedwongen.

Zie Regels voor netwerkbeveiligingsgroepen voor meer informatie.

Update van werkruimtepad

In het verleden moesten gebruikers het /Workspace padvoorvoegsel voor sommige Databricks-API's (%sh) opnemen, maar niet voor andere (%runrest API-invoer). Gebruikers kunnen nu werkruimtepaden voorzien van het /Workspace voorvoegsel overal in Databricks. Oude verwijzingen naar paden zonder het /Workspace voorvoegsel worden omgeleid en blijven werken. Databricks raadt aan dat alle werkruimtepaden het /Workspace voorvoegsel gebruiken om deze te onderscheiden van volume- en DBFS-paden.

Ondersteuning voor Azure Storage-firewall van serverloze berekeningen is algemeen beschikbaar

30 januari 2024

Ondersteuning voor Azure Storage-firewall van serverloze Azure Databricks-berekeningen is algemeen beschikbaar. U kunt afdwingen dat serverloze SQL-warehouses stabiele subnet-id's gebruiken om verbinding te maken met Azure Storage en deze id's toe te staan op uw Azure-resourcefirewall. Zie Een firewall configureren voor serverloze rekentoegang.

Gestroomlijnde creatie van Azure Databricks-taken

29 januari 2024

Er wordt nu een lege taak gemaakt nadat u op de knop hebt geklikt om een taak te maken, zodat u instellingen op taakniveau, zoals tags, planning of meldingsinstellingen, kunt bewerken voordat u de eerste taak toevoegt. Voorheen moest u de eerste taak maken voordat u toegang krijgt tot instellingen op taakniveau. Zie Databricks-taken configureren en bewerken.

GPU-model bewaken dat workloads bedient met behulp van deductietabellen

29 januari 2024

U kunt nu uw GPU-model bewaken dat workloads bedient met behulp van deductietabellen. Zie deductietabellen voor het bewaken en opsporen van fouten in modellen.

Op URI-pad gebaseerde toegang tot externe Unity Catalog-volumes

25 januari 2024

U kunt nu cloudopslag-URI's gebruiken voor padgebaseerde toegang tot gegevens die worden beheerd door Unity Catalog die zijn opgeslagen in externe volumes. Zie welk pad wordt gebruikt voor toegang tot bestanden in een volume?

Lijsten met toegangsbeheer kunnen worden ingeschakeld voor bijgewerkte werkruimten

24 januari 2024

Instellingen voor toegangsbeheer zijn ingeschakeld voor alle werkruimten van het Premium-abonnement in november 2023.

Voor werkruimten die een upgrade uitvoeren van het Standard-abonnement naar het Premium-abonnement, worden de instellingen voor toegangsbeheer standaard uitgeschakeld. Werkruimtebeheerders kunnen nu de volgende instellingen voor toegangsbeheer inschakelen voor bijgewerkte werkruimten:

  • Toegangsbeheer voor werkruimte: hiermee kunnen gebruikers machtigingen voor werkruimteobjecten configureren.
  • Toegangsbeheer voor clusters, pools, taken: hiermee kunnen gebruikers machtigingen configureren voor clusters, pools en taken.
  • Zichtbaarheidsbeheer voor clusters: hiermee voorkomt u dat clusters zichtbaar zijn voor gebruikers die geen machtigingen voor deze clusters hebben.
  • Zichtbaarheid van taken: hiermee voorkomt u dat taken zichtbaar zijn voor gebruikers die geen machtigingen voor hen hebben.
  • Instelling voor zichtbaarheid van werkruimten: Hiermee voorkomt u dat notitieblokken en mappen zichtbaar zijn voor gebruikers die geen machtigingen voor hen hebben.

Nadat een instelling voor toegangsbeheer is ingeschakeld, kan deze niet worden uitgeschakeld. Zie Toegangsbeheerlijsten voor meer informatie.

Systeemtabel voor marketplace-vermeldingen is nu beschikbaar (openbare preview)

24 januari 2024>

Het Marketplace-systeemschema bevat nu een lijst met trechtergebeurtenissen (system.marketplace.listing_funnel_events) waar u consumentenacties voor uw vermeldingen kunt bewaken. Zie de tabel Met trechtergebeurtenissen weergeven.

Bijgewerkte gebruikersinterface voor notebookcellen (openbare preview)

24 januari 2024

Er is een bijgewerkt notitieblokcelontwerp beschikbaar. Als u het nieuwe celontwerp wilt inschakelen, opent u de pagina editorinstellingen in de werkruimte. Klik in de zijbalk op Ontwikkelaars. Schakel onder Experimentele functies de gebruikersinterface van nieuwe cel in. Zie de Interface en besturingselementen van Databricks-notebook voor meer informatie over het werken met notebookcellen.

Hulp bij snelle oplossing bij syntaxisfouten in het notebook

24 januari 2024

U kunt hulp krijgen van Databricks Assistant voor syntaxisfouten met behulp van Quick Fix. Zie Python-foutmarkeringen voor meer informatie.

Databricks Runtime 14.3 LTS (bèta)

22 januari 2024

Databricks Runtime 14.3 LTS en Databricks Runtime 14.3 LTS ML zijn nu beschikbaar als bètaversies.

Zie Databricks Runtime 14.3 LTS en Databricks Runtime 14.3 LTS voor Machine Learning.

AI-modellen delen met Delta Sharing (openbare preview)

19 januari 2024

U kunt Delta Sharing nu gebruiken om modellen te delen die zijn geregistreerd in Unity Catalog. Zowel de provider- als de ontvangerswerkruimten moeten zijn ingeschakeld voor Unity Catalog om modellen te delen.

Zie Modellen toevoegen aan een share.

Databricks Marketplace biedt ondersteuning voor het delen van volumes

18 januari 2023

Databricks Marketplace biedt nu toegang tot volumes (niet-tabellaire gegevens) zolang u een Databricks-werkruimte met Unity Catalog hebt. Volumes zijn Unity Catalog-objecten die een logisch opslagvolume in een opslaglocatie voor cloudobjecten vertegenwoordigen en ze bieden een manier om beheer en het delen van niet-tabellaire gegevensassets te beheren.

Zie Access-gegevensproducten in Databricks Marketplace (werkruimten met Unity Catalog).

Widgets maken vanuit de Databricks-gebruikersinterface

18 januari 2024

U kunt nu Databricks-widgets maken met behulp van de Databricks-gebruikersinterface. Zie Widgets maken met behulp van de gebruikersinterface voor meer informatie.

Systeemtabel warehouse-gebeurtenissen is nu beschikbaar (openbare preview)

18 januari 2024

De system.compute.warehouse_events tabel registreert wanneer SQL Warehouses starten, stoppen, omhoog en omlaag schalen. U kunt de tabel gebruiken om de SQL-warehouses in uw werkruimten te bewaken en te beheren. Zie referentie voor systeemtabellen voor warehouse-gebeurtenissen.

De maximale bestandsgrootte van de werkruimte is nu 500 MB

15 januari 2023

Afzonderlijke werkruimtebestanden zijn nu beperkt tot 500 MB. Voorheen was de limiet 200 MB. Lees beperkingen voor meer informatie.

Kennisgeving over het verwijderen van functies voor verouderde Git-integratie in Databricks

12 januari 2024

Na 31 januari 2024 verwijdert Databricks verouderde Git-integraties van notebooks. Deze functie heeft meer dan twee jaar de verouderde status en er wordt sinds november 2023 een afschaffingsmelding weergegeven in de gebruikersinterface van het product.

Lees Overschakelen naar Databricks-opslagplaatsen van verouderde Git-integratie voor meer informatie over het migreren naar Databricks Git-mappen (opslagplaatsen). Als deze verwijdering van invloed is op u en u een uitbreiding nodig hebt, neemt u contact op met uw Databricks-accountmanager.

Databricks ODBC-stuurprogramma 2.7.7

9 januari 2024

Versie 2.7.7 van het ODBC-stuurprogramma van Databricks (download) is uitgebracht. In deze release worden de volgende nieuwe functies en verbeteringen toegevoegd:

  • Azure Managed Identity-verificatie.
  • Ondersteuning voor asynchrone metagegevensbewerkingen. De server moet worden ondersteund SPARK_CLI_SERVICE_PROTOCOL_V9 en hoger.
  • Ondersteuning voor geparameteriseerde query's in de systeemeigen querymodus. De server moet worden ondersteund SPARK_CLI_SERVICE_PROTOCOL_V8 en hoger.
  • OAuth-uitbreiding: de connector kan nu de tokencache voor de browserverificatiestroom uitschakelen.

Deze release lost ook de volgende problemen op in 2.7.7:

  • De connector negeert privé-basis-CA wanneer u de Windows Trust Store gebruikt.
  • Wanneer een bewerking mislukt, sluit de connector de heartbeatthreads niet.
  • De connector biedt geen ondersteuning voor het optionele vernieuwingstoken.
  • Bij het uitvoeren van query's op tabellen met refererende namen kan de connector deze niet lezen.
  • Wanneer u OAuth-verificatie gebruikt, wordt de connector onverwacht beëindigd als de tekenreekslengte van de HOST kleiner is dan 20.

Ondersteuning voor Databricks Runtime 13.2-serie eindigt

6 januari 2024

Ondersteuning voor Databricks Runtime 13.2 en Databricks Runtime 13.2 voor Machine Learning is beëindigd op 6 januari. Zie de ondersteuningslevenscycli van Databricks.

AI-ondersteunende functies zijn standaard ingeschakeld

2-8 januari 2024

AI-ondersteunende functies zijn nu standaard ingeschakeld voor werkruimten zonder dat het beveiligingsprofiel voor naleving is ingeschakeld. Deze omvatten:

Beheerders kunnen zich afmelden voor AI-ondersteunende functies voor alle werkruimten in hun account of een subset van werkruimten. Zie Voor een account: Functies van Databricks Assistant uitschakelen of inschakelen.