Configuratie-instellingen voor Spark-rekenproces in Fabric-omgevingen
Microsoft Fabric Data-engineer ing- en Datawetenschap-ervaringen werken op een volledig beheerd Spark-rekenplatform. Dit platform is ontworpen om ongeëvenaarde snelheid en efficiëntie te leveren. Het bevat startersgroepen en aangepaste pools.
Een Fabric-omgeving bevat een verzameling configuraties, waaronder Spark-rekeneigenschappen waarmee gebruikers de Spark-sessie kunnen configureren nadat ze zijn gekoppeld aan notebooks en Spark-taken. Met een omgeving hebt u een flexibele manier om rekenconfiguraties aan te passen voor het uitvoeren van uw Spark-taken. In een omgeving kunt u met de rekensectie de eigenschappen op Spark-sessieniveau configureren om het geheugen en de kernen van uitvoerders aan te passen op basis van workloadvereisten.
Werkruimtebeheerders kunnen rekenaanpassingen in- of uitschakelen met de schakeloptie Rekenconfiguraties aanpassen voor items op het tabblad Pool van de sectie Data-engineer/Wetenschap in het scherm Werkruimte-instellingen.
Werkruimtebeheerders kunnen de leden en inzenders delegeren om de standaard rekenconfiguraties op sessieniveau in de Infrastructuuromgeving te wijzigen door deze instelling in te schakelen.
Als de werkruimtebeheerder deze optie uitschakelt in de werkruimte-instellingen, wordt de rekensectie van de omgeving uitgeschakeld en worden de standaardconfiguraties voor pool-berekeningen voor de werkruimte gebruikt voor het uitvoeren van Spark-taken.
Rekeneigenschappen op sessieniveau aanpassen in een omgeving
Als gebruiker kunt u een pool voor de omgeving selecteren in de lijst met pools die beschikbaar zijn in de werkruimte Fabric. De beheerder van de Infrastructuurwerkruimte maakt de standaardstartgroep en aangepaste pools.
Nadat u een pool in de sectie Compute hebt geselecteerd, kunt u de kernen en het geheugen voor de uitvoerders afstemmen binnen de grenzen van de knooppuntgrootten en limieten van de geselecteerde pool.
U selecteert bijvoorbeeld een aangepaste pool met een grote knooppuntgrootte, namelijk 16 Spark-vCores, als de omgevingspool. U kunt vervolgens het stuurprogramma/uitvoerprogramma kiezen als 4, 8 of 16, op basis van uw taakniveauvereiste. Voor het geheugen dat is toegewezen aan stuurprogramma's en uitvoerders, kunt u 28 g, 56 g of 112 g kiezen, die allemaal binnen de grenzen van een geheugenlimiet voor een groot knooppunt vallen.
Zie Wat is Spark-rekenkracht in Microsoft Fabric voor meer informatie over Spark-rekengrootten en hun kernen of geheugenopties.