Luo mukautettuja Spark-pooleja Microsoft Fabric -ohjelmassa

Käytä räätälöityjä Spark-pooleja räätälöidäksesi laskentaa työkuormillesi Fabricissa. Voit valita solmun koon, konfiguroida automaattisen skaalauksen ja ottaa käyttöön dynaamisen suorittajan allokoinnin (dynaaminen executor-allokointi).

Mukautetut poolit auttavat tasapainottamaan suorituskyvyn ja kustannusten asettamalla skaalausrajat, jotka vastaavat työkuorman kysyntää.

Jos käytät jo aloituspooleja, mukautetut poolit täydentävät vaihtoehtoa, kun tarvitset enemmän hallintaa koon ja skaalauskäyttäytymisen suhteen tietyissä työkuormissa. Käytä aloituspooleja nopeaan käynnistykseen ja oletusasetuksiin, ja siirry mukautettuihin pooleihin, kun tarvitset työkuormakohtaista laskentaviritystä. Lisätietoja aloituspooleista löydät kohdasta Määritä aloituspoolit Fabricissa.

Ennakkovaatimukset

Oman Spark-poolin luomiseksi:

• Tarvitset ylläpitäjän roolin työtilassa.
• Kapasiteetin ylläpitäjän on otettava käyttöön Mukautetut työtilapoolitSpark Compute -asetuksissa kapasiteetille.

Lisätietoja löytyy kohdasta Fabric-kapasiteetin data-insinööri- ja data-analytiikan asetusten konfigurointi ja hallinta.

Mukautettujen Spark-uima-altaan luominen

Työtilaasi liittyvän Spark-varannon luominen tai hallinta:

1. Mene työtilaasi ja valitse Työtilan asetukset.

   

2. Laajenna valikko valitsemalla Tietotekniikka/tiede -vaihtoehto ja valitse sitten Spark-asetukset.

   

3. Valitse New PoolDefault pool for workspace -pudotusvalikosta luodaksesi uuden mukautetun Spark-poolin. Voit luoda useita omia pooleita ja valita minkä tahansa niistä oletuspooliksi työtilallesi.

4. Luo uusi allas -sivulle syötä altaan nimi. Valitse solmuperhe (esim. muistioptimoitu) ja solmukoko työkuorman vaatimusten mukaan. Lisätietoja solmujen koosta löytyy alla olevasta solmukokovaihtoehdoista .

   Vihje

   Solmun koko määräytyy kapasiteettiyksiköiden (CU) mukaan, jotka edustavat kullekin solmulle osoitettua laskentakapasiteettia.

   

5. Muokkausnäkymässä konfiguroi automaattinen skaalaus ja varaa suorittajat dynaamisesti.

   

   Käytä liukusäätimiä lisätäksesi tai vähentääksesi jokaista asetusta työkuorman tarpeidesi mukaan.

   • Jos Autoscale on käytössä, pooli skaalautuu määritettyjen minimi- ja maksimisolmuarvojen välillä aktiivisuuden perusteella.

   • Jos Dynamically allocation executors on käytössä, Fabric säätää suorittajien allokaatiota työkuorman tarpeen mukaan konfiguroitujen rajojen sisällä.

6. Valitse Luo.

Mukautetuissa pooleissa automaattinen taukoaika on oletuksena 2 minuuttia passiivisen käytön jälkeen. Kun automaattinen tauko saavutetaan, istunto päättyy ja klusteri vapautuu. Laskutus koskee vain silloin, kun laskentaa käytetään aktiivisesti. Microsoft Fabric -mukautetut Spark-poolit tukevat tällä hetkellä enintään 200 solmurajaa, joten varmista, että minimi- ja maksimiautomaattiskaalausarvot pysyvät tämän rajan sisällä.

Solmun kokoasetukset

Kun määrität mukautetun Spark-varannin, voit valita seuraavista solmukokoista:

Aiheeseen liittyvä sisältö

• Lue lisää Apache Sparkin julkisesta dokumentaatiosta.
• Aloita Spark työtilan hallinta-asetuksista Microsoft Fabric.
• Hallinnoi kirjastoja Fabric-ympäristöissä