Atlasz - ELTE IIG HPC

Felhasználói eszközök

Eszközök a webhelyen

Nyomvonal:
slurm

Különbségek

A kiválasztott változat és az aktuális verzió közötti különbségek a következők.

Összehasonlító nézet linkje

Következő változat 		Előző változat
slurm [2013/01/30 17:13]
maulis létrehozva 		slurm [2021/03/03 00:26] (aktuális)
maulis hpc2019 aktualizálás
Sor 2: Sor 2:
 A SLURM (Simple Linux Utility for Resource Management) rendszert használjuk. Ez a [[https://computing.llnl.gov/linux/slurm/|Lawrence Livermore National Laboratory fejlesztése]]. A SLURM (Simple Linux Utility for Resource Management) rendszert használjuk. Ez a [[https://computing.llnl.gov/linux/slurm/|Lawrence Livermore National Laboratory fejlesztése]].
  
-Történeti átekintést és más queue rendszerekkel összehasonlítást [[queuecomaprsion|itt]] olvashat.+Történeti áttekintést és más queue rendszerekkel összehasonlítást [[queuecomparison|itt]] olvashat.
  
  
Sor 8: Sor 8:
  
   sbatch [param] scriptname.sh   sbatch [param] scriptname.sh
-Lefoglalja a kért erőforrásokat (node-okat) majd az egyik lefoglalt node-ban elindítja a kért ''scriptname.sh'' programot, 1 szálon. A script kiimenete egy ''slurm-`job-id'.out'' file-ban képződik meg. +Lefoglalja a kért erőforrásokat (node-okat) majd az egyik lefoglalt node-ban elindítja a kért ''scriptname.sh'' programot, 1 szálon. A script kimenete egy ''slurm-`job-id'.out'' file-ban képződik meg. 
  
   srun programname   srun programname
  
-  *sbatch scripten belül használva. Az ''sbatch'' által lefoglalt erőforrásban futtatja a megadott programot. Az MPICH programot képes futtatni. Amennyiben a program egy script, úgy minden allokált magon elindít egy példányt. +  *sbatch scripten belül használva. Az ''sbatch'' által lefoglalt erőforrásban futtatja a megadott programot. Amennyiben a program egy script, úgy minden allokált magon elindít egy példányt. 
-  * Interaktívan használva. Lefoglalja a kért erőforrásokat (node-okat). Az MPICH programot képes futtatni. Amennyiben a program egy script, úgy minden allokált magon elindít egy példányt. Megvárja, amig a program(ok) végetérnek. Emiatt elsősorban rövidebb feladatokra, tesztelésre, hibakeresésre használható. +  * Interaktívan használva. Lefoglalja a kért erőforrásokat (node-okat). Amennyiben a program egy script, úgy minden allokált magon elindít egy példányt. Megvárja, amíg a program(ok) véget érnek. Emiatt elsősorban rövidebb feladatokra, tesztelésre, hibakeresésre használható. Ha éppen üres a queue. 
  
   salloc [param]   salloc [param]
-Interaktívan használható. lefoglalja a kívánt erőforrásokat és shellt ad az indítási gépen (a fejgépen). Programfejlesztésre ajánljuk csak. +Interaktívan használható. lefoglalja a kívánt erőforrásokat és shellt ad az indítási gépen (a fejgépen). Programfejlesztésre ajánljuk csak. Alkalmas arra, hogy a lefoglalt node -ra be lehessen interaktívan jelentkezni. 
  
   squeue   squeue
Sor 22: Sor 22:
  
   sinfo   sinfo
-Az egész rendszerről ad egy áttekintő képet. Melyik partíción melyik node foglalt, melyik iddle, melyik down. +Az egész rendszerről ad egy áttekintő képet. Melyik partíción melyik node foglalt, melyik idle, melyik down. 
  
   scancel job-id   scancel job-id
-Ezzel lehet kilőni egy elindított jobot, a véget érése elött. Ha nem adsz meg paramétert, akkor az összes jobodat (csak a tieidet) kilövi.+Ezzel lehet kilőni egy elindított jobot, a véget érése előtt. Ha nem adsz meg paramétert, akkor az összes jobodat (csak a tieidet) kilövi.
  
 ===Legfontosabb kapcsolók, opciók:=== ===Legfontosabb kapcsolók, opciók:===
 Az alábbi kapcsolók egyaránt használhatók az sbatch, srun, salloc parancsoknál. Az alábbi kapcsolók egyaránt használhatók az sbatch, srun, salloc parancsoknál.
  
-  * ''-p partition'' +<file>-p partition</file> 
-A futtató partíció neve. Lehetséges értékek: hpc2009, hpc2005, atlasz  +A futtató partíció neve. Lehetséges értékek: hpc2019, login, flocking. 
-  * ''-N nodecount'' +<file>--nodes nodecount</file> 
-Az allokálandó node-ok száma. Egyéb kapcsoló nélkül a slurm úgy gondolja, hogy node-onkét 1 program (pthread, openMP) fog futni. Lásd a ''-B'' kapcsolót. A hpc2009 és hpc2005 partíciókhoz ajánljuk.  +Az allokálandó node-ok száma. Egyéb kapcsoló nélkül a slurm úgy gondolja, hogy node-onkét 1 program (pthread, openMP) fog futni. Lásd a ''--ntasks-per-node'' kapcsolót. A hpc2019 partícióhoz ajánljuk.  
-  * ''-B 2:4:2 -O'' +<file>-n 3</file> 
-Egy node-on 2 socket, 4core/socket, 2 thread/core allokáció. (vagyis 16 thread/node) hpc2009 partícióhoz.  +3 processzormag allokálása. (3 szál indítása). A login, hpc2019 és a flocking partícióhoz ajánljuk. 
-  * ''-B 2:4:1'' +
-Egy node-on 2 socket, 4core/socket allokáció. (vagyis 8 thread/node) hpc2009 partícióhoz.  +
-  * ''-B 2:2:1'' +
-Egy node-on 2 socket, 2core/socket allokáció. (vagyis 4 thread/node) hpc2005 partícióhoz.  +
-  * ''-n 3'' +
-3 processzormag allokálása. Az atlasz és a flocking partícióhoz ajánljuk. +
  
 ==Példák 16 szálú MPI programok indítására== ==Példák 16 szálú MPI programok indítására==
-Az alkalmazás természetétől függ, hogy melyik lesz a leggyorsabb. Előre megmondani nem lehet. ELképzelhető, hogy két nagyságrendet is változik a program futási sebessége csupán ettől.+Az alkalmazás természetétől függ, hogy hány szálon lesz a leggyorsabb. Előre megmondani nem tudjuk. Az eddig telsztelt MPI programok 100 szálon nem voltak gyorsabbak, mint 50 szálon. A leggyakoribb maximlális futásteljesítményt 20-50 szál között adták. Gyakori még, hogy a program logikája csak kettőhatvány szállal működik jól.
  
-  sbatch -N 1 -B 2:4:2 -O scriptname.sh +  sbatch --nodes 1 --ntasks-per-node=16 scriptname.sh 
-Ez 1 node-ot allokál. Ezen a node-on indít 16 szálat. Minden szálnak 0.75 GiByte memóriaja van (pontosabban összesen 12 GiByte)  +Ez 1 node-ot allokál. Ezen a node-on indít 16 szálat.  
-  sbatch -N 2 -B 2:4:1 scriptname.sh +  sbatch --nodes 2 --ntasks-per-node=8 scriptname.sh 
-Ez 2 node-ot allokál. Mindkét node-on indít 8-8 szálat. Minden szálnak 1.5 GiByte memóriaja van.  +Ez 2 node-ot allokál. Mindkét node-on indít 8-8 szálat.  
-  sbatch -N 4 -B 2:2:1 scriptname.sh +  sbatch --nodes 4 --ntasks-per-node=4 scriptname.sh 
-Ez 4 node-ot allokál. Mind a négy node-on indít 4-4 szálat. Minden szálnak 3 GiByte memóriaja van.  +Ez 2 node-ot allokál. Mindkét node-on indít 8-8 szálat.  
-  sbatch -N 8 -B 2:1:1 scriptname.sh +  sbatch --nodes 16 --ntasks-per-node=1 scriptname.sh 
-Ez 8 node-ot allokál. Mind a nyolc node-on indít 2-2 szálat. Minden szálnak 6 GiByte memóriaja van.  +Ez 16 node-ot allokál. Mind a 16 node-on indít 1-1 szálat. 
-  sbatch -N 16 -B 1:1:1 scriptname.sh +  sbatch -n 16 scriptname.sh 
-Ez 16 node-ot allokál. Mind a 16 node-on indít 1-1 szálat. Minden szálnak 12 GiByte memóriaja van. +Ez "valahogy" elindítja a programot 16 szálon. Ahogy a rendelkezésre álló erőforrások lehetővé teszik. 1 node-on az egészet, vagy 16 node-on egy-egy szálat. 
 + 
 +==Másfajta (nem MPI) programok indítása== 
 + 
 +Bővebben a [[swquide]] oldalon.
slurm.1359562385.txt.gz · Utolsó módosítás: 2013/01/30 17:13 szerkesztette: maulis

Eszközök az oldalon

Hacsak máshol nincs egyéb rendelkezés, ezen wiki tartalma a következő licenc alatt érhető el: GNU Free Documentation License 1.3
GNU Free Documentation License 1.3 Donate Powered by PHP Valid HTML5 Valid CSS Driven by DokuWiki