Как сделать распределение работы по группе узлов в разделе в SLURM - PullRequest
Новая
       9

Как сделать распределение работы по группе узлов в разделе в SLURM

0 голосов
/ 02 июля 2019

Я использую планировщик заданий.HPC состоит из двух групп узлов: ddcd [00-31] и ddcb [00-31] две группы имеют разные спецификации H / W.(40 ядер и 16 ядер), но в одном и том же разделе.

Я бы хотел, чтобы slurm выделял задание в одной из групп узлов вместо того, чтобы смешивать или распределять задание по двум группам.

Например, задание из 160 ядер должно быть выделено в 10 узлах ddcb или 4 узлах ddcd.

Я установил вес узла для каждой группы узлов, но это выглядит неработающим.наблюдалось смешанное распределение.Любая помощь будет оценена.

мой slurm.conf выглядит следующим образом: 

SlurmctldHost=mynode
MpiDefault=none
ProctrackType=proctrack/pgid
ReturnToService=1
SlurmctldPidFile=/var/run/slurmctld.pid
SlurmdPidFile=/var/run/slurmd.pid
SlurmdSpoolDir=/var/spool/slurmd
SlurmUser=slurm
StateSaveLocation=/var/spool/slurmctld
SwitchType=switch/none
TaskPlugin=task/none
JobRequeue=0
# JOB PRIORITY
#PriorityType=priority/multifactor
PriorityDecayHalfLife=14-0
PriorityCalcPeriod=5
PriorityFavorSmall=NO
PriorityMaxAge=14-0
PriorityUsageResetPeriod=NONE
PriorityWeightAge=10000
PriorityWeightFairshare=0
PriorityWeightJobSize=100000
PriorityWeightPartition=0
PriorityWeightQOS=1000000
#
AuthType=auth/munge
CryptoType=crypto/munge
#
PrologFlags=Alloc
#PrologFlags=x11

# SCHEDULING
FastSchedule=1
SchedulerType=sched/backfill
SchedulerParameters=enable_user_top
SelectType=select/linear
#
PropagateResourceLimitsExcept=MEMLOCK
#
# LOGGING AND ACCOUNTING
AccountingStorageType=accounting_storage/slurmdbd
AccountingStorageEnforce=qos,limits,
ClusterName=ssmbhpc
JobAcctGatherType=jobacct_gather/none
SlurmctldLogFile=/var/log/slurmctld.log
SlurmdLogFile=/var/log/slurmd.log
#
#
# COMPUTE NODES
NodeName=ddcd[00-31] Sockets=2 CoresPerSocket=20 ThreadsPercore=1 Weight=10 State=UNKNOWN
NodeName=ddcb[00-31] Sockets=2 CoresPerSocket=8 ThreadsPercore=1 Weight=200 State=UNKNOWN
#
# Partition
PartitionName=debug Nodes=ddcd[00-31] Default=YES MaxTime=INFINITE State=UP
PartitionName=strp Nodes=ddcd[00-31],ddcb[00-31] Default=No MaxTime=INFINITE State=UP QOS=normal

1 Ответ

0 голосов
/ 05 июля 2019

Я обнаружил, что это достижимо с помощью функции узла и sbatch --constraint

...