Gestion PBS#

Liste des files d’attente#

A ce jour (octobre 2023), toutes les listes d’attente sont sans limitation de durée. Les files suivantes existent :

  • mono2_1, mono2_2, mono2_4, mono2_8, mono2_16 : elles sont utilisables avec les machines 16 coeurs, i.e. les 6 noeuds n15 à n20.

  • mono2_20 : utilisables sur les noeuds n02 à n14.

  • mono2_48 : utilisables sur les 6 machines HPE 48 coeurs, noeuds n22 à n27.

  • gpu_48 : utilisable avec la machine DEll GPU/CPU, noeud n21.

Que faire si une machine est en status down#

  • Il se peut que certains montages NFS ne soient plus présents. Se loguer sur la machine et regarder quels montages sont présents. Sinon, depuis la frontale tenter un execAll.sh mount -a

  • Il faut regarder le status de torque. On peut obtenir la liste des process torque disponibles :

execAll.sh /etc/init.d/torque status

puis relancer sélectivement la (les) machine(s) problématiques avec la commande :

ssh nodename /etc/init.d/torque stop
ssh nodename /etc/init.d/torque start

Notes:

  1. Il vaut mieux faire « stop » suivi de « start » plutôt que « restart »

  2. A ne pas faire sur des machines actives car cela tuerait les jobs en cours

Parfois, il faut relancer torque sur le serveur

/etc/init.d/torque stop
/etc/init.dtorque start

Enfin parfois on peut agir au niveau qmgr

qmgr:
print node toto
set node toto state=free

Bref, c’est un peu artisanal. L’idéal bien sûr est d’aller sur la machine concernée et de regarder dans les mom_logs la cause du passage au « down »