SunGridEngine, Condor, Torque en tant que gestionnaires de ressources pour PVM

Question

Quelqu'un at-il une idée du gestionnaire de ressources qui est bon pour PVM? Ou devrais-je ne pas avoir utilisé PVM et me suis plutôt appuyé sur MPI (ou toute autre version, comme MPICH-2 [y en a-t-il d'autres qui sont meilleurs?]). La principale raison d'utiliser PVM était parce que la personne avant moi qui a commencé ce projet a assumé l'utilisation de PVM. Cependant, maintenant que ce projet est à moi (il n'a fait aucun travail significatif qui repose sur PVM) cela peut être facilement changé, de préférence à quelque chose qui est facile à installer parce que l'installation et la mise en place de PVM étaient très compliquées. Je suis penché vers SunGridEngine vu que j'ai du matériel dédié, et après avoir lu sur un autre poste de ce qui sont mieux pour le matériel dédié, SGE semble être le gagnant. Cependant, je ne suis pas sûr de ses performances en utilisant PVM. Vous vous demandez si quelqu'un a déjà eu une expérience avec PVM et SGE?

Si les gens utilisent SGE, qu'est-ce que vous utilisez pour communiquer d'ordinateur à ordinateur (ou machine virtuelle à la machine virtuelle)

Oh et je vais être en cours d'exécution des applications Perl/lignes si cette question est importante.

Des idées ou des idées?

Merci à l'avance à tous les commentaires,

• Tyug

Answer 1

Je lance PVM sur les systèmes Linux à l'aide du couple, et SGE LST sans aucun problème. Demandez-vous "Est-il possible d'utiliser SGE, Torque, etc. pour exécuter des applications PVM?"?

Si oui, consultez mon exemple de scripts de travail c-shell Linux ci-dessous. Notez que les scripts sont presque identiques, à l'exception de l'en-tête de chaque script, qui est conforme au format approprié pour chaque gestionnaire de ressources.

script de travail SGE:

#!/bin/csh 
#$ -N LTR-001 
#$ -o LTR-001.output 
#$ -e LTR-001.error 
#$ -pe comp 24 
#$ -l h_rt=04:00:00 
#$ -A cmit2 
#$ -cwd 
#$ -V 

# Setup envirnoment 
setenv LD_LIBRARY_PATH /lfs0/projects/cmit2/opt-intel/overture-noX/lib:${LD_LIBRARY_PATH} 
setenv PVM_ARCH LINUX 
setenv PVM_ROOT /lfs0/projects/cmit2/opt-intel/pvm3 
setenv PVM_BIN ${PVM_ROOT}/bin 
setenv PVM_RSH /usr/bin/ssh 
setenv MY_HOSTS pvm_hostfile 

rm -f ~/.pvmprofile 
env | grep PVM_ > ~/.pvmprofile 

# Create file containing _unique_ host names. Note that there are two possible sources of available hosts 
sort -k 1,1 -u ${MACHINE_FILE} >! ${MY_HOSTS} 

# Start PVM & add nodes 
printf "%s\n%s\n" conf quit|${PVM_ROOT}/lib/pvm ${MY_HOSTS} 
wait 
sleep 2 

# 
# Run apps requiring PVM. 
# 

wait 
# Exit PVM daemon 
echo "reset" | $PVM_ROOT/lib/pvm 
echo "halt" | $PVM_ROOT/lib/pvm 

script de travail de couple:

#!/bin/csh 
#PBS -N LTR-001 
#PBS -o LTR-001.output 
#PBS -e LTR-001.error 
#PBS -l nodes=3:ppn=8 
#PBS -l walltime=04:00:00 
#PBS -q compute 
#PBS -d . 

# Setup envirnoment 
setenv LD_LIBRARY_PATH /users/ps14/opt-intel/overture/lib:${LD_LIBRARY_PATH} 
setenv PVM_ARCH LINUX64 
setenv PVM_ROOT /users/ps14/opt-intel/pvm3 
setenv PVM_BIN ${PVM_ROOT}/bin 
setenv PVM_RSH ${PVM_ROOT}/ssh 
setenv MY_HOSTS pvm_hostfile 

rm -f ~/.pvmprofile 
env | grep PVM_ > ~/.pvmprofile 

# Create file containing _unique_ host names. Note that there are two possible sources of available hosts 
sort -k 1,1 -u ${PBS_NODEFILE} >! ${MY_HOSTS} 

# Start PVM & add nodes 
printf "%s\n%s\n" conf quit|${PVM_ROOT}/lib/pvm ${MY_HOSTS} 
wait 
sleep 2 

# 
# Run apps requiring PVM. 
# 

wait 
# Exit PVM daemon 
echo "reset" | $PVM_ROOT/lib/pvm 
echo "halt" | $PVM_ROOT/lib/pvm