Linpack иногда запускается, иногда нет, но ничего не изменилось - PullRequest
Новая
       55

Linpack иногда запускается, иногда нет, но ничего не изменилось

1 голос
/ 16 ноября 2010

Я установил Linpack на 2-узловом кластере с процессорами Xeon. Иногда, если я запускаю Linpack с этой командой:

mpiexec -np 28 -print-rank-map -f /root/machines.HOSTS ./xhpl_intel64

linpack запускает и печатает вывод, иногда я вижу только напечатанные отображения mpi, а затем ничего не следует. Мне это кажется случайным поведением, потому что я ничего не меняю между вызовами, и, как уже упоминалось, Linpack иногда запускается, иногда нет. В top я вижу, что xhpl_intel64 процессы созданы и они интенсивно используют ЦП, но при просмотре трафика между узлами iftop говорит мне, что ничего не отправлено.

Я использую MPICH2 в качестве реализации MPI. Это мой HPL.dat: 

# cat HPL.dat 
HPLinpack benchmark input file
Innovative Computing Laboratory, University of Tennessee
HPL.out      output file name (if any)
6            device out (6=stdout,7=stderr,file)
1            # of problems sizes (N)
10000         Ns
1            # of NBs
250          NBs
0            PMAP process mapping (0=Row-,1=Column-major)
1            # of process grids (P x Q)
2            Ps
14            Qs
16.0         threshold
1            # of panel fact
2            PFACTs (0=left, 1=Crout, 2=Right)
1            # of recursive stopping criterium
4            NBMINs (>= 1)
1            # of panels in recursion
2            NDIVs
1            # of recursive panel fact.
1            RFACTs (0=left, 1=Crout, 2=Right)
1            # of broadcast
1            BCASTs (0=1rg,1=1rM,2=2rg,3=2rM,4=Lng,5=LnM)
1            # of lookahead depth
1            DEPTHs (>=0)
2            SWAP (0=bin-exch,1=long,2=mix)
64           swapping threshold
0            L1 in (0=transposed,1=no-transposed) form
0            U  in (0=transposed,1=no-transposed) form
1            Equilibration (0=no,1=yes)
8            memory alignment in double (> 0)

edit2:

Теперь я просто позволю программе работать некоторое время, и через 30 минут она говорит мне: 

# mpiexec -np 32 -print-rank-map -f /root/machines.HOSTS ./xhpl_intel64
(node-0:0,1,2,3,4,5,6,7,8,9,10,11,12,13,14,15)
(node-1:16,17,18,19,20,21,22,23,24,25,26,27,28,29,30,31)
Assertion failed in file ../../socksm.c at line 2577: (it_plfd->revents & 0x008) == 0
internal ABORT - process 0
APPLICATION TERMINATED WITH THE EXIT STRING: Hangup (signal 1)

Это проблема MPI?

Знаете ли вы, что это за проблема?

1 Ответ

2 голосов
/ 17 ноября 2010

Я выяснил, в чем проблема: MPICH2 использует разные случайные порты при каждом запуске, и если они заблокированы, ваше приложение не запустится правильно.Решением для MPICH2 является установка переменной среды MPICH_PORT_RANGE в значение START: END, например:

export MPICH_PORT_RANGE = 50000: 51000

Best, heinrich

...