<div dir="ltr">Добрый день,<div><br></div><div>проблема повторилась.</div><div><br></div><div>user: phkorneev</div><div>pbs script: ~/pool/JOAO.COIL.MAGN.2/task</div><div><br></div><div>error log: </div><div> [n118][[59096,1],32][btl_tcp_endpoint.c:657:mca_btl_tcp_endpoint_complete_connect] connect() to 10.0.101.122 failed: Connection refused (111)<br></div><div>[n115][[59096,1],95][btl_tcp_endpoint.c:657:mca_btl_tcp_endpoint_complete_connect] connect() to 10.0.101.122 failed: Connection refused (111)</div><div><br></div><div>output from the program (~/pool/picls3d.B5+/exe/picls3d)</div><div><br></div><div>............</div><div><div> finished fields</div><div> finished fields</div><div>--------------------------------------------------------------------------</div><div>mpirun noticed that process rank 0 with PID 31727 on node n121 exited on signal 9 (Killed).</div><div>--------------------------------------------------------------------------</div></div><div><br></div><div>с уважением, ф.корнеев</div><div><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">2015-03-29 17:56 GMT+03:00 Andrew A. Savchenko <span dir="ltr"><<a href="mailto:aasavchenko@ut.mephi.ru" target="_blank">aasavchenko@ut.mephi.ru</a>></span>:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><span class="">On Sat, 28 Mar 2015 23:02:15 +0300 Phil Korneev wrote:<br>
> Добрый день,<br>
><br>
</span><span class="">> спасибо за ответ. Вы уверены, что в walltime сумма астрономического времени<br>
> по всем ядрам?<br>
<br>
</span>Нет, я ошибся (хорошее доказательство того, что нечего работать по<br>
выходным :)). Сейчас я проверил работу текущих задач. walltime —<br>
это астрономическое время, прошедшее с момента старта задачи<br>
(независимо от числа ядер).<br>
<span class=""><br>
> Раньше это было полное время, по крайней мере если было бы<br>
> не так, мой вопрос появился бы с самого начала, но раньше задача<br>
> досчитывалась без проблем. Что-то изменилось в настройках?<br>
<br>
</span>Настройки PBS на этом кластере мы давно не меняли, так что не в<br>
этом дело. По логам я вижу всего три Ваших задачи, завершённых по<br>
превышению лимита времени:<br>
JOAO_test.5-/J.A.5-.e1673<br>
JOAO.COIL.MAGN.1/J.C.M1.e35210<br>
JOAO_test.7-B+E/J.A.7-BE.e22141<br>
<br>
Все они очень старые, поэтому полной информации о задачах не<br>
сохранилось (мы храним её неделю после завершения). Скорее всего,<br>
лимит времени действительно был превышен (особенно для задачи 1673,<br>
где он был установлен в сутки).<br>
<br>
Если проблема будет повторяться в будущем, сообщайте сразу.<br>
<br>
Best regards,<br>
Andrew Savchenko<br>
</blockquote></div><br><br clear="all"><div><br></div>-- <br><div class="gmail_signature">All the best , <br>Philipp K</div>
</div>