<div dir="ltr">Спасибо за разъяснение! Про оповещение на эту тему помню. Буду иметь это ввиду, если буду rsync использовать.<div><br></div><div>---</div><div>С уважением,</div><div>Бухарский Николай</div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">пн, 13 мар. 2023 г. в 10:37, anikeev <<a href="mailto:anikeev@ut.mephi.ru">anikeev@ut.mephi.ru</a>>:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">On Mon, 2023-03-13 at 10:22 +0300, Nikolai Bukharskii wrote:<br>
> Добрый день!<br>
> <br>
> Спасибо, все работает! <br>
> <br>
> Rsync в последние два месяца вообще не пользовался. Для передачи<br>
> файлов использовал только scp.<br>
<br>
Возможно, воспользовался кто-то другой из пользователей.<br>
<br>
Слабое место GlusterFS - большое время переименования файла из-за DHT<br>
адресации внутри кластера хранения.<br>
<br>
Утилита копирования rsync оптимизирована для работы по TCP сетям с<br>
неустойчивым каналом, поэтому при копировании дробит каждый файл на<br>
множество частей, копирует их независимо друг от друга параллельно, а<br>
потом на месте назначения локально собирает из частей оригинальный<br>
файл. Такой алгоритм работы может вызывать тысячи операций<br>
переименования на каждый копируемый файл, которых тоже может быть очень<br>
много.<br>
<br>
При использовании rsync на GlusterFS нужно обязательно использовать<br>
опции --whole-file --inplace, иначе можно вызвать сбой клиента<br>
GlusterFS на том узле, на котором выполнялся rsync.<br>
<br>
Это требование указано в руководстве пользователя:<br>
<br>
<a href="https://ut.mephi.ru/pdf/projects/hpc/userguide.pdf" rel="noreferrer" target="_blank">https://ut.mephi.ru/pdf/projects/hpc/userguide.pdf</a><br>
<br>
И проводилось дополнительное оповещение пользователей через рассылку:<br>
<br>
<a href="https://lists.mephi.ru/pipermail/hpc/2022-October/000971.html" rel="noreferrer" target="_blank">https://lists.mephi.ru/pipermail/hpc/2022-October/000971.html</a><br>
<br>
Увжаемые пользователи, пожалуйста, будьте внимательны при копировании<br>
файлов на /mnt/pool/6!<br>
<br>
> <br>
> ---<br>
> С уважением,<br>
> Бухарский Николай<br>
> <br>
> пн, 13 мар. 2023 г. в 10:13, anikeev <<a href="mailto:anikeev@ut.mephi.ru" target="_blank">anikeev@ut.mephi.ru</a>>:<br>
> > On Sun, 2023-03-12 at 12:29 +0300, Nikolai Bukharskii wrote:<br>
> > > Добрый день!<br>
> > <br>
> > Здравствуйте!<br>
> > <br>
> > > При попытке подключения к хранилищу pool/6 (cd /mnt/pool/6/...)<br>
> > > возникает ошибка: "Transport endpoint is not connected".<br>
> > Подключение<br>
> > > к другим хранилищам работает исправно.<br>
> > <br>
> > Проблема возникла только на головном узле Cherenkov, на работе<br>
> > вычислительных узлов и головных узлов других кластеров она не<br>
> > сказалась.<br>
> > <br>
> > > Можно ли, пожалуйста, попросить исправить эту ошибку?<br>
> > <br>
> > Ошибка исправлена. Вы случйно не пользуетесь rsync без аргументов -<br>
> > -<br>
> > whole-file --inplace? Требования по использованию этих аргументов<br>
> > указаны в руководстве пользователя:<br>
> > <br>
> > <a href="https://ut.mephi.ru/pdf/projects/hpc/userguide.pdf" rel="noreferrer" target="_blank">https://ut.mephi.ru/pdf/projects/hpc/userguide.pdf</a><br>
> > <br>
> > > ---<br>
> > > С уважением,<br>
> > > Бухарский Николай<br>
> > > <br>
> > > <br>
> > > _______________________________________________<br>
> > > hpc mailing list<br>
> > > <a href="mailto:hpc@lists.mephi.ru" target="_blank">hpc@lists.mephi.ru</a><br>
> > > <a href="https://lists.mephi.ru/listinfo/hpc" rel="noreferrer" target="_blank">https://lists.mephi.ru/listinfo/hpc</a><br>
> > <br>
> > _______________________________________________<br>
> > hpc mailing list<br>
> > <a href="mailto:hpc@lists.mephi.ru" target="_blank">hpc@lists.mephi.ru</a><br>
> > <a href="https://lists.mephi.ru/listinfo/hpc" rel="noreferrer" target="_blank">https://lists.mephi.ru/listinfo/hpc</a><br>
<br>
-- <br>
С уважением,<br>
ведущий инженер отдела UNIX-технологий НИЯУ МИФИ,<br>
к.ф.-м.н. Аникеев Артем.<br>
email: <a href="mailto:aaanikeyev@mephi.ru" target="_blank">aaanikeyev@mephi.ru</a>, <a href="mailto:anikeev@ut.mephi.ru" target="_blank">anikeev@ut.mephi.ru</a><br>
<br>
Best regards,<br>
MEPhI UNIX-technology department lead engineer,<br>
Artem Anikeev, Ph.D.<br>
e-mail: <a href="mailto:aaanikeyev@mephi.ru" target="_blank">aaanikeyev@mephi.ru</a>, <a href="mailto:anikeev@ut.mephi.ru" target="_blank">anikeev@ut.mephi.ru</a><br>
<br>
<br>
<br>
<br>
_______________________________________________<br>
hpc mailing list<br>
<a href="mailto:hpc@lists.mephi.ru" target="_blank">hpc@lists.mephi.ru</a><br>
<a href="https://lists.mephi.ru/listinfo/hpc" rel="noreferrer" target="_blank">https://lists.mephi.ru/listinfo/hpc</a><br>
</blockquote></div>