[hpc-devel] Результат эксперимента

[Alexander A. Naumov]

А где есть mvapich?
В установленной системе был найден только один mpicc, от openmpi.

Саша Московский: 
1) работа с panasas не проверялась. Я не думаю, что под данную ОС
есть драйвер :(;
2) бездисковые узлы не проверялись;
3) Задержка и полоса в норме. Что-то типа 1.37 usec и 1340 MB/sec
в конфигурации с коммутатором.


-- 
С уважением,
Александр Наумов
ООО "Т-Платформы"
Тел.: (495)744-0995
http://www.t-platforms.ru
On Thu, Dec 27, 2007 at 02:09:29PM +0300, Stanislav Ievlev wrote:
> 26.12.07, Михаил Якушин<silicium на altlinux.ru> написал(а):
> > Сегодня, я и Александр Наумов из Т-платформ. Проводили эксперемент по
> > запуску дистрибутива на реальном железе. В основном интересовала
> > поддержка  infinband карточки от Melanox (модель точно не скажу).
> > В целом эксперимент удался: получилось связать по ib 2 узла, и проверить
> > работу MPI. В процессе тестирования были замечены недочёты:
> 
> > -При запуске не подгружаются модули ib. Пришлось загружать модуль mlx4
> > для карточки, и все модули из дериктории core(например ib_uverbs)
> > -Udev не создаёт (вообще) появившисе устройтва. Они должны быть в
> > /dev/infiband пришлось создать руками
> 
> Правильно ли я понимаю, что после копирования нужного файлика с
> правилами для  udev всё завелось? Хорошо бы отладить работоспособность
> именно этих правил.
> 
> 
> > -Не совсем ровно собран пакет openib-diags .Некоторые программы тербуют
> > запуска других пограмм из того-же пакета, и почему-то ищут их гдето
> > /usr/local/bin (решил проблему созданием ссылок)
> 
> Миша, пожалуйста повесь соотв. баги в bugzilla.
> 
> > -Не совсем правильно собран libibverbs. Почему-то нет линки
> > libibverbs.so есть только libibverbs.so.1 это не нравилось компилятору.
> 
> *.so живут в devel-части пакета. Пожалуйста посмотри. Собрал ли я
> libibverbs-devel или что-то забыл?
> 
> > -По словам Александра одного openmpi мало желательно ещё хотябы MVA mpich
> 
> MVApich2 есть, но с поддержкой tcp. Могли бы вы пересобрать этот пакет
> с поддержкой infiniband и повторить эксперимент?
> 
> > -Имхо в инсталере стоит сделать вариант установки для корневой ноды, там
> > например врядли будет хоминк на NFS
> 
> Что такое корневая нода? И чем она отличается от главной?
> 
> > -Я с ходу не нашёл как автоматизировать установку 2й ноды.
> 
> Рассылку надо внимательнее читать ;)
> mknfsroot, mkai.
> _______________________________________________
> HPC-devel mailing list
> HPC-devel на lists.altlinux.org
> https://lists.altlinux.org/mailman/listinfo/hpc-devel