Посоветуйте миникластер для HPC
От: Mazay Россия  
Дата: 11.04.13 07:59
Оценка:
Требуется купить небольшой кластер до 64 ядер под высокопроизводительные научные вычисления.
На кластер планируется установить Slurm, OpenMPI и современные компиляторы GNU и Intel.
Вопрос — у какого производителя лучше купить кластер?
Вопрос в такой формулировке возник в связи с тем, что некоторые производители гарантируют работу своего кластера только с каким-то одним энтерпрайзовым платным дистрибутивом Линукса. Года через 3 после поставки это выливается в необходимость продлять лицензию на обновления. Причём энтерпрайзовые обновления зачастую не включают в себя последних версий системных библиотек. Следовательно нельзя использовать последние компиляторы, нельзя собирать новые версии активно разрабатываемого софта. Конкретно вот с этими ужасами мы столкнулись на кластере Hewlett-Packard c Red Hat Enterprise 5.2.
В принципе можно поставить какой-нибудь CentOS или Debian, но, поскольку железо не попсовое, могут вылезти проблемы с его поддержкой в ядре. Например люди на форумах жалуются, что при установке другого дистрибутива, вентиляторы перестают сбрасывать скорость после загрузки ОС и дико орут всё время. А там ещё всякие серверные дисковые контроллеры, райды, сеть и т.п.

Короче нам хочется такой мини-кластер, на который бы ещё лет 5 можно было ставить последнюю версию CentOS или Debian Testing. Знаете такой?
Главное гармония ...
Re: Посоветуйте миникластер для HPC
От: Cyberax Марс  
Дата: 11.04.13 08:16
Оценка:
Здравствуйте, Mazay, Вы писали:

M>Требуется купить небольшой кластер до 64 ядер под высокопроизводительные научные вычисления.

M>На кластер планируется установить Slurm, OpenMPI и современные компиляторы GNU и Intel.
M>Вопрос — у какого производителя лучше купить кластер?
У Amazon EC2.

Я серьёзно, своё железо будет окупаться примерно пару лет по сравнению с амазоновскими зарезервированными узлами.
Sapienti sat!
Re[2]: Посоветуйте миникластер для HPC
От: Mazay Россия  
Дата: 11.04.13 09:51
Оценка:
Здравствуйте, Cyberax, Вы писали:

M>>Требуется купить небольшой кластер до 64 ядер под высокопроизводительные научные вычисления.

M>>На кластер планируется установить Slurm, OpenMPI и современные компиляторы GNU и Intel.
M>>Вопрос — у какого производителя лучше купить кластер?
C>У Amazon EC2.

C>Я серьёзно, своё железо будет окупаться примерно пару лет по сравнению с амазоновскими зарезервированными узлами.


Заказчики на такое не пойдут — тут без вариантов. Надо чтобы в наших стенах всё считалось.
Главное гармония ...
Re[3]: Посоветуйте миникластер для HPC
От: Cyberax Марс  
Дата: 11.04.13 14:46
Оценка:
Здравствуйте, Mazay, Вы писали:

C>>Я серьёзно, своё железо будет окупаться примерно пару лет по сравнению с амазоновскими зарезервированными узлами.

M>Заказчики на такое не пойдут — тут без вариантов. Надо чтобы в наших стенах всё считалось.
Ну а вы их спросите. Амазону совершенно пофиг на то, что там считается. И у них есть дата-центры в Европе, если что.
Sapienti sat!
Re[4]: Посоветуйте миникластер для HPC
От: Mazay Россия  
Дата: 11.04.13 15:42
Оценка:
Здравствуйте, Cyberax, Вы писали:

C>>>Я серьёзно, своё железо будет окупаться примерно пару лет по сравнению с амазоновскими зарезервированными узлами.

M>>Заказчики на такое не пойдут — тут без вариантов. Надо чтобы в наших стенах всё считалось.
C>Ну а вы их спросите. Амазону совершенно пофиг на то, что там считается. И у них есть дата-центры в Европе, если что.

Не, совсем не вариант. То что можно — на Ломоносова какого-нибудь вынесем. Но можно не всё.

Так что ищем свою железку. И что-то мне кажется, что от RHEL-а не уйти.
Главное гармония ...
Re[5]: Посоветуйте миникластер для HPC
От: sgenie  
Дата: 11.04.13 21:44
Оценка: 4 (1)
Бери SGI — не прогадаешь. Это единственная серьезная контора, которая специализируется на HPC. Мы поработали с IBM — убиться об стену!
Re: Посоветуйте миникластер для HPC
От: zongang  
Дата: 13.04.13 15:18
Оценка:
Здравствуйте, Mazay, Вы писали:

M>Требуется купить небольшой кластер до 64 ядер под высокопроизводительные научные вычисления.

64 ядра?

А че так много? это же какая нибудь 4-х процессорная плата на последних Intel может обеспечить

http://www.supermicro.com/products/system/5U/5086/SYS-5086B-TRF.cfm тут аж 8 и 2ТБ памяти. Или вы это тоже "кластером" назовете?
Re: Посоветуйте миникластер для HPC
От: zubactik  
Дата: 13.04.13 16:37
Оценка:
Здравствуйте, Mazay, Вы писали:

Попробуйте проявить патриотизм и закупить у тех же Т-Платформ Т-Мини или V-Class. По цене может выиграете.
Re[6]: Посоветуйте миникластер для HPC
От: Mazay Россия  
Дата: 14.04.13 14:41
Оценка:
Здравствуйте, sgenie, Вы писали:

S>Бери SGI — не прогадаешь. Это единственная серьезная контора, которая специализируется на HPC. Мы поработали с IBM — убиться об стену!


Спасибо. У них интересные решения. Только они в России и вообще работают? На SGI.ru никаких контактов не нашёл. Вы сами с каким поставщиком работали?
Главное гармония ...
Re[2]: Посоветуйте миникластер для HPC
От: Mazay Россия  
Дата: 14.04.13 15:20
Оценка:
Здравствуйте, zongang, Вы писали:

M>>Требуется купить небольшой кластер до 64 ядер под высокопроизводительные научные вычисления.

Z>64 ядра?
Z>А че так много? это же какая нибудь 4-х процессорная плата на последних Intel может обеспечить

64 — это необходимый минимум. А дальше — как бюджет позволит.

Z>http://www.supermicro.com/products/system/5U/5086/SYS-5086B-TRF.cfm тут аж 8 и 2ТБ памяти. Или вы это тоже "кластером" назовете?

Хоть горшком назови, лишь бы считало. Сколько оно стоить будет, хотя бы примерно?
Главное гармония ...
Re[2]: Посоветуйте миникластер для HPC
От: Mazay Россия  
Дата: 14.04.13 15:36
Оценка:
Здравствуйте, zubactik, Вы писали:

Z>Попробуйте проявить патриотизм и закупить у тех же Т-Платформ Т-Мини или V-Class. По цене может выиграете.


А что у них теперь с ClustrX-ом? У нас же сейчас главная фобия — геморрой с ОСью. А они ставят линукс, запиленный специально для них компанией из Украины, с которой они прекратили сотрудничество. Что-то как-то ссыкотно.
Главное гармония ...
Re[3]: Посоветуйте миникластер для HPC
От: zubactik  
Дата: 14.04.13 16:51
Оценка: 4 (1)
Здравствуйте, Mazay, Вы писали:

M>Здравствуйте, zubactik, Вы писали:


Z>>Попробуйте проявить патриотизм и закупить у тех же Т-Платформ Т-Мини или V-Class. По цене может выиграете.


M>А что у них теперь с ClustrX-ом? У нас же сейчас главная фобия — геморрой с ОСью. А они ставят линукс, запиленный специально для них компанией из Украины, с которой они прекратили сотрудничество. Что-то как-то ссыкотно.


Вроде xCAT + CentOS|Suse|Win

Правда я работал с самим железом, а не с кластерами. Но вроде для V-Class и T-Mini как я сказал было.
Re[3]: Посоветуйте миникластер для HPC
От: zongang  
Дата: 15.04.13 14:56
Оценка: 4 (1)
Здравствуйте, Mazay, Вы писали:

M>Здравствуйте, zongang, Вы писали:


Z>>http://www.supermicro.com/products/system/5U/5086/SYS-5086B-TRF.cfm тут аж 8 и 2ТБ памяти. Или вы это тоже "кластером" назовете?

M>Хоть горшком назови, лишь бы считало. Сколько оно стоить будет, хотя бы примерно?

Десяточку голый сервер без цпу памяти хардов, я так понимаю...
Re[4]: Посоветуйте миникластер для HPC
От: Mazay Россия  
Дата: 15.04.13 16:45
Оценка:
Здравствуйте, zongang, Вы писали:

Z>>>http://www.supermicro.com/products/system/5U/5086/SYS-5086B-TRF.cfm тут аж 8 и 2ТБ памяти. Или вы это тоже "кластером" назовете?

M>>Хоть горшком назови, лишь бы считало. Сколько оно стоить будет, хотя бы примерно?

Z>Десяточку голый сервер без цпу памяти хардов, я так понимаю...


Бюджетно. Если в России за такой ценник кто-нибудь поставит, то будет здорово. Судя по всему они по CentOS поддержку дают.
Главное гармония ...
Re: Посоветуйте миникластер для HPC
От: Michael7 Россия  
Дата: 17.04.13 14:38
Оценка:
Здравствуйте, Mazay, Вы писали:

M>Короче нам хочется такой мини-кластер, на который бы ещё лет 5 можно было ставить последнюю версию CentOS или Debian Testing. Знаете такой?


Если нет специфических требований, например, желания поставить сеть InfiniBand, возможно вариант сделать этот кластер самим. Любители дома делают из стандартного железа и считают рендеринг, как вот здесь: http://helmer.sfe.se/ а вы чем хуже? Зато ставьте туда что хотите, с ремонтом и апгрейдом тоже не должно быть проблем. Хотя, конечно, чисто организационно оформить все это с бумагами это может оказаться головняком.
 
Подождите ...
Wait...
Пока на собственное сообщение не было ответов, его можно удалить.