Доступ к вычислительному кластеру
От: jhng Россия  
Дата: 23.03.11 09:28
Оценка:
Привет всем!

Никогда бы не подумал, что понадобится доступ к суперкомпьютеру, но вот возникла одна сложная численная задача. И решаться она будет судя по всему довольно долго. Отсюда возник следующий вопрос: какими отечественными (Россия) или зарубежными сервисами лучше пользоваться. Насколько велик гемор с получением доступа? Может быть у кого-то есть положительный опыт в этой области.

Запускать задачу на домашнем компе не вариант: системный блок довольно шумный, а время счета по предварительным оценкам составит несколько дней. Может все это хозяйство придется еще и с разными параметрами запускать и смотреть результаты. Ниже приведен краткий перечень того, что бы хотелось получить.

Необходимые вычислительные ресурсы:
Операционная система: Linux
Процессор: x86 с тактовой частотой >= 2 GHz (1 или 2 шт.)
Оперативная память: >= 1 GB
Свободное место на накопителе: ~ 1 — 1.5 GB
Должна быть возможность пересборки программы и сопутствующих библиотек из исходных кодов непосредственно на хосте, если в этом возникнет необходимость.
Re: Доступ к вычислительному кластеру
От: bastrakov Россия http://bastrakof.livejournal.com/
Дата: 23.03.11 10:01
Оценка: +1
Здравствуйте, jhng, Вы писали:

J>Необходимые вычислительные ресурсы:


imho быстрее будет попросить знакомых, работающих, выделить комп на работе.
если бы были в одном городе, то накидать железо и поставить линух — дело одного дня. а потом пусть крутиться сколько хочет. в серверной — никого не парит. с удаленным доступом могут быть проблемы, но ради такого может и ногами можно приходить?..
во
Re: Доступ к вычислительному кластеру
От: Kernan Ниоткуда https://rsdn.ru/forum/flame.politics/
Дата: 23.03.11 10:15
Оценка:
Здравствуйте, jhng, Вы писали:

J>Привет всем!


J>Никогда бы не подумал, что понадобится доступ к суперкомпьютеру, но вот возникла одна сложная численная задача. И решаться она будет судя по всему довольно долго. Отсюда возник следующий вопрос: какими отечественными (Россия) или зарубежными сервисами лучше пользоваться. Насколько велик гемор с получением доступа? Может быть у кого-то есть положительный опыт в этой области.


Была тема про это на rsdn, ищи.
Sic luceat lux!
Re: Доступ к вычислительному кластеру
От: D. Petrov США  
Дата: 23.03.11 11:13
Оценка: 26 (3)
Здравствуйте, jhng, Вы писали:

J>Привет всем!


J>Никогда бы не подумал, что понадобится доступ к суперкомпьютеру, но вот возникла одна сложная численная задача.



Amazon Elastic Compute Cloud

Нужна кредитка и пол часа времени, чтобы разобраться с запуском и доступом.

Самый мощный сервер на EC2 ($1.60/час):
    23 GB of memory
    33.5 EC2 Compute Units (2 x Intel Xeon X5570, quad-core “Nehalem” architecture)
    1690 GB of instance storage
    64-bit platform
    I/O Performance: Very High (10 Gigabit Ethernet)
    API name: cc1.4xlarge

Есть такие же но с двумя GPU NVIDIA Tesla "Fermi" M2050 GPUs. http://aws.amazon.com/ec2/hpc-applications/
Есть слабенькие сервера за $0.02/час и $0.08/час. На самые слабые даже Trial имеется на 720 часов рабочего времени.

Теоретически арендовать можно сколько угодно серверов. Практический — мне пишет что до 1000, несколько десятков я пробовал по своей карте.
Re[2]: Доступ к вычислительному кластеру
От: D. Petrov США  
Дата: 23.03.11 11:54
Оценка:
Здравствуйте, D. Petrov, Вы писали:

DP>Здравствуйте, jhng, Вы писали:


J>>Привет всем!


J>>Никогда бы не подумал, что понадобится доступ к суперкомпьютеру, но вот возникла одна сложная численная задача.



DP>Amazon Elastic Compute Cloud



Извиняюсь, привел неверную ссылку на сервис: http://aws.amazon.com/ec2
Re: Доступ к вычислительному кластеру
От: Vzhyk  
Дата: 23.03.11 13:44
Оценка:
23.03.2011 11:28, jhng пишет:

> Запускать задачу на домашнем компе не вариант: системный блок довольно

> шумный, а время счета по предварительным оценкам составит несколько
> дней.
Ну про amazon тебе уже сказали.

Но вот
"Операционная система: Linux
Процессор: x86 с тактовой частотой >= 2 GHz (1 или 2 шт.)
Оперативная память: >= 1 GB
Свободное место на накопителе: ~ 1 — 1.5 GB
"
нынче что-то очень древнее.
Сейчас же у многих дома 4-6 ядерные процы с видео с Кудой.
Posted via RSDN NNTP Server 2.1 beta
http://rsdn.org/File/27746/bel.gif
Re[2]: Доступ к вычислительному кластеру
От: jhng Россия  
Дата: 23.03.11 16:05
Оценка:
Здравствуйте, Vzhyk, Вы писали:

V>Но вот

V>"Операционная система: Linux
V>Процессор: x86 с тактовой частотой >= 2 GHz (1 или 2 шт.)
V>Оперативная память: >= 1 GB
V>Свободное место на накопителе: ~ 1 — 1.5 GB
V>"
V>нынче что-то очень древнее.
V>Сейчас же у многих дома 4-6 ядерные процы с видео с Кудой.

Ну это указаны минимальные требования. А куду используемая програмулька не умеет. А писать такую, которая умеет, довольно муторно, да и лень, да еще и не известно что окажется быстрее
Re[3]: Доступ к вычислительному кластеру
От: jhng Россия  
Дата: 23.03.11 16:14
Оценка:
В общем и целом про это я был в курсе. Однако яндекс говорит, что крупные университеты (типа МФТИ, МГУ и прочие У) предоставляют возможность поюзать их суперкомпьютеры на халяву всем желающим. Правда при этом надо заполнять какие-то анкеты, куда-то звонить и т.д. Вот мне и интересно — реально ли это на практике, или проще не париться и заплатить бабло амазону.
Re[3]: Доступ к вычислительному кластеру
От: Vzhyk  
Дата: 23.03.11 16:32
Оценка:
23.03.2011 18:05, jhng пишет:

> Ну это указаны минимальные требования. А куду используемая програмулька

> не умеет. А писать такую, которая умеет, довольно муторно, да и лень, да
> еще и не известно что окажется быстрее
Немного оффтоп.
А почему не на Matlab прога, в последней версии появилась поддержка
Куды, да и параллелизация там великолепная, а с матрицами как он
работает — я восхищаюсь.
Posted via RSDN NNTP Server 2.1 beta
http://rsdn.org/File/27746/bel.gif
Re[4]: Доступ к вычислительному кластеру
От: Vzhyk  
Дата: 23.03.11 16:34
Оценка:
23.03.2011 18:14, jhng пишет:

>

> В общем и целом про это я был в курсе. Однако яндекс говорит, что
> крупные университеты (типа МФТИ, МГУ и прочие У) предоставляют
> возможность поюзать их суперкомпьютеры на халяву всем желающим. Правда
> при этом надо заполнять какие-то анкеты, куда-то звонить и т.д. Вот мне
> и интересно — реально ли это на практике, или проще не париться и
> заплатить бабло амазону.
"Не нарушая общности могу предположить", что если ты не в МГУ на нужной
кафедре, то с амазоном будет проще, тем более, что "бабло" там копеечное
(да, там куча различных тарифов).
Posted via RSDN NNTP Server 2.1 beta
http://rsdn.org/File/27746/bel.gif
Re[4]: Доступ к вычислительному кластеру
От: Аноним  
Дата: 23.03.11 16:42
Оценка:
Здравствуйте, Vzhyk, Вы писали:


V>А почему не на Matlab прога, в последней версии появилась поддержка

V>Куды, да и параллелизация там великолепная, а с матрицами как он
V>работает — я восхищаюсь.

ИМХО матлаб, не моден нынче — Wolfram Mathematica рулит. Да и всегда была по умнее. Ну покрайней мере решатели умнее это точно.
Re[5]: Доступ к вычислительному кластеру
От: Mystic Украина http://mystic2000.newmail.ru
Дата: 23.03.11 17:01
Оценка:
Здравствуйте, Аноним, Вы писали:

А>ИМХО матлаб, не моден нынче — Wolfram Mathematica рулит. Да и всегда была по умнее. Ну покрайней мере решатели умнее это точно.


Что значит, поумнее? Мне от MATLAB надо четкое следование моим инструкциям. Все, что "по-умнее" может вызвать недопонимание. Это как говорить, что Nemerle умнее C++.
Re[5]: Доступ к вычислительному кластеру
От: Vzhyk  
Дата: 23.03.11 17:04
Оценка:
23.03.2011 18:42, Аноним 733 пишет:

> ИМХО матлаб, не моден нынче — Wolfram Mathematica рулит. Да и всегда

> была по умнее. Ну покрайней мере решатели умнее это точно.
А причем тут мода.
Matlab — "числодробилка".
Mathematica — символьные вычисления (мне они никоим образом не удобны).

У автора тоже "числодробилка".

Конкурент Matlab — это Оctave и Scilab. Но последнее лет 5 Mathworks за
ум взялась, а оба бесплатных конкурента остались в 2000-м году.
Posted via RSDN NNTP Server 2.1 beta
http://rsdn.org/File/27746/bel.gif
Re[6]: Доступ к вычислительному кластеру
От: Аноним  
Дата: 23.03.11 17:20
Оценка:
Здравствуйте, Vzhyk, Вы писали:

V>23.03.2011 18:42, Аноним 733 пишет:


>> ИМХО матлаб, не моден нынче — Wolfram Mathematica рулит. Да и всегда

>> была по умнее. Ну покрайней мере решатели умнее это точно.
V>А причем тут мода.
V>Matlab — "числодробилка".
V>Mathematica — символьные вычисления (мне они никоим образом не удобны).

Мода, при том, что математика сейчас умеет много больше чем матлаб. И числодробить тоже. А символьные вычисления чем не число дробилка?

V>У автора тоже "числодробилка".


V>Конкурент Matlab — это Оctave и Scilab. Но последнее лет 5 Mathworks за

V>ум взялась, а оба бесплатных конкурента остались в 2000-м году.

Я Маллаб выкинул 2010 — ый — туда ему и дорога. Не справляется даже с элементарными вещами — уже даже в онлайне некторые вещи делаются быстрее чем него а многие он вообще решить не может.

Вообщем — после заявлений что математика это символьные вычисления спорить смысла не имеет.
Re[6]: Доступ к вычислительному кластеру
От: Аноним  
Дата: 23.03.11 17:27
Оценка:
Здравствуйте, Mystic, Вы писали:

M>Здравствуйте, Аноним, Вы писали:


А>>ИМХО матлаб, не моден нынче — Wolfram Mathematica рулит. Да и всегда была по умнее. Ну покрайней мере решатели умнее это точно.


M>Что значит, поумнее? Мне от MATLAB надо четкое следование моим инструкциям. Все, что "по-умнее" может вызвать недопонимание. Это как говорить, что Nemerle умнее C++.
Re[5]: Доступ к вычислительному кластеру
От: D. Petrov США  
Дата: 24.03.11 08:36
Оценка: :)
Здравствуйте, Vzhyk, Вы писали:


V>"Не нарушая общности могу предположить", что если ты не в МГУ на нужной

V>кафедре, то с амазоном будет проще, тем более, что "бабло" там копеечное
V>(да, там куча различных тарифов).


"Не нарушая общности ..." с amazon-ом будет проще даже если вы на нужной кафедре и лично знакомы с местной профессурой. Проверенно
Re: Доступ к вычислительному кластеру
От: fleandr  
Дата: 30.03.11 07:55
Оценка:
Здравствуйте, jhng, Вы писали:

J>Привет всем!


J>Никогда бы не подумал, что понадобится доступ к суперкомпьютеру, но вот возникла одна сложная численная задача. И решаться она будет судя по всему довольно долго. Отсюда возник следующий вопрос: какими отечественными (Россия) или зарубежными сервисами лучше пользоваться. Насколько велик гемор с получением доступа? Может быть у кого-то есть положительный опыт в этой области.


J>Запускать задачу на домашнем компе не вариант: системный блок довольно шумный, а время счета по предварительным оценкам составит несколько дней. Может все это хозяйство придется еще и с разными параметрами запускать и смотреть результаты. Ниже приведен краткий перечень того, что бы хотелось получить.


J>Необходимые вычислительные ресурсы:

J>Операционная система: Linux
J>Процессор: x86 с тактовой частотой >= 2 GHz (1 или 2 шт.)
J>Оперативная память: >= 1 GB
J>Свободное место на накопителе: ~ 1 — 1.5 GB
J>Должна быть возможность пересборки программы и сопутствующих библиотек из исходных кодов непосредственно на хосте, если в этом возникнет необходимость.

Сделайте Boinc проект и будет нахаляву.
А вообще это какая то хилая задачка на несколько дней )))
Реально попросить друга )
Re: Доступ к вычислительному кластеру
От: tlp  
Дата: 30.03.11 14:38
Оценка:
Чем не устраивает аренда dedicated server ?
Re[2]: Доступ к вычислительному кластеру
От: jhng Россия  
Дата: 30.03.11 18:26
Оценка:
Здравствуйте, tlp, Вы писали:

tlp>Чем не устраивает аренда dedicated server ?


Эта мысль мне пришла в голову уже после создания темы
Re[3]: Доступ к вычислительному кластеру
От: Аноним  
Дата: 07.07.11 13:42
Оценка: :)
Здравствуйте, Vzhyk

мне подходит компьтер Amazon.com/EC2
для работы прувера первопорядковой логики.
Если Вас не затрудит, сообщите Ваши контактные данные
мой e-mail alex_dorin@rambler.ru
skype alexander_a_dorin

С уважением
Александр Дорин
 
Подождите ...
Wait...
Пока на собственное сообщение не было ответов, его можно удалить.