12/20/2013 1:36 PM, Аноним 50 пишет:
> как получть доступ к суперкомпьютеру, чтоб не очень дорого
Ты не определил, что ты понимаешь под суперкомпьютером и что значит дорого.
Посему Амазоновское облако тебе подойдет.
Posted via RSDN NNTP Server 2.1 beta
Re[2]: доступ к суперкомпьютеру
От:
Аноним
Дата:
20.12.13 10:55
Оценка:
Здравствуйте, Vzhyk, Вы писали:
V>12/20/2013 1:36 PM, Аноним 50 пишет:
>> как получть доступ к суперкомпьютеру, чтоб не очень дорого V>Ты не определил, что ты понимаешь под суперкомпьютером и что значит дорого. V>Посему Амазоновское облако тебе подойдет.
нужно много памяти ~10Г , трафик очень не больщой
Если это дает Амазоновское облако, то где почитать ?
Здравствуйте, BlackEric, Вы писали:
BE>Здравствуйте, Аноним, Вы писали:
А>>нужно много памяти ~10Г , трафик очень не больщой А>>Если это дает Амазоновское облако, то где почитать ?
BE>10 GB RAM ставятся в любой приличный домашний компьютер.
Может опечатка и аноним хотел 10 Tb RAM. Такое еще не везде ставят
На амазоне можно получить, но я затрудняюсь сказать во что аренда обойдется. Явно речь идет о килобаксовых суммах.
Но вообще-то гугл по запросу "аренда HPC" выдает кучу ссылок, в том числе и на российские проекты, например, вот
12/20/2013 3:32 PM, Michael7 пишет:
> Но вообще-то гугл по запросу "аренда HPC" выдает кучу ссылок, в том > числе и на российские проекты, например, вот
А где там ценник или только по звонку и при наличие лицензии,
разрешающей вычислять нечто?
Здравствуйте, Vzhyk, Вы писали:
V>12/20/2013 3:32 PM, Michael7 пишет:
>> Но вообще-то гугл по запросу "аренда HPC" выдает кучу ссылок, в том >> числе и на российские проекты, например, вот V>А где там ценник или только по звонку и при наличие лицензии, V>разрешающей вычислять нечто?
Не проверял. Но отсутствие ценника наводит на мысли Впрочем у EC2 ценник где-то был, там надо рассчитать исходя из стоимости узла кластера. Насчет лицензий тоже не в курсе.
12/20/2013 4:29 PM, Michael7 пишет:
> Не проверял. Но отсутствие ценника наводит на мысли Впрочем у EC2 ценник > где-то был, там надо рассчитать исходя из стоимости узла кластера.
У EC2 все расписано в деталях, если память не изменяет даже какой-то
простейший калькулятор на главной страничке у них был.
А вот эти российский потуги впечатляют, типа нам приказали сделать
странички и написать, что мы можем предоставлять подобные услуги, только
нам это нафиг не надо и идите вы лучше на ... EC2.
Я как-то прикидывал, на EC2 не сильно дешево получается, если не разово
в несколько лет посчитать, то компы купить дешевле и самому кластер
собрать, благо кроме 1G ethernet ничего больше не надо.
Различные машины:
— Дешевая (0.06$/час): m1.small: 1.7 GiB of memory, 1 EC2 Compute Unit.
— Стандартная (0.45$/час): m3.xlarge: 15 GiB of memory, 4 vCPUs, 13 EC2 Compute Units.
— Мощная (2.40$/час): cc2.8xlarge: 60.5 GiB memory, 88 EC2 Compute Units, 10 Gigabit Ethernet
— С памятью (3.50$/час): cr1.8xlarge: 244 GiB memory, 88 EC2 Compute Units, 10 Gigabit Ethernet
— за отдельные деньги он тебе дадут кластер из крутых машин с хорошей сетью. Пару лет назад они замеряли производительность этих своих кластеров и вошли в TOP500 суперкомпьютеров. Так что вполне себе настоящий супер компьютер.
За небольшую доплату можешь даже машину с Виндоузом арендовать!
По цене чуть дороже чем у обычных хостеров. Принимают обычные кредитные карты (4 года назад моя сбербанковская виза работала). Сейчас даже разбираться с их API не надо (как раньше) — все через веб интерфейсы делается. За один два вечера можно разобраться что там и как.
Здравствуйте, xma, Вы писали:
xma>что значит EC2 Compute Unit ?
Абстрактный "попугайчик" производительности. Примерно соответсвтует одному 2GHz CPU.
xma>и нет ли сервиса в котором предоставлялись ресурсы нескольких gpgpu (возможно в составе nvidia grid)?
Можно собрать кластер из машин с GPU, внутри которого будет выделенная 10G сеть — просто создаётся placement group и внутри неё запускаются машины.
Здравствуйте, Vzhyk, Вы писали:
>> Если ОЧЕНЬ интересно, то мы сейчас занимаемся созданием платформы для >> HPC на облаках. V>Бесплатной для юзверей?
Пока с политикой цен я пока не решил. Для первых юзверей однозначно будет примерно всё бесплатно.
Здравствуйте, Cyberax, Вы писали:
C>Здравствуйте, xma, Вы писали:
xma>>что значит EC2 Compute Unit ? C>Абстрактный "попугайчик" производительности. Примерно соответсвтует одному 2GHz CPU.
xma>>и нет ли сервиса в котором предоставлялись ресурсы нескольких gpgpu (возможно в составе nvidia grid)? C>Можно собрать кластер из машин с GPU, внутри которого будет выделенная 10G сеть — просто создаётся placement group и внутри неё запускаются машины.
C>См.: http://aws.amazon.com/hpc-applications/
и сколько в час будет стоит поиметь 40-50 Tflops gpgpu кластер ? кластер только из quadro или можно из обычных видюх (двойная точность не требуется) ?
Здравствуйте, xma, Вы писали:
C>>См.: http://aws.amazon.com/hpc-applications/ xma>и сколько в час будет стоит поиметь 40-50 Tflops gpgpu кластер ? кластер только из quadro или можно из обычных видюх (двойная точность не требуется) ?
Сколько стоить будет — вопрос интересный.
Узлы типа g2.2xlarge (NVidia “Kepler” GK104) и cg1.4xlarge (NVidia "Fermi” GF100) доступны на спотовом рынке, средняя цены у них 60 центов в час и $1 в час соответственно. Номинальная цена — $0.65 и $2.10 соответственно.
xma>а ваш HPC на облаках на каких условиях ?
Пока думаю. Мы предоставляем удобное окружение, которое обрабатывает запуск спотовых узлов, обработку сбоев и т.п.
Здравствуйте, Cyberax, Вы писали:
C>Здравствуйте, xma, Вы писали:
C>>>См.: http://aws.amazon.com/hpc-applications/ xma>>и сколько в час будет стоит поиметь 40-50 Tflops gpgpu кластер ? кластер только из quadro или можно из обычных видюх (двойная точность не требуется) ? C>Сколько стоить будет — вопрос интересный.
C>Узлы типа g2.2xlarge (NVidia “Kepler” GK104) и cg1.4xlarge (NVidia "Fermi” GF100) доступны на спотовом рынке, средняя цены у них 60 центов в час и $1 в час соответственно. Номинальная цена — $0.65 и $2.10 соответственно.
xma>>а ваш HPC на облаках на каких условиях ? C>Пока думаю. Мы предоставляем удобное окружение, которое обрабатывает запуск спотовых узлов, обработку сбоев и т.п.
сколько будет стоить час 20 Tflops gpgpu (пользовательские видеокарты) на вашей системе ?
Здравствуйте, xma, Вы писали:
xma>>>а ваш HPC на облаках на каких условиях ? C>>Пока думаю. Мы предоставляем удобное окружение, которое обрабатывает запуск спотовых узлов, обработку сбоев и т.п. xma>сколько будет стоить час 20 Tflops gpgpu (пользовательские видеокарты) на вашей системе ?
Сколько это видеокарт? Я не очень разбираюсь в их вычислительной мощности.
Здравствуйте, Cyberax, Вы писали:
C>Здравствуйте, xma, Вы писали:
xma>>>>а ваш HPC на облаках на каких условиях ? C>>>Пока думаю. Мы предоставляем удобное окружение, которое обрабатывает запуск спотовых узлов, обработку сбоев и т.п. xma>>сколько будет стоить час 20 Tflops gpgpu (пользовательские видеокарты) на вашей системе ? C>Сколько это видеокарт? Я не очень разбираюсь в их вычислительной мощности.
4 x radeon r290 (4.8 TFlops) . с приходом 20 nm TSMC должно быть в 2 раза дешевле .
Здравствуйте, xma, Вы писали:
xma>>>сколько будет стоить час 20 Tflops gpgpu (пользовательские видеокарты) на вашей системе ? C>>Сколько это видеокарт? Я не очень разбираюсь в их вычислительной мощности. xma>4 x radeon r290 (4.8 TFlops) . с приходом 20 nm TSMC должно быть в 2 раза дешевле .
Примерно $2 в час где-то при использовании спотовых узлов.
1/2/2014 5:21 PM, Cyberax пишет:
> Примерно $2 в час где-то при использовании спотовых узлов.
Дорого, учитывая, что часов 400-500 минимально понадобятся (где-то
ошибки в коде окажутся, еще что-то не так пойдет, разные эксперименты и
т.д). В итоге выгоднее железо купить.
C>Примерно $2 в час где-то при использовании спотовых узлов.
Дорого. За $1.25 можно было бы подумать, за $0.9 стоило бы брать без вопросов, при условии, что это реальные радеоны r9, а не nVidia (терафлоп терафлопу рознь!).
1/3/2014 10:40 AM, anomander пишет:
> Дорого. За $1.25 можно было бы подумать, за $0.9 стоило бы брать без > вопросов, при условии, что это реальные радеоны r9, а не nVidia
А ты вспомни, что тот же матлаб только Куду умеет. Так что для радеонов
нужно будет самому ручками на С писать.
Здравствуйте, anomander, Вы писали:
C>>Примерно $2 в час где-то при использовании спотовых узлов. A>Дорого. За $1.25 можно было бы подумать, за $0.9 стоило бы брать без вопросов, при условии, что это реальные радеоны r9, а не nVidia (терафлоп терафлопу рознь!).
Amazon предоставляет только NVidia. Насколько они мощные и сколько их надо — не разбирался.
Здравствуйте, Cyberax, Вы писали:
C>Здравствуйте, anomander, Вы писали:
C>>>Примерно $2 в час где-то при использовании спотовых узлов. A>>Дорого. За $1.25 можно было бы подумать, за $0.9 стоило бы брать без вопросов, при условии, что это реальные радеоны r9, а не nVidia (терафлоп терафлопу рознь!). C>Amazon предоставляет только NVidia. Насколько они мощные и сколько их надо — не разбирался.
а потестить ваши r9 можно когда будет ?
Здравствуйте, xma, Вы писали:
A>>>Дорого. За $1.25 можно было бы подумать, за $0.9 стоило бы брать без вопросов, при условии, что это реальные радеоны r9, а не nVidia (терафлоп терафлопу рознь!). C>>Amazon предоставляет только NVidia. Насколько они мощные и сколько их надо — не разбирался. xma>а потестить ваши r9 можно когда будет ?
Тестить можно на обычном аккаунте на Амазоне хоть сейчас.
Здравствуйте, Vzhyk, Вы писали:
V>1/3/2014 10:40 AM, anomander пишет:
>> Дорого. За $1.25 можно было бы подумать, за $0.9 стоило бы брать без >> вопросов, при условии, что это реальные радеоны r9, а не nVidia V>А ты вспомни, что тот же матлаб только Куду умеет. Так что для радеонов V>нужно будет самому ручками на С писать.
А мне куду не нужно, мне нужны простые целочисленные вычисления, которые, благодаря большему количеству ALU и выделенной операции сдвига, радеоны делают в 3-5 раз быстрее. Код написан, нужно только железо для его выполнения.
Здравствуйте, Cyberax, Вы писали:
C>Здравствуйте, xma, Вы писали:
A>>>>Дорого. За $1.25 можно было бы подумать, за $0.9 стоило бы брать без вопросов, при условии, что это реальные радеоны r9, а не nVidia (терафлоп терафлопу рознь!). C>>>Amazon предоставляет только NVidia. Насколько они мощные и сколько их надо — не разбирался. xma>>а потестить ваши r9 можно когда будет ? C>Тестить можно на обычном аккаунте на Амазоне хоть сейчас.
я так понял на амазоне 20 Tflops будет стоить значительно дороже 2$/hour ?
Здравствуйте, anomander, Вы писали:
A>Здравствуйте, Vzhyk, Вы писали:
V>>1/3/2014 10:40 AM, anomander пишет:
>>> Дорого. За $1.25 можно было бы подумать, за $0.9 стоило бы брать без >>> вопросов, при условии, что это реальные радеоны r9, а не nVidia V>>А ты вспомни, что тот же матлаб только Куду умеет. Так что для радеонов V>>нужно будет самому ручками на С писать. A>А мне куду не нужно, мне нужны простые целочисленные вычисления, которые, благодаря большему количеству ALU и выделенной операции сдвига, радеоны делают в 3-5 раз быстрее. Код написан, нужно только железо для его выполнения.
что считаете ?
Здравствуйте, anomander, Вы писали:
xma>>что считаете ? A>ничего эзотерического — хэши.
Так сразу и говори: [Bit]Coin. Их считать на Амазоне невыгодно, могу сразу сказать.
Здравствуйте, Cyberax, Вы писали: C>Так сразу и говори: [Bit]Coin. Их считать на Амазоне невыгодно, могу сразу сказать.
BTC вообще ни на чем кроме асиков считать невыгодно. Просто услышал разговор про кластер с радеонами, вот и решил разузнать; про Амазон и в мыслях нет.
Здравствуйте, xma, Вы писали:
xma>Cyberax, не подскажите как вопрос решается с удалённой отладкой (ведь система может зависнуть , её перезагружать надо) ?
Ну так можно перезагрузить через консоль Амазона или нашу систему. Удалённая отладка — как обычно, через TCP или удалённый рабочий стол.
Здравствуйте, Michael7, Вы писали:
M>Может опечатка и аноним хотел 10 Tb RAM. Такое еще не везде ставят M>На амазоне можно получить, но я затрудняюсь сказать во что аренда обойдется. Явно речь идет о килобаксовых суммах.
Сразу в одном АП — нельзя. Так виртуализировать ОЗУ Амазон еще не научился.
А вот доработать алгоритм, чтобы "не сразу" — можно. И нужно.
Впрочем у EC2 ценник где-то был, там надо рассчитать исходя из стоимости узла кластера. Насчет лицензий тоже не в курсе.
