[Посоветуйте-тред] Собрать кластер

Я надеюсь вы преподаватель, не студент? Какие выч. задачи будет решать кластер? Какие требования?

adriano32 (14.10.2011 21:56:13)

Опиши задачу. А то может стоит вместо брендового железа вообще собирать кластер из десктопного в самодельном корпусе. При этом можно будет сэкономить или выиграть по производительности.

mironov_ivan (14.10.2011 21:59:53)

>Я надеюсь вы преподаватель, не студент?

да, не студент

>Какие выч. задачи будет решать кластер? Какие требования?

Стоимостные требования указаны в теме (55-60 тыс). Технические должны формироваться из задач: конечно-элементные вычисления, геометрическое моделирование, возможна, обработка графики (в общем, с ним может будут работать представители разных направлений).

Genuine (14.10.2011 22:00:39)

Софт самописный или готовыми продуктами планируете пользоваться?

adriano32 (14.10.2011 22:12:29)

>Софт самописный или готовыми продуктами планируете пользоваться?

Преимущественно самописный, но, возможно, что-то готовое в перспективе тоже будет использваться.

Genuine (14.10.2011 22:14:12)

> Необходимо, составить ориентировочную смету на вычислительный кластер начального уровня (55-60 тыс. грн.) для университетской лаборатории

Я думаю, из системных блоков ZX-Spectrum выйдет очень большой и недорогой кластер.

pacify (14.10.2011 22:21:22)

Серваки с ebay обойдутся в разы дешевле, мы брали брендовые и нонейм, вполне нормально. Для начала реши, что на них будет крутиться. Некоторым задачам нужен nas и 10Г езернет, что выйдет в копеечку.

cipher (14.10.2011 22:33:54)

Я бы на вашем месте в первую очередь связался с коллегами из других учебных учреждений Украины, например, Львовским ІФКС или КНУ, короче погуглить, что стоит у соседей, возможно связаться с ними лично ну а там принять решение в рамках профинансированной суммы.

adriano32 (14.10.2011 22:48:42)

купить машину PS3 ещё не предлагали?

aiqu6Ait (14.10.2011 22:48:47)

у нас в ИГТМ стоит кластер на каких=то первых 64р атлонах... дело в том, что гораздо дешевле ВУЗу сделать маленький ботнет на каких-нибудь боинках на ВУЗовских машинах, чем покупать кучу барахла.

aiqu6Ait (14.10.2011 22:51:45)

> Я думаю, из системных блоков ZX-Spectrum выйдет очень большой и недорогой кластер.

Какой может быть кластер из телеприставок? Ты бы X-box посоветовал бы лучше.

iZEN (14.10.2011 22:52:40)

Кстати, стоит учесть расходы на электричество (много) и продумать систему охлаждения (стоит ли говорить, что она будет очень шумной). Сколько тепла придется отводить подсчитать легко: это столько сколько берет электричества, т.е. от 200Вт на одну плату. 10 плат = 2кВт, т.е. (сравнивая с эл.чайником) каждые 1.5 минуты будет выкипать литр воды.

soomrack (14.10.2011 22:57:55)

Деньги выделили — надо хоть что-то брать, чтобы оно было в стойке и гудело, чтобы для тупых было ясно — это сервера :)

А то доказывай им и объясняй, что в системниках HP пролиантов не обычные десктопные компоненты :)

adriano32 (14.10.2011 22:59:01)

>Технические должны формироваться из задач: конечно-элементные вычисления, геометрическое моделирование, возможна, обработка графики

для второго точно кластер не нужен

для первого и третьего - зависит от размера и характера задач

Для первой задачи в большинстве случаев полезен быстрый и дорогой интерконнект для рендерилки он не сильно актуален

>Преимущественно самописный, но, возможно, что-то готовое в перспективе тоже будет использваться.

Если софт уже есть - просто попроситесь к кому нибудь с ним на потестировать.

ЗЫ: Из опыта могу сказать что фирменный кластер под ключ в разы удобнее самосборного (и не факт что дороже) ... если нужен кластер ради опыта по сборке кластеров то это одно а если для работы - другое :)

sS (14.10.2011 23:01:06)

> Какой может быть кластер из телеприставок? Ты бы X-box посоветовал бы лучше.

Они сильно изменились за последние годы. Но да, предложение глупое. По любому надо делать из стандартных блоков, которые потом можно будет разобрать на обычные PC, когда все наиграются и поймут, что это не нужно.

PS: делали бы лучше распределенные вычисления в среде типа BOINC — поставили бы на все компьютеры, и масштабировать выч.мощности проще и ресурсы будут использоваться лучше. А для отчета начальству собрали бы один компьютер покрасивше и обозвали бы командным центром...

soomrack (14.10.2011 23:01:23)

>Кстати, стоит учесть расходы на электричество (много)

Не стоит, если не платите за электричество из своего кармана :)

>и продумать систему охлаждения (стоит ли говорить, что она будет очень шумной).

Cама система охлаждения (кондёры) не шумит :) Но денег стоит :)

sS (14.10.2011 23:03:42)

>PS: делали бы лучше распределенные вычисления в среде типа BOINC

Для перечисленных задач не подходит

sS (14.10.2011 23:04:28)

http://www.lenta.ru/news/2011/10/14/blade/
для Ъ:
Компания Blizzard объявила, что она собирается продать с молотка две тысячи старых блейд-серверов World of Warcraft.
Аукцион будет проходить на eBay с 17 октября по 14 ноября. На нем будут продаваться блейд-сервера Hewlett Packard ProLiant, которые использовались после запуска проекта в 2004 году и вышли из употребления после модернизации системы.

etwrq (14.10.2011 23:05:26)

думаю баксов за 600-700 за лезвие обойдется, заодно и правителей эльфов 80+лвл поддержите:)

etwrq (14.10.2011 23:06:33)

> Cама система охлаждения (кондёры) не шумит :) Но денег стоит :)

Это смотря сколько тепла отводить придется.

soomrack (14.10.2011 23:06:58)

Если там действительно IBM HS20 но очень хорошее приобретение :))

sS (14.10.2011 23:09:26)

> А то может стоит вместо брендового железа вообще собирать кластер из десктопного в самодельном корпусе.

Гуголь тоже собирает из всякого шлака, незазорно )

stevejobs (14.10.2011 23:10:33)

> Для перечисленных задач не подходит

Для конечно-элементного анализа — нет, не подходит, но тут куча денег уйдет на быстрые сетевухи и свичи. Проще (и правильней) для таких задач брать пару многопроцессорных плат. Про остальное сказать затруднительно, ибо слишком расплывчато.

soomrack (14.10.2011 23:10:58)

>IBM HS20
>>блейд-сервера Hewlett Packard ProLiant
/0

etwrq (14.10.2011 23:11:39)

>Это смотря сколько тепла отводить придется.

У меня примерно 10Квт на стойку - стойки по любому шумит сильнее кондёров :), вряд ли за указанный бюджет топикстартер сможет заказать водяную систему охлаждения :)

sS (14.10.2011 23:11:40)

Я проcто пошел по сцилке которую вы дали :)

sS (14.10.2011 23:12:52)

> и продумать систему охлаждения (стоит ли говорить, что она будет очень шумной).

есть же проверенное решение: свалить железо в кладовку, поставить дешевый кондёр (холодящий так, что несовместимо с жизнью, они дешевле), запитать всё от центральной сети универа (чтобы невозможно было понять, кто же именно жрет электричество, и за него платил кто-то другой)

stevejobs (14.10.2011 23:14:04)

>пару многопроцессорных плат.

Это и есть кластер :)

sS (14.10.2011 23:14:33)

+к этому надо рассчитывать отказоустойчивость системы, резерв блейдов для замены по блэкауту, и т.д. и т.п.

etwrq (14.10.2011 23:15:44)

http://ompldr.org/vYXQ3MA
правда?:)

etwrq (14.10.2011 23:17:34)

> поставить дешевый кондёр

Почём щас "дешёвый кондёр" на +10 КВт холодопроизводительности ? :)

sS (14.10.2011 23:17:59)

Ага, ровно первая сцилка в этой самой статье :)

sS (14.10.2011 23:18:50)

и дисковое пространство! Нашей квоты, например, в 50Га не хватает вообще ни на что. стабильно около 1TB :) и это только на одного, правда весьма активного пользователя.

silw (14.10.2011 23:19:15)

>+к этому надо рассчитывать отказоустойчивость системы, резерв блейдов для замены по блэкауту

Не нужно. Топикстартеру нужен HPC а не HA кластер, там дешевле чекпоинтить задачи а потом перезапускать их чем городить отказоустойчивую инфраструктуру

sS (14.10.2011 23:20:44)

> Почём щас "дешёвый кондёр" на +10 КВт холодопроизводительности ? :)

хз, но мы бушный брали у алкаша за 2к рублей, а где уж он его свинтил - ХЗ. Единственный минус того кондера - температура не регулируется, он холодит по дефолту, и в помещении где он работает моментально возникает лютая зима. Поэтому для него нужна отдельная кладовка, живые люди там не выживут.

stevejobs (14.10.2011 23:22:13)

>и дисковое пространство! Нашей квоты, например, в 50Га не хватает вообще ни на что

Над вами издеваются :)

sS (14.10.2011 23:22:42)

>Из опыта могу сказать что фирменный кластер под ключ в разы удобнее самосборного

Где вы брали фирменный (есть ли цены)?

Мне сейчас нужно смету составить, которая будет учитывать все расходы. А собирать все равно не я буду, а люди с ВЦ (если будет взят для самосбора).

Genuine (14.10.2011 23:23:33)

>у алкаша за 2к рублей

Круто, а мы отдали за кондёры 120к

sS (14.10.2011 23:23:39)

>>пару многопроцессорных плат.

>Это и есть кластер :)

Этак и два рядом стоящих компа можно кластером обозвать. :) Судя по бюджету, топикстартеру как раз хватит денег на один хороший 4х процессорный комп.

soomrack (14.10.2011 23:25:36)

в той, первой, ссылке общее описание лезвия, а близзарды собственно продают hp proliant'ы старые, потому и удивило ibm hs20

etwrq (14.10.2011 23:26:00)

>>у алкаша за 2к рублей

>Круто, а мы отдали за кондёры 120к

Летом что ли брали? Или тянуть далеко пришлось?

soomrack (14.10.2011 23:27:18)

>Где вы брали фирменный (есть ли цены)?

Один брали вот тут http://www.t-platforms.ru

Второй у дилеров IBM-а, но покупкой второго я не занимался и сходу не скажу через кого шла поставка

sS (14.10.2011 23:30:11)

Тогда я бы ориентировался на что-то типа этого:

http://fotomag.com.ua/HP_DL585G2_-413928-421-info.html

Только на оставшиеся деньги довел бы процессоров до 4х, и оперативной памяти побольше.

soomrack (14.10.2011 23:30:18)

> купить машину PS3 ещё не предлагали?

Толстушек больше не делают, да и греются они неслабо.

Suigintou (14.10.2011 23:30:34)

А есть промышленные кондёры за 2к ? :)

sS (14.10.2011 23:32:58)

> Поэтому для него нужна отдельная кладовка, живые люди там не выживут.

Где берёте глухих для работы ? :)

sS (14.10.2011 23:35:37)

Это формальные требования) Благо есть чем отчитываться. Но иногда они начинают наседать и приходиться ужиматься до 250. но это разрастается до прежних размеров за месяц-два.

silw (14.10.2011 23:40:59)

Поделил красные циферки на серенькие и сравнил с бюджетом топикстартера. Маловато :(

sS (14.10.2011 23:41:18)

>моментально возникает лютая зима
Главное чтоб конденсата не было =)

GAMer (14.10.2011 23:43:36)

> Поделил красные циферки на серенькие и сравнил с бюджетом топикстартера. Маловато :(

Ну так это то на что ориентироваться. Процессоры бы только другие поставить. И найти где это же можно взять подешевле. Если купить в европе и привезти, то будет дешевле более чем в 2 раза: http://www.google.com/search?hl=en&tbm=shop&q=HP ProLiant DL585 G2&o...

soomrack (14.10.2011 23:44:40)