Куратор темы Статус: Не в сети Регистрация: 16.08.2007 Откуда: Красноярск
Сборка общекомандной кранчерской системы.
Сбор денег: Перечисления делаем в кассу команды. В комментариях к платежу желательно указывать свой ник в форуме. Перечислять можно любую сумму в рублях начиная со 100 и заканчивая вашей фантазией. Сбор средств на сервер пока не актуален, но вклад в другие общекомандные траты всегда приветствуется.
Командный сервер. Версия 1.0 (почил в бозе)
Проектная спецификация 1. Supermicro H8QGi+-F. Ориентировочная стоимость $800-900. 2. 4*Opteron 6272. Ориентировочная стоимость $600 за штуку (с учётом доставки в Россию). 3. 4*Thermaltake CLS0017. Средняя стоимость в России 1440 рублей за штуку. 4. AirTone GF-9100B. Ориентировочная стоимость 3790 рублей. 5. Corsair CMPSU-1200AX 1200W (есть незадействованный у tguskill'а). 6. Kingston KVR1333D3N9/4G. Ориентировочная цена 660 рублей за одну планку. Восемь планок - 5280 рублей. 7. Есть рапторы по 300 гигов, Hil согласился нам их предоставить. ИТОГО: ~113000 р.
Фактическая конфигурация и расходы: писал(а):
1. Материнская плата Supermicro H8QGI-F: 1 шт. 30/12/2011 (29 880 р.) 2. Процессоры AMD Opteron 6174: 2 шт. 19/12/2011 (32 301,43 р.) + 1 шт. 19/03/2012 (15307,89 р.) + 1 шт. 25/03/2012 (13422,21 р.) 3. Кулеры Thermaltake CLS0017: 2 шт. 30/12/2011 (2 680 р.) + 2 шт. 12/04/2012 (3000 р.) 4. Корпус AirTone GF-9100B. (3800 р.) 5. Блок питания Corsair CMPSU-1200AX 1200W: 1 шт. 31/12/2011 предоставлен tguskill'ом 6. Оперативная память Samsung original M378B5273CH0-CH9: 5 шт. + M378B5273DH0-CH9: 3 шт. 29/12/2011 (5 255,72 р.) + Samsung original 8 шт. 12/04/2012 (5270 р.) 7. 300 GB WD VelociRaptor: 2 шт. 31/12/2011 предоставлены Hil'ом ИТОГО: 110917,25 р.
TSC! Russia member
Статус: Не в сети Регистрация: 20.10.2014 Фото: 14
У 1080 Ti нет DVI порта и если заменить МП на ASUS X99-E WS то можно будет установить 7 карт с водоблоками. БП тогда тоже придётся менять. #77 http://tomglimps.com/7_gpu_workstation- ... tanebench/ Нет предела извращениям.
_________________ TSC! Russia - добровольные распределённые вычисления. Не используемые мощности твоего ПК могут помочь науке и людям в борьбе с тяжелыми заболеваниями.
TSC! Russia member
Статус: Не в сети Регистрация: 18.09.2009 Откуда: Краснодар Фото: 7
SlavicUnion то есть на материнку ASUS X99-E WS можно установить 7 1080Ti с водоблоками без допиливания напильником их? Как на фото получится? Есть куда стремиться серверу, походу:)
_________________ Международный проект Стэнфордского университета по борьбе с раком. Подключай свой компьютер, нужна помощь. Подробнее в разделе команды TSC! Russia.
Member
Статус: Не в сети Регистрация: 08.08.2003 Откуда: Москва
Да, только вот планки придётся снимать или колхозить. А так подобная мысль мне приходила в голову. Но с питанием все грустно. Даже если взять 2 кВт, то в притирку выйдет 7 карт и камень. И если 2-3 карты одновременно стартанут задание, система сразу упадёт в ребут. Естественно, вопрос разгона отпадает в принципе
TSC! Russia member
Статус: Не в сети Регистрация: 24.02.2017 Фото: 6
7 карт на полную работать не будут, потери неизбежны. Даже если выделить на каждую по 4 линии (честные), то получим 28 линий, а ведь есть ещё и другие потребители. Системы с 5-ю картами люди собирают - это реально. Или нужно колхозить серверную мать, но там и ценник другой. Получается, выгоднее брать нормальную материнку и ставить на неё 4 карты, а если надо ещё, то собираем 2 такой комп. Собственно, можно ведь и корпус на 2 материнки взять и БП попроще, тогда и компоненты такие не понадобятся.
Member
Статус: Не в сети Регистрация: 08.08.2003 Откуда: Москва
yarilo Советую почитать про ASUS X99-E WS. У нее отдельный контроллер с линиями, поэтому 7 карт официально поддерживаются. Интересное изделие. По поводу питания. Теория - это здорово. Вот у меня платиновый киловаттник корсар. Которого в теории отлично хватает на 4х1080 на воде. Но по факту система пару раз в день валится в ребут при небольшом разгоне. А 7 1080ти - это уже официально 1750Вт, плюс камень, другая требуха. Без разгона потребление будет максимальным. БП быстро помрет даже в таких условиях. А мастерить воду и не гнать - неумный поступок. Вот и получается, что поставить-то 7 карт можно в теории. Но на практике - хэзэ. Онанизм с 2 бп тоже штука стремная. Да и родные скобы надо будет резать на картах, ибо они на 2 разъема. Короче, спорная забава. Но 10М/сутки с одного системника выглядит внушительно.
TSC! Russia member
Статус: Не в сети Регистрация: 24.02.2017 Фото: 6
tguskill писал(а):
Советую почитать про ASUS X99-E WS. У нее отдельный контроллер с линиями, поэтому 7 карт официально поддерживаются. Интересное изделие.
Видел, видел, но свитч ведь это тоже потери (латентность). Как не крути, снять с них столько же сколько на машине с 4-мя картами не выйдет. Насчёт питания, согласен полностью, не оспаривал. Я считаю что на 3 видюхи нужно 1кВт, на 4 - 1200 итд., причём не ниже золота. Буду ставить 4 карты - куплю 1500, т.к. негоже машине работающей 24/7 грузить компоненты на 90%+. Считаю что 75% это оптимальный максимум, т.к. должен быть запас по мощности. В этом случае и нагрев меньше и надёжность выше и срок службы.
Member
Статус: Не в сети Регистрация: 08.08.2003 Откуда: Москва
А что крутого в этом бп? Кроме цены в 3 раза выше аналогов? Тёплое ламповое питание? У меня в работе материнку ws. Да, подклюгикавала на первых версиях биос, но потом работала стабильно и тормозов с просадками ппд нет. Так что нормальный вариант, чтобы 7 карт колхозить, но я, подумав, решил с этим не связываться. Через пару месяцев соберу водянку на 4 тишках. И будет она, возможно 5-6 единиц в день отгружать. А для изощрений с 2 бп и толпой карт староват я уже
TSC! Russia member
Статус: Не в сети Регистрация: 24.02.2017 Фото: 6
tguskill писал(а):
А что крутого в этом бп? Кроме цены в 3 раза выше аналогов?
Пока не ясно. Вот проведут тесты, тогда и почитаем. На данный момент это самый дорогой БП из розничных и якобы самый технологичный, хоть и построенный на аналоговой платформе.
Так то если посмотреть, то вариант со второй системой даже проще выглядит, а ещё проще модернизация текущего.
_________________ TSC! Russia - добровольные распределённые вычисления. Не используемые мощности твоего ПК могут помочь науке и людям в борьбе с тяжелыми заболеваниями.
Куратор темы Статус: Не в сети Регистрация: 16.08.2007 Откуда: Красноярск
Pacificus Хорошая штука, но шумная и очень дорогая, цена от 7 495$ = 430 962 р. это со встроенной видеокартой, была бы это цена с 8 картами, еще можно было подумать, а так для корпораций или олигархов, но никак не для энтузиастов
_________________ У тебя мощнейший комп, ты уверен? И для чего он тебе? В TSC! Russia ты узнаешь что такое мощь тысячи компов! TSCRussiaTeam.ru
TSC! Russia member
Статус: Не в сети Регистрация: 24.02.2017 Фото: 6
Сомнительная конструкция, эдакий "АМГ для бедных". Попытка вкрячить как можно больше видеокарт в одну машину не считаясь с последствиями применения этого монстра на полную катушку. Для работы с 3Д это наверное и подойдёт, Блендер там или ещё какой пакет, но ни под сервер, ни под ферму это не подходит в принципе. Про тепловой пакет я скромно умолчу, кто знает - тот понимает
TSC! Russia member
Статус: Не в сети Регистрация: 24.02.2017 Фото: 6
tguskill писал(а):
2 киловатта тепла воздухом не отведешь.
Поправочка, не 2 кВт, а что-нибудь 2,5 (с учётом процессоров, логики и вентилей). Отвести можно, но опять же, с применением большого кол-ва вентилей, а они (снова и снова и снова) роняют КПД системы как никто другой. В общем, затея глупая. Померяно и посчитано, предел - 7 карт, но!..
Сейчас этот форум просматривают: Bing [Bot] и гости: 76
Вы не можете начинать темы Вы не можете отвечать на сообщения Вы не можете редактировать свои сообщения Вы не можете удалять свои сообщения Вы не можете добавлять вложения