Объявление форума |
Если пользуетесь личными сообщениями и получили по электронной почте оповещение о новом письме, не отвечайте, пожалуйста, почтой. Зайдите на форум и ответьте отправителю через ЛС. |
Полигон-2 » Технический флейм » Плата Dell PowerEdge c8220, запуск и сборка вычислителя. |
<<Назад Вперед>> | Страницы: 1 2 3 4 5 6 7 8 | Печать |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Профиль | Сообщить модератору
NEW! Сообщение отправлено: 30 января 2018 0:14 Сообщение отредактировано: 30 января 2018 0:17
Тема выросла из темы сборки машины для GPGU выслилений на пачке GTX 580. Благодаря советам форумчам и вдумчивому гугленью, а так-же выносу мозгов техподдержке nVidia в России я понял что первоначальный замысел по железу не верен и требуется смотреть в другую сторону. В результате советов форумчан, и даже разговора с продавцом серверных запчастей на Avito, (большое ему спасибо!), требования к железу были пересмотрены и я стал смотреть в сторону серверных плат. Китайские "фиг пойми что с глюками" тоже отсеялись и остался выбор... выбора не осталось. Остался только Dell и его сервера. Благо его продукция в виде ноутбука DELL vostro 1500 после пары итераций апгрейда процессора-памяти-жесткого-смены батареи и мелкого ремонта с заменой пллатки управления запуском пашет у меня до сих пор. Выбор среди серверов DELL я остановил на Dell PowerEdge С6220. Плата продавалась в России, недорого... Но тут мне повезло, продавец сказавший что ее можно запустить без сервера кинул ссылку с очень похожей платой, но С8220! У которой во первых оказался встроенный видеоадаптер.. что позволяет в оба слота PCI-E устанавливать GPGU не занимая их видеокартой, а главное на старшей модели платы оказалось 4 onboard SATA. Которых на младших С8220 и на всех С6220 было всего по 2 штуки. Вот та самая ссылка: https://forum.level1techs.com/...ons/109554 Долго ли, коротко ли, но я зарегистрировался на еВау и купил такую плату которая оказалась почти на половину дороже младших моделей с парой SATA. И теперь она едет ко мне. Когда приедет - надеюсь к тому времени я уже смогу купить память и процессоры хоть минимально и надо будет ее запустить не спалив, а в дальнейшем развивать конфигурацию в первую очередь по памяти. Та самая плата С6220 с Авито. Кстати она уже благополучно продана. https://i.imgur.com/6Xz07N0.jpg А вот та что с еВау на 4 порта и с видео встроенным. https://i.imgur.com/dgpoYdu.jpg[ Фотки не мои, мои будут когда приедет железо... где-то через месяц-полтора. Надеюсь приедет целое.. а не как часто у Почты России. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Дополнение, в процессе изучения темы по запуску таких плат установил что та плата что я заказал - 0083NO на самом деле плата С6220 системы. И это хорошо, на платах С8220 оказывается очень много заморочек с портами SATA которые похоже в каком-то хитром режиме подключены к SAS-карте адаптера HDD для "проброса потока данных" по кабелям SATA без разводки по плате. Так что я взял ту что надо плату. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Купил сегодня с китая пару процессоров Xeon E5-2603 LGA2011. По 4 ядра каждый + Гипертрейдин. Самые минимальные для этой платы, но для начала хватит. Аналогично едет переходник с АТХ питания на разъем этой платы. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Ну что, едет две планки серверной DDR3 1333 REG ECC памяти по 4 гига, чтобы просто проверить плату и тесты погонять. "Навсегда" уже надо будет брать планки по 32 гига. |
Guest |
NEW! Сообщение отправлено: 4 февраля 2018 18:37
16-ки на 1600 без радиаторов во-первых гораздо меньше греются, во-вторых, они по цене на вторичном рынке имхо самые интересные из расчета доллар за мегабайт. |
Сейчас на форуме |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
IdeaFix если потом понадобится 512 гб оперативки то во первых ее к тому времени могут по 32 уже не продавать такую, а во вторых куда тогда деть кучу 16 гиговых планок? |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Прикупил кабель mini-SAS - 4 SATA. На плате прямо на борту контроллер с поддержкой RAID в BIOS и разъемом mini-SAS. Можно сразу сделать "дисковую полку". Колеблюсь между SSD и механическими винтами. Если проект дотянет до стадии мобильности - придется в любом случае переходить на серверные SSD Intel - во первых они не так боятся вибрации как механические винты которым нужна суровая амортизация, во вторых способны питаться только от +12В, что благоприятно для мобильных шасси с единой бортовой сетью. Да и серверной плате самой надо только +12. Так и подмывает вместо UPS использовать мою систему солнечную, 170 а/ч батарея и 6 панелей-соток напрямую прицепив питание на батарею проводами по 10 квадратов. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Приехал ко мне райзер-удлинитель для подключения GPGU к плате С8220, о чем на нем самом надпись гордо извещает. Надо перечитать мануал в какой именно разъем он включается, в тот что рядом с разъемом для платы SAS или в тот что для мезанины-PCI-E. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Ну что, приехала плата, удивительно быстро для доставки из США на мой взгляд. https://i.imgur.com/KYulxTq.jpg Красота длиной 60 см и весом килограмма в 2.5+. Сразу видно качество изготовления, никаких дешевых китайских электролитов. Жду процессоры, память, и прочее. Пока подключил райзер для второго GPGU https://i.imgur.com/opid9HB.jpg И хочу узнать работают ли вот эти 2 разъема SATA сами по себе или только для "проброса канала" на дочернюю плату SAS. https://i.imgur.com/rOa51i3.jpg |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Профиль | Сообщить модератору
NEW! Сообщение отправлено: 12 февраля 2018 22:03 Сообщение отредактировано: 12 февраля 2018 23:26
Хитрые и проприетарные Деллы... |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Приехали два процессора Xeon E5-2603. По 4 ядра без гипертрейдинга, самые дешевые для тестов. Установка первого. https://i.imgur.com/1Ia5sf7.jpg Оба угнездились на свои места. https://i.imgur.com/jnYbG5J.jpg Общий вид. https://i.imgur.com/WmjZTfS.jpg |
dhaemon
Newbie
Откуда: Московская область Всего сообщений: 25 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 16 авг. 2017 |
Не совсем ясно про гипертрейдинг. В сообщении от 3 февраля написано, что гипертрейдинг будет. Очепятка? Интересно, оправдаются ли ваши ожидания по поводу вычислений. Успехов вам. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
dhaemon я пока взял самые простые и дешевые процессоры из возможных, 2603 - 3 тысячи с доставкой за пару. 2650 уже около 4,5-5 К рублей за штуку. Почувствуйте разницу, как говорится. А ожидания... вот когда соберу хотя-бы 64 Гб памяти и GPGU и отработает первая задача - тогда и станет ясно первое. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Профиль | Сообщить модератору
NEW! Сообщение отправлено: 22 февраля 2018 18:22 Сообщение отредактировано: 22 февраля 2018 19:57
Нашел и поставил радиаторы Arctic Alpine 20 PLUS CO LGA 2011. https://i.imgur.com/jPo2hwk.jpg https://i.imgur.com/bwVPuLs.jpg Пришлось их болгаркой подпилить с боков слегка приливы, чтобы не мешали устанавливать память серверную с радиаторами и снять шайбы-ограничители на крепежных винтах, еще на их резтбы навинтил по 2 гайки М4 ограничивающих глубину вкручивания в крепления, чтобы не пройти их насквозь и не испортить плату. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Запустил. Зараза очень долго конфигурирует память и проверяет до старта BIOS.. До 3-х минут, И не нашел как проверку отменить. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Система в тестовом виде, разбираюсь с ее работой https://i.imgur.com/5Jqnebk.jpg Смог настроить IPMI. Причем не открывалась опция пока не сбросил NVRAM. Однако отдельный процессор со своим ядром *nix и GUI живущий независимо от основной системы и могущий на нее влиять... и могущий работать как на свой отдельный разъем так и инжектировать свои пакеты в гигабитные сетевые карты основной системы... |
pahan
Advanced Member
Откуда: Химки, М.О. Всего сообщений: 1070 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 13 мар. 2015 |
Это нормально для ECC-памяти. Запустил. Зараза очень долго конфигурирует память и проверяет до старта BIOS.. До 3-х минут, И не нашел как проверку отменить. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Профиль | Сообщить модератору
NEW! Сообщение отправлено: 4 марта 2018 1:13 Сообщение отредактировано: 4 марта 2018 11:19
Сегодня подключил GTS 250 к серверу. На встроенном видео накатил драйвер nvidia-340, перегрузился попутно отключив встроенное видео, ожидание и вуаля - веселые картинки от nVidia. Но не очень доволен, больше бы хотелось чтобы nVidia работала как GPGU а все делалось через встроенную графику. Пока разбираюсь. https://i.imgur.com/CjEwOzl.jpg https://i.imgur.com/YSDEaDl.jpg |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Смог завести через IPMI vKVM клиент. Он зараза написан на старой Java и пока не реквищировать у матери старый ноут в ВинХР с 7-й Оракловской Жабой - запустить не получалось, сваливалось с ошибками клиента даже после отключения контроля безопастности. Интересная штука, кино не посмотреть через нее а лазить по системе можно. И ведь пробивает уже запущенную систему влет, никакие пароли и ничего не мешают на рабочем столе действовать, просто система считает что это сам юзер действует. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Интересная головоломка этот сервер, вот ставлю операционку по сети с ноутбука через IPMI-KVM и клиент подключения образов дисков. Теперь еще ESXi освоить... |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Приехала корзина в 5,25" отсек на 4 х 2,5 винта. Красиво. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Доехал повышающий DC-DC. теперь есть +12VSB, пускается и с кнопки и через IPMI. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Очередной этап, разборки с GPGU. https://i.imgur.com/kG32ghY.jpg |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
RAID встроенный запустил, начал тестировать разные конфиги. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Дело двигается, завтра до меня доедет GPGPU Tesla K20. У кого есть опыт эксплуатации и настройки в Linux оных забавных карт? |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Война с GPGPU Tesla K20. Глюки, криво ставящиеся драйвера, поломавшиеся зависимости... |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Проблема оказалась в некорректной работе Edge Slot который выделен для GPGPU. В двух других Тесла определяется и работает нормально. А я себе все мозги высушил, BIOS перешил на самый новый... |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Вчера сделал интересный опыт - накатил на сервер Вин-7х64 + дрова на все + майнер Найсхеша. Теслу К20 майнер не смог определить, а майнить на Е5-2603 смысла нет, с двух камней 0.2 бакса в день, перевод электричества в тепло в чистом виде. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Сделал проброс порта через роутер на сервер, теперь можно удаленно заходить по ssh. Теперь тот человек для которого машина собственно и делается сможет на ней работать. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Приехал гибкий шлейф-райзер на pci-e 16x от Терммалтэка с Амазона. Свои 70 евро цены оправдывает, сбоев нет в отличии от китайских дешевок "аля кусок шлейфа скази". |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Приехали новые радиаторы для 1U серверов Coolerserver с Китая. медный радиатор сверху улитка, провод 4 пина. Шумят на полных оборотах на удивление не сильно, процессоры 70 Вт ТДП под полной нагрузкой держат на 48-50 градусов, учитывая что я туда хочу Е5-2650L которые при 8 ядрах тоже 50 Вт - я доволен. И с низкими кулерами Тесла на "высоком" райзере встала как родная. Красота. |
Rio444
Гость
Откуда: Ростов-на-Дону Всего сообщений: 8632 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 14 сен. 2014 |
falanger написал: Хоть бы фотку выложили. И с низкими кулерами Тесла на "высоком" райзере встала как родная. Красота. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Выложу как сфоткаю. И раньше не особо интересно было кроме меня никому. |
kelevra
Advanced Member
Ленивый коллекционер Откуда: Петрозаводск-Минск Всего сообщений: 1198 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 13 апр. 2014 |
falanger написал: Красота мощного железа здесь интересна многим И раньше не особо интересно было кроме меня никому. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Профиль | Сообщить модератору
NEW! Сообщение отправлено: 24 июля 2018 23:43 Сообщение отредактировано: 24 июля 2018 23:45
Завтра сделаю фото и выложу в течении дня. Тесла - адская печка, я под струей ее выхлопа 97 Вт ТДП - голову сушил после душа. Но еще больше понимаешь ее мощь когда видишь в динамике модель облака межзвездного газа в процессе уточнения модели с повышением ее полноты... Или в динамике течение процесса Джинса, фрагментацию газового облака под действие гравитационного коллапса и распад на все более мелкие ячейки с последующим звездообразованием. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Профиль | Сообщить модератору
NEW! Сообщение отправлено: 26 июля 2018 23:11 Сообщение отредактировано: 26 июля 2018 23:12
А вот и фото, мой сервер с Теслой К20. https://i.imgur.com/KUv79Xg.jpg https://i.imgur.com/KW5SCyq.jpg https://i.imgur.com/EqTyg3Q.jpg |
kelevra
Advanced Member
Ленивый коллекционер Откуда: Петрозаводск-Минск Всего сообщений: 1198 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 13 апр. 2014 |
Размерчик конечно у Теслы "нигерский" |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Зато и производительность в FPU32 и шина памяти 320 бит. |
kelevra
Advanced Member
Ленивый коллекционер Откуда: Петрозаводск-Минск Всего сообщений: 1198 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 13 апр. 2014 |
falanger написал: Это же по сути GTX780 с большим кол-вом CUDA ядер и большим кол-вом памяти. Там же 6гб на 320 бит? Зато и производительность в FPU32 и шина памяти 320 бит |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
GTX TITAN. Только в том нет ЕСС что доставляет часто фейлы при расчетах. А в 780 и меньше ядер и нет двойной точности и память меньше 3 гига и нет ЕСС |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Профиль | Сообщить модератору
NEW! Сообщение отправлено: 1 августа 2018 13:44 Сообщение отредактировано: 1 августа 2018 18:22
Сегодня наконец купил М.2 SSD samsung 960 EVO 250 Gb что давно собирался сделать. Если не смогу на него установить систему для сервера то попытабсь использовать как SWAP быстрый. Воткнут М2 через переходник ASUS HYPER M.2 X 4 MINI . А вот собственно и фото: https://i.imgur.com/huLkJoe.jpg Но устройство не может быть загрузочным, сервер его не поддерживает а AHCI он не эмулирует. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Я все-таки было откатился к м.2 под своп + SSD с системой, но потом погугли и все-таки сделал как надо. Пускай и с костылем. Сейчас у меня так M.2 Samsung 960 EVO 250 Gb / linux-swap 64 Gb USB 8 Gb flash /boot + GRUB ??? PROFIT! |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
И еще хорошая новость, на райзере GPGPU где не захотели работать видеокарты и Тесла - заработал PCI-E 4x-M2 переходник. Т.е. иожно 2 слота под GPGPU все-таки отдать. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Заставил работать все 3 слота расширения сервера. https://i.imgur.com/3Cg3ilT.jpg |
kelevra
Advanced Member
Ленивый коллекционер Откуда: Петрозаводск-Минск Всего сообщений: 1198 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 13 апр. 2014 |
А только одну Tesla можно подключить? ПРостите если вопрос глуп, я немного не шарю в этом Просто у вас тесла + затычка для вывода изо, нет ли возможности поставить две карты для вычислений и мониторить\управлять удаленно, по сети например? |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Можно даже 3 теслы поставить и по сети управлять по SSH. Карта-затычка у меня для испытаний., чтобы было устройство во втором разъеме. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Я тут сегодня совершенно отморозился, купил 4 SSD и собрал рейд по новой для сервера. |
Rio444
Гость
Откуда: Ростов-на-Дону Всего сообщений: 8632 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 14 сен. 2014 |
falanger написал: Ну отморозок... |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Rio444 написал: Зато получилось шустро и надежно. Надо один SSD такой-же еще в запас будет взять или пару, пусть на полке лежат. Ну отморозок... Забрал на почте и новый Xeon E5-2650L и жду второй, как приедет обновлю процессоры и останется добивать память до 16-32 гб и вторую Теслу взять. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Получил на почте второй Xeon E5-2650L и воткнул парой вместо Е5-2603. По 8 ядер с гипертрейдингом на каждом и контроллеры завели память на 1333 МГц ее штатную, в 2603 контроллеры держали на 1066. В htop красивые 32 потока, при том TDP процессоров пот 70 Вт в то время как у 2603 по 80 было. Сейчас "дам про$раться" майнером XMR чтобы глянуть рост хешрейта зримый и температуру под 100 % нагрузкой на моих 1U кулерах-улитках низкопрофильных. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Начал собирать каркас для платы сервера, накопителей и видеокарт. Материнку прикрутил и GPGPU райзер. Потом надо будет собрать верх каркаса с корзиной рейда и блоком/блоками питания, а потом между ними надо будет каркас с видеокартами собрать когда они будут все. |
Rio444
Гость
Откуда: Ростов-на-Дону Всего сообщений: 8632 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 14 сен. 2014 |
Коллега, картинок побольше! Голый текст выглядит суховато. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Rio444 написал: Завтра при хорошем свете сделаю несколько фото. Алюминиевый уголовк, винты-гайки М4, заклепочник и заклепки. Пока разместил плату материнскую сервера и вторым ярусом райзеры для "видеокарт". Над ними надо закрепить накопители на своей раме и сверху блоки питания. а потом красиво уложить провода Коллега, картинок побольше! |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
А вот и фото. https://i.imgur.com/ay6yKK9.jpg https://i.imgur.com/4LiuXto.jpg Каркас райзеров сделан под пару "нормальных" карт GTX 780 Ti - GTX 980 Ti, Тесла серверная с ее улиткой больше заметно. https://i.imgur.com/DVSgoGf.jpg А это со снятой Теслой, маленькая платка яркая - M.2 SSD Samsung 960 EVO 250 Gb целиком отданная под SWAP системы. Если программист асилит алгорить явного кеширования горячих данных - будут они "явно" складываться туда и через 72-96 часов непрерывной раблоты после завершения "прогрева" система выйдет на максимальную эффективность, а нет - просто очень быстрый выделенный своп. |
Rio444
Гость
Откуда: Ростов-на-Дону Всего сообщений: 8632 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 14 сен. 2014 |
falanger написал: Спасибо! Но нельзя же так экран разрывать! Допускается вставлять фото размером не более 800х600. А вот и фото. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Профиль | Сообщить модератору
NEW! Сообщение отправлено: 22 сентября 2018 1:41 Сообщение отредактировано: 22 сентября 2018 1:42
В общих чертах собрал машину, осталось поставить Теслу на место и уложить проводку. Выглядит конечно как сляпанное на скорую руку, но главное что работает и не перегревается. Когда доведу до ума более-менее выложу снова фото. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Ну что поехали. "Первый ярус". https://i.imgur.com/DFFCu3r.jpg Материнка с парой Xeon E5-2650L под "улитками" для 1U-корпусов. Несмотря на то что кулеры из Китая - качества хорошего медные, я доволен. Марка COOLERSERVER с логотипром пантеры. Еще пара планок 4 Гб ЕСС REG и на переходнике М.2 SSD Samsung 960 EVO 250 Гб отданный полностью под SWAP раздел. "Второй ярус". https://i.imgur.com/lL6mQCT.jpg Серверная Тесла К20 с "улиткой" и воздуховодом аж из Австралии. Если ставить нормальные карты с активным охлаждением вроде GTX 780 Ti или Теслы а бортовым кулером штатным то можно поставить 2 карты, каркас сделан именно так. "Третий ярус" - пара SSD Kingston A400 240 Gb в рейд1 и 4 винта в корзине ноутбучных по 1 Тб Барракуды зеленые в рейд5. Фотку забыл сделать а раскручивать не хочу. "Четвертый ярус". https://i.imgur.com/uCW9xIy.jpg Блок питания Термалтэк бронза 850 Вт модульный. Вся разводка на стяжках по каркасу провода питания и на винты и прочее. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Продолжение банкета Вид сбоку. https://i.imgur.com/DvKexlI.jpg https://i.imgur.com/CtYJIJk.jpg Все разъемы, кнопка включения и морда река быстрой замены дисков - "на одну сторону". https://i.imgur.com/uGa9QJ5.jpg https://i.imgur.com/RurNp1e.jpg DC-DC бустер повышающий +5VSB от обычного АТХ БП до серверного стандарта +12VSB. https://i.imgur.com/vneMEZe.jpg Нужно чтобы работала кнопка питания на плате и функции IPMI, оно питается по этой линии тоже. А это подключен GPGPU райзер на гибком шлейфе штатный. Потрахался пока заставил работать, в BIOS если опцию энергоконтроля неправильно выставить одну то не работает хоть убейся. https://i.imgur.com/50T35xQ.jpg А это высокий Г-образный райзер для GPGPU в который сейчас Тесла подключена, а за ним низкий Г-образный в который включена М2 SSD. https://i.imgur.com/UtK7wNK.jpg Тоесть 3 слота расширения задействовано. Можно конечно и 3 GPGPU поставить подключив третью через гибкий райзер длинный Термалтэковский, но у меня нет столько денег... |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Народ нет ни у кого опыта как разбудить сервер выключенный правильно ИБП при пропадании питания? Питание с сервера совсем не пропадает, так что автостарт по появлению питания не работает. Будить через IPMI вручную не очень кузяво. |
aleksvolgin
Advanced Member
Всего сообщений: 2123 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 21 нояб. 2010 |
falanger написал: есть нет ни у кого опыта falanger написал: always on как разбудить сервер выключенный правильно ИБП при пропадании питания? |
CodeMaster
Advanced Member
Рыцарь ордена Хламовников Откуда: Воронеж Всего сообщений: 1655 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 27 авг. 2010 |
falanger написал: Как это, разве ИБП не должен выключится сам после того как погасил комп? выключенный правильно ИБП при пропадании питания? aleksvolgin написал: falanger написал: always on Так-то это не срабатыеват, как falanger и пишет. Питание с сервера совсем не пропадает |
aleksvolgin
Advanced Member
Всего сообщений: 2123 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 21 нояб. 2010 |
CodeMaster написал: Это зависит от настроек ИБП. разве ИБП не должен выключится сам после того как погасил комп? CodeMaster написал: Конечно. АТХ же. Питание с сервера совсем не пропадает |
CodeMaster
Advanced Member
Рыцарь ордена Хламовников Откуда: Воронеж Всего сообщений: 1655 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 27 авг. 2010 |
falanger написал: Опыта нет, но идея есть ;-) Например устройство инициирующее сигнал на WoL или WoR при появлении напряжения в сети перед ИБП. Народ нет ни у кого опыта как разбудить сервер выключенный правильно ИБП при пропадании питания? aleksvolgin написал: Не вижу в этом логики. Если ИБП не отключается после гашения компа, то должен быть в нём предусмотрен механизм запуска компа после появления питания, иначе какой тайный смысл в холостой работе DC-AC конвертера? Тренировка АКБ глубоким разрядом? Это зависит от настроек ИБП. |
aleksvolgin
Advanced Member
Всего сообщений: 2123 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 21 нояб. 2010 |
CodeMaster написал: Есть, конечно, и он настраиваемый. то должен быть в нём предусмотрен механизм запуска компа после появления питания CodeMaster написал: НаписАл же, по английски: always on. Опыта нет, но идея есть |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
В ИБП слишком тупорылая прога управления родная, там ничего не настроить, и сервер не поддерживает побудки по USB. Программу проверял под виндами от него SVEN POWR Pro+ 700 USB. И в NUT пока ничего такого чтобы влезть внутрь ИБП пока тоже не нашел, есть графические утилиты и WEB-интерфейс NUT но я их пока не запускал и не проверял. Доступ то весь по SSH консольный. Пока склоняюсь настроить оповещение NUT на рассылку емыла и будить по IPMI ручками "когда роутер очнется" по появлении светы в розетке. Все равно промежуточные коммутаторы провайдера без ИБП сами. |
CodeMaster
Advanced Member
Рыцарь ордена Хламовников Откуда: Воронеж Всего сообщений: 1655 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 27 авг. 2010 |
falanger написал: Ты объясни, что происходит с ИБП когда пропало напряжение? ИБП уведомил ОСь о сбое, та свернулась и выключила АТХ, а дальше? Обычно ИБП ждёт какое-то время (предварительно настраевоемое, т.к. он не в курсе когда именно ОСь отключит АТХ) и отключает DC-AC конвертер. Что происходит в твоём случае, ИБП работает до полного разряда батарей? В ИБП слишком тупорылая прога управления родная, там ничего не настроить, и сервер не поддерживает побудки по USB. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
После свертывания операционки и отключения сервера ИБП тупо работает на минимуме питающем дежурку блока питания до разряда батареи. В родной утилите доступа к функциям настройки ИБП нету никакого, там даже контроля напряжения батареи нет. В мустеакие моем мелком и то больше показывает, но Свен мощнее и в железном корпусе лучше сделан. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Надо начать собирать ворую систему симметричную, только уже не с Теслой а с стремя GTX 780 Ti. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Ну что, настроил на сервере удаленный IPMI. Теперь даже из деревни можно включать-выключать-ребутить, контролировать параметры и накатывать систему. Удобно. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Проверил в работе вторую плату. Теперь докупать запчасти и собирать систему в расширенной конфигурации. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Начал собирать вторую машину для вычислений, и вот для публики снял видео небольшое. https://youtu.be/Sl0CkpcR0qI |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Первый вариант машины, обзор. https://youtu.be/W944UpE7DJA |
Борис
Advanced Member
Откуда: теперь Новосибирск Всего сообщений: 512 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 21 сен. 2015 |
В чем смысл данной сборки, кроме ощущения того что можешь что то считать и сети обучать, этого ощущения можно добиться арендой облака. Вы реально собираетесь что то коммерческое или научное считать? под конкретный проект собиралось? |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Борис под конкретные проекты которые потихоньку двигаются. А аренда сервера примерно такой конфигурации на пол года равна цене комплекта железа, однако. |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Вот видео запуска платы и некоторые важные моменты связанные с этим: https://youtu.be/ltwzM1-iMWg |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Частично сделал новый каркас:: https://youtu.be/FZHVhXVcs9k А вот доехали 3 Теслы: https://youtu.be/lTolIaCyAME |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Познавательные видео про Тесла К20 Попытка поставить водоблок от 780 Ти https://youtu.be/ksBptNpX0VM Про саму конструкцию системы охлаждения К20 |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 | |
falanger
Advanced Member
Откуда: г Черняховск Калининградскjй обл Всего сообщений: 1505 Рейтинг пользователя: 0 Ссылка Дата регистрации на форуме: 30 апр. 2008 |
Делаю каркасы на 3 Теслы. Конструкция из уголка к которой карта подвешивается на стяжках упираясь пластиковым кожухом радиатора. Чего только не перепробовал перед этим... |
<<Назад Вперед>> | Страницы: 1 2 3 4 5 6 7 8 | Печать |
Полигон-2 » Технический флейм » Плата Dell PowerEdge c8220, запуск и сборка вычислителя. |
0 посетителей просмотрели эту тему за последние 15 минут |
В том числе: 0 гостей, 0 скрытых пользователей |
Последние | |
[Москва] LIQUID-Акция. Сливаются разъемы CF МС7004 и 7004А на AT и XT Пайка термотрубок Проммать s478 PEAK 715VL2-HT ( Full-Size SBC) Подскажите по 386 материке по джамперам. |
Самые активные 5 тем | |