8+ видеокарт на одной ферме

[iRybin]

 

 

И, если будет возможность, опишите сборку Никса.

 

Ubuntu Server 17.04 изкаропки... дрова и куда из репозитария, руками вообще ничего не ставил - тока EWBF качнул с Толчка и всё. Взлетело само и сразу (косяк был тока в управлении шиной PCI-E второго камня - на Auto не захотело и lspci тупо вис, выдав слотам минимально возможные x-ы (типа 4x4x4x4x) - отпустило.

 

 

 

А в чём проблема управления? У любого декстопного софта есть поддержка командной строки. Можно поставить xorg без окон, тогда будет работать то ПО, которому окна нужны.

 

ну тут мастера писали, что таки всё-таки X-ы надо поднимать и с полноценной GUI - иначе не работает там какой-то кусок от nVidia... я 1 раз на тестовой ферме это сделал год назад - и забыл про это, ибо до этого все мои BAMTы хоть и имели морду - но никто никогда в неё не ходил - всё по SSH. Но это по меркам майна тоже было уже давно...

 

Если есть мана пошаговая или какая есть - буду благодарен. Так-то и сам дороюсь - не впервой, но если есть для ускорения - сильно поможет.

 

 

Этот убогий преобразователь нельзя использовать без дополнительных конденсаторов, пульсации там запредельные

 

это о чём конкретно?

 

 

Если не сложно, попробуйте - очень интересный опыт!

 

да мне тоже :) - но это, видимо, уже в середине недели... тут дела нарисовались отличные от

[subw]

это о чём конкретно?

Вон та хрень железная с ребрами охлаждения

Изменено 26 июн 2017, 07:31 пользователем subw

[iRybin]

 

 

Вон та хрень железная с ребрами и охлаждения

 

да это временный костыль - райзеры на 6-pin тупо кончились.... но на удивление никто на него не жаловался - ни Fury, ни 290-ая, ни эти...

Тут ещё подстава, что тупорезы с Али продают с угловыми фишками тока райзеры на Molex, но не на 6-pin. И теперь у меня мешок этих нахрен не нужных райзеров. Готов поменять желающим на 6-pin-овые или продать.

[subw]

Когда пожалуются, то перестанут определяться. Ну моё дело предупредить

[iRybin]

@subw, однозначно спасибо! Насколько им большую ёмкость надо докидывать? - вроде были трупы + запасы с Ali...

Изменено 26 июн 2017, 07:48 пользователем iRybin

[subw]

Да хоть что нибудь поставь, 100мкф или более, и не давай нагрузку более половины мощности

[Enzo]

Какую сборку используете?

У меня в подписи смотрите ответы на все вопросы :)

Тут ещё подстава, что тупорезы с Али продают с угловыми фишками тока райзеры на Molex, но не на 6-pin. И теперь у меня мешок этих нахрен не нужных райзеров. Готов поменять желающим на 6-pin-овые или продать.

С коммутатором 1-4 в комплекте как раз 6ти пиновые райзеры :) Надо бы коммутаторам кликухи дать, чтобы различать о каком именно идёт речь :D

[Uliss]

Насколько им большую ёмкость надо докидывать?

Оптимально - дроссельно-конденсаторный фильтр.

Вырви выходной дроссель от 3,3в или 5в питания со старого БП и кондерами его прикрой.

Электролиты можно лучше зашунтировать емкостями 0,01-0,05мКф

 

 

А первый электролит лучше установить непосредственно на выходе проводов с этого блока.

И на вход 12в тоже емкостишку поставить, около 500-1000мКф хватит

[iRybin]

@subw,@Uliss, будем проще коллеги - ссылки или хотя-бы маркировки на проверенный качественный step-down 12->5V есть? - Нахрен мне тот колхоз не упёрся - особенно если эта штука будет ставиться в ящик на 10 видях (т.к. сейчас в мешке лежит 22 райзерна на +5 и +12 вольт). А дальше - что быстрее придёт с али - новые райзеры на +12 вольт или такой преобразователь...

[subw]

райзеры не прийдут (если уже не отправили)

 

https://www.aliexpress.com/wholesale?ltype=wholesale&d=y&origin=y&isViewCP=y&catId=0&initiative_id=SB_20170626010435&SearchText=LM2596&blanktest=0&tc=af

[dima_db]

Asus Prime Z270-p и Asus Prime Z270-pro это одно и тоже?

[SimGa]

 

 

Prime Z270-pro

такой мамки не существует https://www.asus.com/ru/Motherboards/ASUS-Prime-Products/

[Uliss]

А дальше - что быстрее придёт с али - новые райзеры на +12 вольт или такой преобразователь...

 

Берешь за 300р старый 300-350Вт  АТХ, там точно до 30А по +5в, срезаешь все лишние провода, снимаешь вент и верхнюю крышку - получается БП высотой 4см и ставишь его под корпусной обдув.

Я как-то такой БП с короткой платой в корпус от привода воткнул, главное, чтоб транс по высоте прошел.

 

[iRybin]

 

 

райзеры не прийдут (если уже не отправили)

 

посмотрим

 

 

 

https://www.aliexpre...anktest=0&tc=af

 

так это пукалки... мне надо сразу на 10-11 карт

 

 

Берешь за 300р старый 300-350Вт АТХ, там точно до 30А по +5в, срезаешь все лишние провода, снимаешь вент и верхнюю крышку - получается БП высотой 4см и ставишь его под корпусной обдув. Я как-то такой БП с короткой платой в корпус от привода воткнул, главное, чтоб транс по высоте прошел.

 

как-то к 3кВт сервернику ну совсем не хочется...

[subw]

мне надо сразу на 10-11 карт

 

 

есть такие, брал на пробу, в дело не пошли, не супер эффективные но 30 фирменных ватт и пульсации в норме

 

Изменено 27 июн 2017, 21:42 пользователем subw

[iRybin]

@subw, ну понятно - чудес не бывает и нормальный DC-DC на нормальную мощу - это таки да

[n1ck222]

ВСем привет! такое кто испольщовал взамен китая?

 https://forum.bits.media/uploads/downloaded/m2-riser2_500f81c23e23a0ccb81fbfa181807df8.jpg

[mikhan]

550р? пока не пробовал, китайщина еще работает

[n1ck222]

@mikhan, в наличии там нет. хотелось бы отзывов) а китайщине слишком много посредников выходит и питание его не очень мне нравится. хлипкое уж очень

[Uliss]

 

 

На 12 слотов PCI-ex  https://www.overclockers.ua/news/hardware/2017-06-27/120557/
Берите пока есть https://ru.aliexpress.com/item/CNKESIN-TB250-BTC-PRO-100-New-in-box-12PCIE-for-Biostar-TB250-BTC-TB250-1151-DDR4/32819783759.html?ws_ab_test=searchweb0_0,searchweb201602_1_10152_10065_10151_10068_10301_10136_10137_10060_10155_10062_437_10154_10056_10055_10054_10059_303_100031_10099_10103_10102_10096_10169_10052_10053_10142_10107_10050_10051_10084_10083_10080_10082_10081_10110_519_10111_10112_10113_10114_10182_10078_10079_10073_10123_10189_10127_142_10125,searchweb201603_50,ppcSwitch_5&btsid=bdd0eaae-6ddd-40bc-a364-39986cfef364&algo_expid=7fb55c02-e92d-4ff6-925b-deb67c568ba0-0&algo_pvid=7fb55c02-e92d-4ff6-925b-deb67c568ba0
На 8 слотов PCI-ex https://ru.aliexpress.com/store/product/CNIKESIN-Mining-Board-8-Graphics-Motherboard-PGA988-Board-HM7X-BTC-8PCIE-PCIE-Intel-HM70-75-76/1683098_32817161520.html?spm=2114.12010611.0.0.jSUpfX

[Perf]

Это ж какой длины райзера нужны, чтобы на таких мамках собирать.

[Uliss]

Это ж какой длины райзера нужны, чтобы на таких мамках собирать.

я только что теста ради запустил видеокарту через usb-удлиннитель 5 метров! Карта естественно не майнерная (т.к. были сомнения в разводке) - но картинку на монитор кажет:

 

5m-riser.pngIMG_1461.JPG

 

так что это к вопросам про длинны хвостов, выносе карт от матери и так далее

[r9380]

Я просто оставлю это здесь:

 

Ubuntu-11GPU-EWBF.png IMG_1497.JPG

Сорри немного офтоп, но вот только заметил как у вас организовано питание (вторая картинка), через нулевую шину. Я вот последний месяц задумалься переделать свои серверники на "модульные", и первое что пришло в голову такая же шина. Через эти две шины запитаны все 11 карт? Вы уже давно их используете? Удобно? Надёжно? Какими кабелями подводите к шине? Концы со стороны шины просто обжимаете или ещё пропаиваете?

Изменено 30 июн 2017, 08:57 пользователем r9380

[Uliss]

Сорри немного офтоп, но вот только заметил как у вас организовано питание (вторая картинка), через нулевую шину. Я вот последний месяц задумалься переделать свои серверники на "модульные", и первое что пришло в голову такая же шина. Через эти две шины запитаны все 11 карт? Вы уже давно их используете? Удобно? Надёжно? Какими кабелями подводите к шине? Концы со стороны шины просто обжимаете или ещё пропаиваете?

 

 

Вот эту тему посмотри, оттуда все пошло - https://forum.bits.media/index.php?/topic/20382-korpusa-atkh-3u-4u-dlia-gpu-fermy-konstruktciia-komponovk/

[дедулик]

Коллеги, приятно слышать что вы запускаете по 8-12 карт....но сегодня приобрёл материнку асус prime z270-p....и беда....даже з карты не грузит...2 карты которые подключены в х16 видит,а в х1 не видит...карты гигабайт 1060 гейминг...биос обновил, появилось 4G но все равно не видит 3 карту в любом х1...что сделать ?

Вот и  я столкнулся с такой мороснёй. До этого 8 карт почти месяц пахали неплохо.

Потом 3 карты снял (продал) и остались 5.

А потом была гроза , а меня дома не было, чтоб превентивно отключить вводные автоматы. Приезжаю - света нет. На следующий день запустилась эта мать-перемать только с одной картой из 5 . Как-то не глядя, по быстрому, переткнул райзеры меж слотов и все 5 заработали.

На следующий день решил пару карт добавить. Появились 7 и я спокойно отправился спать. К утру риг завис, и запустился только с 2-мя.

 

Потратил пол-дня на перетыкивания и сумел запустить хоть 5 карт вместо 2.

Заметил, что не важно какая ОС на винте (винт можно и отключить), но если при старте блока питания карты крутят свои вентиляторы и за 5-20 секунд не останавливают  - значит никакая ОС их не увидит, хоть даже линукс (на убунте 16.04 видел теже, что и на вин10 яйца, только в профиль). Пока не знаю наверняка, может это еще и от каких-то настроек биос зависит, но больше склоняюсь к браку хаба з270. Гроза тоже сомневаюсь, что виновата, т.к. подключенные к тому-же автомату другие 4 матери с кучей карт на них сейчас работают нормально, да и все карты на проблемной плате тоже исправны.

Сейчас 5 карт пашут в слотах кроме pciex16-2,pciex1-1,m2-1.

 Может кто-то решил эту проблему?

 

UPD:

Сам и решил проблему :)

Заменил один из райзеров и все полетело.

Изменено 2 июл 2017, 08:12 пользователем дедулик