[BURST] Burst | PoC

[ryuspb@gmail.com]

Прошу прощения, не хотел никого обидеть, маму учила, я просто немного ошалел, читая все с первой страницы!

Спасибо огромное за информацию!

 

Есть  plotter и оптимизатор в одном флаконе XPlotter for optimized plots v 1.0 от Blago... По мне, так лучше еще ничего не придумали... Ссылка в шапке... По времени 16 Tb разметятся в среднем за ~16 суток (+-2 суток) в зависимости от характеристик компа и выбранного режима  разметки...

P.S.

Только вот обращение у тебя не по статусу))) Не пытайся выдать себя за бывалого, судя по жаргону... :new_russian:  Вообще-то приветствовать "народ" надо и употреблять слово "ПОЖАЛУЙСТА"... Или мама не учила, как общаться с незнакомыми дядями... :lol:

[ryuspb@gmail.com]

Burst client for win использует для плоттинга как раз XPlotter, судя файлам внутри паки plots, то есть выходит, что можно смело использовать средства самого клиента?

И можно ли запустить сначала майнинг, и потом плоттинг (наоборот нельзя, я пробовал) ? То есть ни влияет ли это на что либо?

 

Есть  plotter и оптимизатор в одном флаконе XPlotter for optimized plots v 1.0 от Blago... По мне, так лучше еще ничего не придумали... Ссылка в шапке... По времени 16 Tb разметятся в среднем за ~16 суток (+-2 суток) в зависимости от характеристик компа и выбранного режима  разметки...

P.S.

Только вот обращение у тебя не по статусу))) Не пытайся выдать себя за бывалого, судя по жаргону... :new_russian:  Вообще-то приветствовать "народ" надо и употреблять слово "ПОЖАЛУЙСТА"... Или мама не учила, как общаться с незнакомыми дядями... :lol:

Изменено 22 мая 2017, 08:45 пользователем Ryuspb

[hardstep]

1. подскажите какой проц нужен для 40-50ТБ? может быть есть какая-то таблица скоростей процессоров по поиску дедлайна на таких или похожих объемах?

2. есть ли какие-либо требования к размера RAM при таком объеме?

3. Если объем увеличивается в 2 раза, то скорость поиска дедлайна так же линейно увеличивается в 2 раза?

4. в какое время поиска дедлайна нужно уложиться?

5. для чего нужно соблюдать рекомендации пула по общему размеру плотов в ТБ?

Изменено 22 мая 2017, 09:00 пользователем hardstep

[marozoff]

Скажите пожалуйста, все ли я правильно сделал?

[dma281]

Скорость считывания очень маленькая. Параметр CacheSize надо подобрать.Если у вас стоит значение по умолчанию (40000), то попробуйте 4000.

Изменено 22 мая 2017, 11:22 пользователем dma281

[marozoff]

Скорость считывания очень маленькая. Параметр CacheSize надо подобрать.Если у вас стоит значение по умолчанию (40000), то попробуйте 4000.

 

Стоит 100000, если я правильно нашел

Изменено 22 мая 2017, 12:11 пользователем marozoff

[dma281]

Попробуйте менять это параметр. У меня оптимизированные плотсы и стоит CacheSize: 4000, скорость считывания 70 МБ/с, загрузка ядер процессора 65%. Это лучший результат, что я смог получить. Менял CacheSize в обе стороны от 4000.

[Rabinovitch]

 

 

Есть  plotter и оптимизатор в одном флаконе XPlotter for optimized plots v 1.0 от Blago... По мне, так лучше еще ничего не придумали... Ссылка в шапке...

 

Вот если бы он умел забивать всё свободное место на указанном диске...... Цены б не было.

[4ygak]

 

 

Вот если бы он умел забивать всё свободное место на указанном диске...... Цены б не было.

Значит нет ему цены... Прочтите про настройки батника... Там есть эта функция... Ставишь "0", где указываются размеры plots и он все исполнит...)))

[Rabinovitch]

@4ygak, научили учёного. Да ведь плоттер тогда зафигачит один большой файл на всё место!

[Blagodarenko]

1. подскажите какой проц нужен для 40-50ТБ? может быть есть какая-то таблица скоростей процессоров по поиску дедлайна на таких или похожих объемах?

2. есть ли какие-либо требования к размера RAM при таком объеме?

3. Если объем увеличивается в 2 раза, то скорость поиска дедлайна так же линейно увеличивается в 2 раза?

4. в какое время поиска дедлайна нужно уложиться?

5. для чего нужно соблюдать рекомендации пула по общему размеру плотов в ТБ?

1. i7 или FX-8xxx,  в идеале - 1 ядро на 1 диск, но и по 2-3 диска на ядро нормально работает.

Таблица скоростей плоттинга/мощности процессоров https://docs.google.com/spreadsheets/d/1ADgEidGEDrVNRt024pFztLfMGM2tZzIfYjB5y5PBxWg

для сравнения, FX-6300 майнит 20Тб за 23 секунды.

2. для майнинга - нет, для плоттинга - 0,5Тб СВОБОДНОЙ памяти на один поток.

3. близко к линейной, всё зависит от мощности ЦПУ

4. теоретически - в 4 минуты, на практике - желательно в 1 минуту

5. что бы отправлять пулу как минимум 1 дедлайн на каждый новый блок, т.е. участвовать в шарах.

Поясню, большинство пулов используют PPLNS, т.е. например, нашли блок, пул отдает 60% награды нашедшему, а 40% распределяет на всех кто участвовал, но распределяет пропорционально за последние N блоков.

Если Вы отправили только один дедлайн за эти N блоков, то коэффициент будет 1/N, если участвовали в каждом, то - N/N = 1

Изменено 22 мая 2017, 15:54 пользователем Blagodarenko

[Blagodarenko]

Попробуйте менять это параметр. У меня оптимизированные плотсы и стоит CacheSize: 4000, скорость считывания 70 МБ/с, загрузка ядер процессора 65%. Это лучший результат, что я смог получить. Менял CacheSize в обе стороны от 4000.

немного про CacheSize: это количество нонсов (кусок), которые майнер единоразово считывает и обрабатывает.

Очень сложно рекоммендовать какое-то одно значение, т.к. скорость зависит от работы HDD, ОЗУ и процессора, плюс еще участвует ОС, которая перераспределяет нагрузку ядер процессора на свободные ядра.

Обращайте внимание не на скорость считывания данных, а на время окончания считывания плотов/потока. Например возможна ситуация когда майнер напишет что загрузка ядер 90%, но это всего лишь означает что проц 90% что-то делал, возможно перераспределял множество раз одну и ту же работу между ядрами, хотя мог бы всё быстрее сделать на одном ядре.

[ololo]

1. i7 или FX-8xxx,  в идеале - 1 ядро на 1 диск, но и по 2-3 диска на ядро нормально работает.

Таблица скоростей плоттинга/мощности процессоров https://docs.google.com/spreadsheets/d/1ADgEidGEDrVNRt024pFztLfMGM2tZzIfYjB5y5PBxWg

Табличка просто так не открывается, говорит нужно отправить запрос владельцу чтобы посмотреть. Очень хотелось бы глянуть — там только CPU, или GPU тоже есть? И такой ещё общий вопрос.. где-то в форумах натыкался на сравнение cpu и gpu майнеров, и там приводился пример amd 280x где она за ~20 сек обрабатывала десятки терабайт, работая в пол-силы. И там же было сказано, что процесс упирается в производительность дисков, а не в мощность карты (что логично, раз она на ~50% только загружена). После чего я задумался — есть ли смысл диски в RAID0 объединять? По два диска на массив, например? Скорость чтения ведь практически в 2 раза увеличится, и gpu можно будет загрузить по полной. Тем не менее пока не видел нигде чтобы люди R0 использовали для майнинга burst, потому тут наверно какой-то подвох есть — раз никто так не майнит?

[Blagodarenko]

@ololo, вроде поправил, там только по CPU.

Вот по ГПУ старенькая, не моя https://docs.google.com/spreadsheets/d/1XxyQ1eH2oL4QKfxHkSFHHCGOGaE1FEPDnBt2WbA_oE4

Прелесть ГПУ-плоттера в том, что на производительных картах можно плотить по несколько дисков параллельно, но при использовании режима direct скорость плоттинга резко падает.

R0 не применяют потому что майнер может читать 2 диска параллельно, а при R0 это будет один последовательный диск

[dma281]

немного про CacheSize: это количество нонсов (кусок), которые майнер единоразово считывает и обрабатывает.

Очень сложно рекоммендовать какое-то одно значение, т.к. скорость зависит от работы HDD, ОЗУ и процессора, плюс еще участвует ОС, которая перераспределяет нагрузку ядер процессора на свободные ядра.

Обращайте внимание не на скорость считывания данных, а на время окончания считывания плотов/потока. Например возможна ситуация когда майнер напишет что загрузка ядер 90%, но это всего лишь означает что проц 90% что-то делал, возможно перераспределял множество раз одну и ту же работу между ядрами, хотя мог бы всё быстрее сделать на одном ядре.

Так время считывания и обработки плотсов (в моем случае 1,7s в среднем) напрямую зависит от скорости считывания (то что указано в скобках MB/s- ~69MB/s). Когда я ставил другие значения CacheSize скорость считывания падала и соответственно время загрузки плотсов увеличивалось.

Изменено 22 мая 2017, 17:02 пользователем dma281

[hardstep]

1. i7 или FX-8xxx, в идеале - 1 ядро на 1 диск, но и по 2-3 диска на ядро нормально работает.

1.1 совсем запутался. если по ядру на диск(8ТБ), то зачем i7? самый простой четырехядерник с AVX это что-то типа Core i5 2300, который у меня есть и смогу проверить для пополнения Вашей таблицы, если расскажете как.

1.2 скорость плоттинга как-то связана со скоростью майнинга?

понял одно, что 775-ым сокетом и селеронами/пентиумами тут не обойтись. sandy bridge как минимум.

Таблица скоростей плоттинга/мощности процессоров https://docs.google....ZzIfYjB5y5PBxWg для сравнения, FX-6300 майнит 20Тб за 23 секунды.

мой вопрос именно про майнинг(чтение). мне нужно понять какого железа достаточно именно для майнинга, а не для плоттинга. Вы этот расчет для FX-6300 из таблицы взяли? как считать?

для плоттинга на таких объемах придется взять GPU, хотя ввиду сегодняшних пампов эфира и зека нужно еще посчитать.

Изменено 22 мая 2017, 18:29 пользователем hardstep

[djeksoul]

Ты же майнер к пулу привязал, вот 1 монета и ушла на оплату комиссии. А вообще у тебя один файл неверный. Видишь ошибку? Нужно пересоздать плотс.

 

подскажите, чем можно проверить есть ли пересечение плотов и их целостность, заранее благодарен и как можно оптимизировать работу майнера

Изменено 22 мая 2017, 18:24 пользователем djeksoul

[hardstep]

@djeksoul,Майнер от Blago, который Вы используете покажет пересечение плотов. Про целостность непонятно​.

[djeksoul]

@djeksoul,Майнер от Blago, который Вы используете покажет пересечение плотов. Про целостность непонятно​.

в смысле покажет, что должно писать, если они пересикаются? и чем лучьше оптимизировать плоты, и как добиться максимального выхлопа, с какимим настройками и где менять

[Shlyakhov Dmitry]

XPlotter

 

как плотить что бы можно было, прервать и потом продолжить

 

диск NTFS

 

но почему то начинает каждый раз с начала

 

и продолжить можно только после ручного прерывания? к примеру если вылетит диск при выключении света

 

вижу Благодаренко начал отвечать сегодня на вопросы

 

очень нужно понять как прервать майнер и потом продолжить

 

заранее благодарю за ответы

[hardstep]

в смысле покажет, что должно писать, если они пересикаются?

напишет что-то вроде "overlaped"

 

 

и чем лучьше оптимизировать плоты

проще сразу делать оптимизированные плоты. читайте ветку назад.

Изменено 22 мая 2017, 19:04 пользователем hardstep

[hardstep]

 

 

при использовании режима direct скорость плоттинга резко падает.

но ведь без direct плоты выйдут неоптимизированными?

[Sikorskiy]

В любом случае нужен или процессор с AVX, или простянькая видеокарта из ATI (даже встроенная).

 

 

Сейчас увеличил дисковое пространство, 67Tb обрабатывается за 32 секунды на встроенном GPU в AMD A10-5800K.

И ще будет докинуто терабайт 10, заливаются. 

Изменено 23 мая 2017, 09:17 пользователем Sikorskiy

[ololo]

 

 

Сейчас увеличил дисковое пространство, 67Tb обрабатывается за 32 секунды на встроенном GPU в AMD A10-5800K. И ще будет докинуто терабайт 10, заливаются.

А какая у вас мат. плата? Уже неделю пытаюсь определить оптимальную сборку под Burst, и после ваших сообщений начал склоняться к AMD FM2+. Как я понимаю, у этих процессоров самые быстрые встроенные видеоядра (у broadwell, возможно, быстрее, но цена намного выше), плюс плоттинг и майнинг Burst работает через OpenCL и вроде как быстрее на GPU от AMD. Особых мощностей от видеокарты для механических жёстких дисков видимо не требуется, потому встройки как раз должно хватить (смотрю на A10 7870-K - у него 512 ядер вроде). Плюс если использовать встройку и не занимать слоты pci-e, то пара pci-e x8 остаётся свободными (на A88X платах), и туда как раз ставятся 8-портовые sas/sata контроллеры. Пара таких контроллеров + 6-8 sata портов в мат. плате = 22-24 диска на систему без проблем. В большинство корпусов в любом случае больше не влезет. Не очень только пока понимаю энергоэффективность систем на FM2+, разные цифры встречаются: тут idle из розетки всего 24 Вт, а тут с той же платой idle уже 71-74 Вт. Вы не замеряли потребление своей системы?

[yotadrivers]

подскажите seagate archive 8tb стоит брать?