A A A A Автор Тема: Команда астрофорума в Распределенных Вычислениях  (Прочитано 54478 раз)

0 Пользователей и 1 Гость просматривают эту тему.

Оффлайн tanos

  • ****
  • Сообщений: 480
  • Благодарностей: 33
  • посмотри вверх, и твои глаза наполнятся звездами
    • Сообщения от tanos
А какая борьба идёт за 1-е место....  ::)

Надеюсь, что всё что у меня оседает в pending в скором времени начнет засчитываться. Удручает скорость расчёта одного задания Perseus - 5 часов 20 минут, карты считают в 4-е потока каждая. Видимо AMD не очень жалуют в проекте Einstein. Интересно какая быстро считают карты nVidia.

P.S. Уже третьи, благодаря всем участвующим, и существенному вкладу Grey  :).
« Последнее редактирование: 11 Дек 2013 [06:31:32] от tanos »
Оборудование:
(кликните для показа/скрытия)

Оффлайн Grey_

  • *****
  • Сообщений: 729
  • Благодарностей: 22
  • Владимир
    • Сообщения от Grey_
Надеюсь, что всё что у меня оседает в pending в скором времени начнет засчитываться. Удручает скорость расчёта одного задания Perseus - 5 часов 20 минут, карты считают в 4-е потока каждая. Видимо AMD не очень жалуют в проекте Einstein. Интересно какая быстро считают карты nVidia.

В большинстве проектов, и в Эйнштейне тоже, ATI карточки в 1.5-2 раза быстрее чем NVIDIA карточки соответствующей цены. Например 7970 vs gtx680.
5 часов 20 минут в 4-е потока - слишком медленно. Должно быть 4-4.5 часа. Проверяй железо и софт.
Чтобы карточка раскрыла свой потенциал на Эйнштейне она должна работать в PCI-e 3.0 16bit режиме, соответственно ЦП нужен Сандик иль Ивик.
EdgeHD 11" + AO&Lodestar + QHY15, Epsilon-180 + QHY9, гид DeepSky 80x560 + QHY6, EM-400.

Оффлайн tanos

  • ****
  • Сообщений: 480
  • Благодарностей: 33
  • посмотри вверх, и твои глаза наполнятся звездами
    • Сообщения от tanos
В большинстве проектов, и в Эйнштейне тоже, ATI карточки в 1.5-2 раза быстрее чем NVIDIA карточки соответствующей цены. Например 7970 vs gtx680.
5 часов 20 минут в 4-е потока - слишком медленно. Должно быть 4-4.5 часа. Проверяй железо и софт.
Чтобы карточка раскрыла свой потенциал на Эйнштейне она должна работать в PCI-e 3.0 16bit режиме, соответственно ЦП нужен Сандик иль Ивик.

Да, мне пора основной комп апгрейдить, т.к. PCI-E 2.0  и CPU i7 930.
Оборудование:
(кликните для показа/скрытия)

Оффлайн Freddykrug

  • *****
  • Сообщений: 15 662
  • Благодарностей: 411
  • Мечта: остров посреди океана, 300 ночей, > 500 мм.
    • Сообщения от Freddykrug
tanos - выключайте все процессорные задания. Для Эйнштейна это значительно улучшит скорость - впрочем, как и Милки.
Sky-Watcher Dob 8", Celestron Omni XLT 120, БЦП 20х60,  forum.boinc.ru

Оффлайн tanos

  • ****
  • Сообщений: 480
  • Благодарностей: 33
  • посмотри вверх, и твои глаза наполнятся звездами
    • Сообщения от tanos
tanos - выключайте все процессорные задания. Для Эйнштейна это значительно улучшит скорость - впрочем, как и Милки.

Когда считаю Einstein всегда выключаю. Для Milky особой разницы не заметил, всегда под 4-е потока ей оставляю 2-а ядра.
Приценивался сегодня к железу для upgrade: CPU 4770 - 295$, 4930K - 570$, матплата 180-250$, более мощный БП 1200W (GA Odin Pro) еще 150$.
Оборудование:
(кликните для показа/скрытия)

Оффлайн Freddykrug

  • *****
  • Сообщений: 15 662
  • Благодарностей: 411
  • Мечта: остров посреди океана, 300 ночей, > 500 мм.
    • Сообщения от Freddykrug
Кстати, можно уже хомячить Астероиды.
Sky-Watcher Dob 8", Celestron Omni XLT 120, БЦП 20х60,  forum.boinc.ru

Оффлайн tanos

  • ****
  • Сообщений: 480
  • Благодарностей: 33
  • посмотри вверх, и твои глаза наполнятся звездами
    • Сообщения от tanos
В соревновании в Einstein уже вторые.  :)
Оборудование:
(кликните для показа/скрытия)

Оффлайн Grey_

  • *****
  • Сообщений: 729
  • Благодарностей: 22
  • Владимир
    • Сообщения от Grey_
tanos - выключайте все процессорные задания. Для Эйнштейна это значительно улучшит скорость - впрочем, как и Милки.
Отнюдь. Эйнштейну надо оставлять одно ядро (два ядра для компа с двумя карточками), все остальные потоки  можно и даже нужно загружать ЦП-проектом. Ибо, по крайней мере на сандиках, наблюдается парадокс Эйнштейна - http://forum.boinc.ru/yaf_postsm58811_GPU-prilozhieniie-Einstein-Home.aspx#post58811
Типовая схема для однокарточной машины с 8-поточным ЦП - счет в три потока на ГП + 6 потоков на ЦП.
Типовая схема для двухкарточной машины с 8-поточным ЦП - счет в три потока на каждом ГП + 4 потоков на ЦП.

EdgeHD 11" + AO&Lodestar + QHY15, Epsilon-180 + QHY9, гид DeepSky 80x560 + QHY6, EM-400.

Оффлайн tanos

  • ****
  • Сообщений: 480
  • Благодарностей: 33
  • посмотри вверх, и твои глаза наполнятся звездами
    • Сообщения от tanos
Отнюдь. Эйнштейну надо оставлять одно ядро (два ядра для компа с двумя карточками), все остальные потоки  можно и даже нужно загружать ЦП-проектом.

Видимо не на моем железе, подключил CPU проект, выигрыш если и есть, он минимален, время расчета задания Einstein в пределах стат.погрешности. Еще одной причиной кроме вышеуказанных, может быть то, что каждая карта считает в 4-е потока, после соревнований поэкспериментирую. В общем для полной отдачи от железа ПК, к каждому проекту надо время чтоб пристреляться.

P.S. В Einstein - вышли на первое место.
« Последнее редактирование: 13 Дек 2013 [06:41:49] от tanos »
Оборудование:
(кликните для показа/скрытия)

Оффлайн tanos

  • ****
  • Сообщений: 480
  • Благодарностей: 33
  • посмотри вверх, и твои глаза наполнятся звездами
    • Сообщения от tanos
В настоящее время некоторые российские проекты находятся в отключенном состоянии,  например Gerasim@Home. И для того, чтобы не было простоя серверного железа, Алескандр Андреев (AlexA, Russia Team), обращается к астрофорумчанам с таким предложением.

В статье из журнала Троицкий диалог наука, AlexA вычитал, что на мощных серверах NASA, где нет проблем с трафиком, имеется большой объём накопленных данных по нескольким проектам:

Ферми – данные поступают с телескопа о более чем 200 млн. гамма-квантов с направлениями и временами прихода, с их энергией и рядом технических данных, нужных для более профессионального анализа.

BATSE - архив эксперимента, наблюдавшего все небо в жестком рентгеновском и мягком гамма-диапазонах на протяжении 9 лет.

Слоановский цифровой обзор неба (www.sdss.org) -  проект захватывающий своей неисчерпаемостью, это детальное картографирование Вселенной, причем в трехмерии, поскольку снимаются спектры галактик, и определяется красное смещение.

Суть вопроса, привлечь к вопросу людей находящихся "в теме" и помочь с оригинальной идеей, иначе с алгоритмом обработки накопленных данных, дабы выудить из них что-либо для науки интересное и загрузить простаивающие мощности. Вопросы написания библиотек программ под распределённые вычисления не ставится.
Оборудование:
(кликните для показа/скрытия)

Оффлайн Freddykrug

  • *****
  • Сообщений: 15 662
  • Благодарностей: 411
  • Мечта: остров посреди океана, 300 ночей, > 500 мм.
    • Сообщения от Freddykrug
Суть вопроса, привлечь к вопросу людей находящихся "в теме" и помочь с оригинальной идеей, иначе с алгоритмом обработки накопленных данных, дабы выудить из них что-либо для науки интересное и загрузить простаивающие мощности. Вопросы написания библиотек программ под распределённые вычисления не ставится.
Вам не кажется, что здесь явное противоречие? По типу: "Больного надо лечить. Организм захочет - выздоровеет сам".
Sky-Watcher Dob 8", Celestron Omni XLT 120, БЦП 20х60,  forum.boinc.ru

Оффлайн tanos

  • ****
  • Сообщений: 480
  • Благодарностей: 33
  • посмотри вверх, и твои глаза наполнятся звездами
    • Сообщения от tanos
Суть вопроса, привлечь к вопросу людей находящихся "в теме" и помочь с оригинальной идеей, иначе с алгоритмом обработки накопленных данных, дабы выудить из них что-либо для науки интересное и загрузить простаивающие мощности. Вопросы написания библиотек программ под распределённые вычисления не ставится.
Вам не кажется, что здесь явное противоречие? По типу: "Больного надо лечить. Организм захочет - выздоровеет сам".

Ни какого противоречия. Одно, как с точки зрения науки правильно обработать накопленные данные - процесс постановки задачи для программиста, другое написание на языке программирования по поставленной задаче библиотек под клиент-серверную часть boinc для обработки данных.
Оборудование:
(кликните для показа/скрытия)

Оффлайн Freddykrug

  • *****
  • Сообщений: 15 662
  • Благодарностей: 411
  • Мечта: остров посреди океана, 300 ночей, > 500 мм.
    • Сообщения от Freddykrug
То есть вы предлагаете остановиться пока на идее, что с этим добром делать, и разработке технического задания для программиста, при этом программирование (пока?) не планируется?
Кстати, а POGS с Эйнштейном не используют ли часть этих данных? Может, мы пытаемся заново открыть закон Ньютона?
Sky-Watcher Dob 8", Celestron Omni XLT 120, БЦП 20х60,  forum.boinc.ru

Оффлайн tanos

  • ****
  • Сообщений: 480
  • Благодарностей: 33
  • посмотри вверх, и твои глаза наполнятся звездами
    • Сообщения от tanos
То есть вы предлагаете остановиться пока на идее, что с этим добром делать, и разработке технического задания для программиста, при этом программирование (пока?) не планируется?
Кстати, а POGS с Эйнштейном не используют ли часть этих данных? Может, мы пытаемся заново открыть закон Ньютона?

Freddykrug, если я правильно понял посыл AlexA.
Для того чтоб заново не открывать закон Ньютона, иными словами не считать то что уже где то и кем-то просчитано, надо разбираться в теме. По понятным причинам на f-b-ru народ в этом не очень силен, отсюда и обращение на АФ, может, найдутся среди форумчан люди, которые либо сами разбираются в затронутом вопросе, либо имеют связи с профессиональными астрономами (например, с ГАИШ) которым этот вопрос будет интересен. Может совместными усилиями родиться отечественный астропроект, правда на зарубежных данных.

Программирование под железо, которое находится у SerVal, будет осуществляться теми же людьми, что и делали проект Gerasim, возможно Эдуардом (последнее это моя интерпритация намека AlexA).
Оборудование:
(кликните для показа/скрытия)

Оффлайн Freddykrug

  • *****
  • Сообщений: 15 662
  • Благодарностей: 411
  • Мечта: остров посреди океана, 300 ночей, > 500 мм.
    • Сообщения от Freddykrug
Для этого вопроса, ИМХО, лучше создать новую тему. Профи, к которым Вы аппелируете, вряд ли читают нашу переписку в этой теме .
Sky-Watcher Dob 8", Celestron Omni XLT 120, БЦП 20х60,  forum.boinc.ru

Оффлайн tanos

  • ****
  • Сообщений: 480
  • Благодарностей: 33
  • посмотри вверх, и твои глаза наполнятся звездами
    • Сообщения от tanos
Для этого вопроса, ИМХО, лучше создать новую тему. Профи, к которым Вы аппелируете, вряд ли читают нашу переписку в этой теме .
Не совсем так, AlexA выдал идею, хотелось бы услышать мнение членов команды:
- будет ли им интересно считать проект наполовину российский, но астрофизический;
- может кто подкинет идей зная о работе вышеуказанных проектов c сайта NASA, в области, что из накопленного материала можно вытащить;
- стоит ли вообще обращаться в ГАИШ с этой идеей;
- может у кого из членов команды есть связи с сотрудниками ГАИШ, например с Сергеем Поповым.
Если ничего не прояснится, попробую сам написать в ГАИШ, но мне как иностранному резиденту :) будет трудно.
Оборудование:
(кликните для показа/скрытия)

Оффлайн Freddykrug

  • *****
  • Сообщений: 15 662
  • Благодарностей: 411
  • Мечта: остров посреди океана, 300 ночей, > 500 мм.
    • Сообщения от Freddykrug
- будет ли им интересно считать проект наполовину российский, но астрофизический;
А что, одно другое исключает?  :D Я - буду.
Sky-Watcher Dob 8", Celestron Omni XLT 120, БЦП 20х60,  forum.boinc.ru

Оффлайн VavanzerАвтор темы

  • *****
  • Сообщений: 20 109
  • Благодарностей: 492
  • Все мы - микробы, в масштабах Вслеленной!!!
    • Сообщения от Vavanzer
Не совсем так, AlexA выдал идею, хотелось бы услышать мнение членов команды:
- будет ли им интересно считать проект наполовину российский, но астрофизический;
- может кто подкинет идей зная о работе вышеуказанных проектов c сайта NASA, в области, что из накопленного материала можно вытащить;
- стоит ли вообще обращаться в ГАИШ с этой идеей;
- может у кого из членов команды есть связи с сотрудниками ГАИШ, например с Сергеем Поповым.
Если ничего не прояснится, попробую сам написать в ГАИШ, но мне как иностранному резиденту :) будет трудно.
  Я только за. 
Если и обращаться в ГАИШ, то лучше тем кто там знаком с людьми, то есть через таких людей, и было бы круто найти там тех у кого энтузиазм есть и амбиции. "Стариканы" уже свои докторские-проффессорские погоны получили и им глубоко наплевать на развитие науки. Среди тех кто помоложе искать надо.
  Кстати читал про ГАЙЮ, новый орбитальный телескоп, который все никак не запустят. Там такие цифры по количеству данных которые будут поступать приводятся. И насколько понял что они своими силами хотят это все обрабатывать. Странно что РВ- проект не хотят открыть, хотя опять же стоит им упомянуть это дело и прощай новый суперкомпьютер... )))
237мм 1:6,3  планетный ньютон (зеркало Vladstar 9,25")
250мм 1:4 шмидт-ньютон Meade
60мм ахромат 1:7 sv-bony

Оффлайн tanos

  • ****
  • Сообщений: 480
  • Благодарностей: 33
  • посмотри вверх, и твои глаза наполнятся звездами
    • Сообщения от tanos
Завершилось 47-ое соревнование команды. На этот раз недельный забег проводился в проекте Einstein@Home. Сначала соревнования команда Boinc@Poland заняла первую строчку забега и намеривалась её удерживать до конца. Что для русского хорошо, то поляку…, да... беда для них пришла неожиданно и снова в лице Grey, а для нас это обернулась победой и что немаловажно еще одним первым местом в астро-проекте. Взяв хороший темп Grey и K° стали «штамповать» по 100-120 тыс. очков в час и к началу четвертого дня обошли команду SETI.USA, а чуть позже и команду Boinc@Poland. Понятное дело по очкам один Grey первое место не взял бы, все участники молодцы. К сожалению, во время соревнования Sid потерял одну свою видеокарту, по его словам она погибла со снопом искр и дырой в текстолите, RIP ей.

Статистика:
всего за 7 дней в соревновании приняли участие 19 команд и 940 участников. От нас выступили 17 участников или 2% от общей численности, и команда заработала - 11,448,997 очков.

Участвовали:
ник участника ____  место __       очки
Grey ______________ 1 _______ 9.374.858 очков;
Sid  ______________ 10 ________ 527.000 очков;
Tanos ____________ 11 ________ 513.282 очков;
Afarus ____________ 18 ________ 333.300 очков;
Fallen ____________ 25 ________ 266.046 очков;
Valenti ___________  99 ________  68.996 очков;
Shurale __________ 112 ________ 60.908 очков;
Bronevik _________  113 ________ 60.043 очков;
Freddykrug [Astronomy.Ru Forum] ____ 117 ____ 57,331 очков;
Passer ___________ 126 _________ 53,328 очков;
Veganin __________ 168 _________ 36,663 очков;
Pavel_Kirpichenko___ 214 ________ 26,127 очков;
Kiss _____________ 218 ________ 25,322 очков;
Vavanzer _________ 223 ________ 24,331 очков;
Alexander Kovalsky__434 _________ 7,017 очков;
Andrew___________ 450_________ 6,333 очков;
Грехов Михаил___ 635 ______ 2,542 очков.

И снова потеряно имя/имена  заработавших 5570 очков.


Команда Astronomy.Ru Forum участвовала в 48-ти соревнованиях. Из них заняли:

1-х мест - 4; два в проекте - SAT@Home; одно в MilkyWay@Home, одно в Einstein@Home.
2-х мест - 8; проекты - MilkyWay@Home 2 раза / Asteroids@Home 3 раза / theSkyNet POGS@Home 2 раза; Albert@Home - 1 раз.
3-х мест - 4; проекты - theSkyNet POGS / Albert@Home / Asteroids@Home / MilkyWay@Home.

Распределение мест по итогам соревнований, среди мировых команд у которых в активе хотя бы одна золотая медаль.
_№____Команда________Золото_______Серебро_______Бронза
_6___Russia_____________18____________17_________ __10
_12_Crystal Dream_________5_____________5____________4
_13_Astronomy.Ru Forum____4_____________8____________4
_20_DC Russian Union______3_____________0____________1
_25_TSC! Russia___________2_____________1____________0
_29_Russia Team__________1_____________8____________7
_30_BOINC RUSSIA________1_____________4_____________5
_35_RUS-Team___________1_____________1_____________1

Теперь главное не останавливаться на достигнутом.
« Последнее редактирование: 16 Дек 2013 [18:05:29] от tanos »
Оборудование:
(кликните для показа/скрытия)

Оффлайн Freddykrug

  • *****
  • Сообщений: 15 662
  • Благодарностей: 411
  • Мечта: остров посреди океана, 300 ночей, > 500 мм.
    • Сообщения от Freddykrug
О, спасибо!
Дополню про одно забытое соревнование. Инициаторами которых по просьбе одной гонимой команды  ;)  выступила наша же команда. В "не-профильном" для нас биологическом проекте SIMAP за команду сражались два кранчера:

Afarus   ---  19    ---  21104
kiss    ---  130  ---  820
Их усилиями команда заняла 8-е место из 12 (21924 очка), сумев опередить "старых знакомых" - AMD Users.
Sky-Watcher Dob 8", Celestron Omni XLT 120, БЦП 20х60,  forum.boinc.ru