Распределенные Вычисления. Boinc.ru

[SETI_home_v8]

ПМ декабрь 2018 Письмо месяца Волонтерам с компьютерамиПМ декабрь 2018 Письмо месяца Волонтерам с компьютерами.jpg

[SETI_home_v8]

Уважаемые участники российского проекта RakeSearch

И для проекта RakeSearch также появились новые оптимизированные приложения, которые обеспечивают значительно более быстрый счёт заданий!

(На 30 процентов быстрее, чем предыдущая версия оптимизированных приложений и до 10 раз быстрее оригинальных приложений).

Более подробно прочитать про эти приложения можно по ссылке: http://rake.boincfast.ru...php?id=39&postid=715

Скачать новую версию оптимизированных приложений для установки можно по ссылке: https://github.com/sirzo...Search/releases/tag/v1.1

С выпуском этой версии оптимизированных приложений сделано и приложение для 32 разрядного Linux (которого не было ранее).

Перед установкой приложений - не забудьте полностью остановить службу BOINC и считаемые задания. Посмотреть, какие инструкции поддерживает Ваш процессор можно с помощью программы CPU-Z

Все массово берёмся за переустановку приложений для ускорения счёта!

[SETI_home_v8]

After_Attack.gif

Before_Attack.gif

operat1.gif

operat2.gif

Predictor-11apr2006g.PNG
http://www.boinc.ru/team/russia_team.aspx
Команда " Russia Team" образовалась в июне 2005 года. Первоначально команда участвовала лишь в проекте Einstein@Home. Однако, по мере появления новых членов в команде, расширялся и круг наших интересов. Неизменным остается только приверженность к проектам, совместимым с платформой BOINC.

Появление этой команды не прошло незамеченным. На российских интернет-площадках развернулись горячие дебаты о необходимости создания и возможном будущем этой команды. Вспомнить былое и проникнуться духом того времени можно в нашей "Исторической справке". Руководство команды оказалось довольно энергичным и креативномыслящим. В обыденный и скучноватый процесс компьютерных вычислений нам удалось внести элементы компьютерной соревновательности и игры, что способствовало как привлечению в ряды команды новых участников, так и росту общей популярности российских распределенных вычислений. Несколько первоначальных комбинаций подобного типа мы описали в заметке "Оперативные комбинации".

Постепенно у команды появилось желание организовать собственные сайт и форум. Так появился ресурс BOINC.RU. Однако постепенно сайт конкретной команды превратился в место сбора разнообразной информации по проблеме распределенных вычислений, где каждый желающий, независимо от командной принадлежности мог бы найти интересующие его сведения и присоединиться к добровольным участникам распределенных вычислений.

В настоящее время "Russia Team" является одной из крупнейших команд в России, активно участвует практически во всех существующих проектах распределенных вычислений на платформе BOINC, постоянно наращивает свою мощь как в численном, так и в вычислительном плане и стремиться занять достойное место в мировом рейтинге распределенных вычислений.

В конце 2014 года команда попыталась воплотить в реальность свою давнюю мечту - собрать общекомандную мощную вычислительную систему. Реализовывать идею решили с использованием современных краудфандинговых технологий на площадке Boomstarter. Ход сбора средств и самой реализации освещался на форуме и в обновлениях самого проекта. А на странице команды нам бы хотелось выразить огромную благодарность всем, кто нас поддержал и благодаря кому этот проект был реализован.

Летопись команды. Страницы истории.
Предисловие.

История штука хитрая. Проходит время и многие события либо забываются, либо искажаются, либо обрастают домыслами и видятся совсем по-другому. Поэтому, нам захотелось начать писать историю своей команды практически сразу после ее создания. Сейчас, в апреле 2006 года, по прошествии всего 10 месяцев с момента создания команды большинство событий ее недолгой, но достаточно бурной истории, еще свежи в памяти и позволяют очевидцам донести их до потомков почти без искажений. Однако любая история только тогда чего-нибудь стоит, когда она подкрепляется документальными свидетельствами, коими будут ссылки и выдержки из различных форумных обсуждений. Ну а чтобы ничего не пропало, по независящим от создателей этого сайта причин, мы разместим на своих страницах копии тех документов, разумеется с указанием на первоисточники. Поскольку это все касается нас непосредственно, думаю, мы имеем на это право. Итак, ...

С чего все начиналось?

Как и любые крупные дела, начиналось все со скандалов, когда летом 2005 года в стане команды "Russia" сложилась "революционная ситуация", при которой "низы" (в лице будущего основателя команды "Russia Team" SerVal-а) "не захотели жить по-старому", а "верхи" (в лице основного координатора команды "Russia", а также основателя и владельца ресурса distributed.ru RM-а) не смогли (или не захотели) "управлять по новому".

Конечно, на любое историческое событие можно посмотреть с разных сторон. Создание команды "Russia Team" также не ускользнуло от внимания российской распределенной общественности и в последующем этому событию было посвящено целое исследование, озаглавленное как "Russia Team FAQ", а также обсуждение этого исследования на форуме (на двух страницах).

Само обсуждение идеи SerVal-а о создании новой команды, которое проходило на страницах форума "BOINC SETI@home Russia", и в котором приняли участие широко известные в узких кругах российских распределенных вычислений Hoar, kvic, GercoG, chepser и RM, было встречено, мягко говоря, неодобрительно. И тем не менее, 10 июня 2005 года, возмутителем всеобщего спокойствия SerVal-ом, после очень непродолжительного обсуждения, в проекте Einstein@Home была создана команда "Russia Team".

Как видите образование и становление молодой команды проходило не под бравурные марши ...

А что же было дальше?

А дальше пришлось все начинать с нуля. Почти с нуля. Как Вы уже знаете, первоначально местом общения новой команды была ветка командного форума "BOINC SETI@home Russia", за что мы приносим огромную благодарность ее руководителю OutRider-у.

В процессе общения образовалась инициативная группа, в которую вошли SerVal, Hoar, Nicklion и AlexA. По-правде говоря, это и была почти вся молодая команда. Кроме упомянутой четверки в команду входили также Alexander Wolf и Boginskiy. И считала команда только один проект - Einstein@Home.

Посовещавшись народ решил, что нормальная команда распределенных вычислений не может таковой являться без наличия собственного сетевого ресурса. Тем более, что одной из основных причин создания было желание иметь такую площадку для общения, где участники других команд, сайтов, форумов могли бы высказывать своё мнение, даже если оно не совпадает с мнением администрации сайта и форума. Ну а помня свое существование на "подаренной" ветке форума другой команды, попутно родилась идея создания на boinc.ru также и форумов других команд, размещение страниц и рекламы Российских команд не имеющих отдельного домена. Забегая вперед можно сказать, что эта идея уже реализуется.

Вы, вероятно, уже убедились, что с амбициями у новой команды все обстояло нормально, да и кроме boinc-проектов команда ничего считать не собиралась, поэтому неудивительно, что было выбрано именно такое доменное имя - BOINC.RU. Конечно, мы понимали, что это имя ко многому обязывает и надеемся, что ресурс уже оправдывает его.

Чем же мы отличаемся?

Возможно это довольно субъективная точка зрения, но нам кажется, что мы, в первую очередь отличаемся от других команд тем, что нам хочется считать весело. Одним из наших "ноу-хау" можно считать проведение тактических операций в различных проектах. Уже проведены "Операция Rosetta" и "Операция Predictor", позволившие команде собрав все силы на одном направлении существенно поднять свой рейтинг в этих проектах. Однако веселое отношение к распределенным вычислениям вовсе не показатель нашей несерьезности. Я думаю в этом может убедиться каждый, заглянувший в нашу "Библиотеку". Собственными силами и с помощью наших партнеров (hoarfrost и SAV) уже собрана существенная коллекция статей и переводов, посвященных различным проектам. Я надеюсь, что это направление нашей просветительской работы будет успешно продолжаться.

Думаю, что мы достаточно рассказали о себе. Правдивость или ошибочность наших слов покажет время, а уж мы (надеемся, что с Вашей помощью) постараемся все сказанное оправдать.

Оперативно-тактическое искусство распределенных вычислений.
________________________________________
• Вступление
• Операция "Rosetta" (октябрь 2005 г.)
• Операция "Predictor" (март 2006 г.)
• Операция "Spinhenge" - "Страх и Трепет" (октябрь 2006 г.)
________________________________________

Вступление.
По правде говоря, я не могу сказать достоверно, применялись ли ранее различные военные хитрости в математических расчетах, коими, безусловно, являются распределенные вычисления. Однако, раз уж здесь дело дошло до очков, рейтингов и дележа мест, то без хитрости никуда не денешься.
Сам по себе, принцип сосредоточения сил на "направлении главного удара" никак нельзя считать чем-то новым. Да и наверняка каждый из добровольцев, считающих более одного проекта, нет нет, да и приостанавливал все расчеты по некоторым проектам, оставляя один основной проект на всех доступных машинах, чтобы достичь каких-то желанных ему показателей. Однако использование подобных приемов в командной борьбе до недавнего времени не практиковалось.
Операция "Rosetta".
Неизвестно как возникла идея этой операции у SerVal-а, но расклад сил был, на первый взгляд, совершенно не в пользу команды "Russia Team". Посмотрите сами какой была начальная расстановка непосредственно перед началом "операции" - 6.10.05:

Была сформулирована цель - за 4 дня (возможно 1-2 дополнительных дня ) выйти на первое место по России.
Стоит также напомнить, что на тот момент команда состояла всего из 6 участников, из которых общались между собой на форуме только четверо.
Тем не менее, брошенный клич был поддержан всей четверкой и в пятницу вечером 7-го октября 2005 года. (чтобы не спугнуть соперников и не дать возможности на выходные перенастроить компьютеры) "Операция" началась.
По прошествии времени ход операции можно было бы проследить только по замечаниям участников и зрителей в соответствующей ветке форума, здесь приведем только отдельные моменты:
• вечер 9-го - предварительный анализ показывает, что продвижение идет успешно, но несколько медленно. К контрольной дате (11 октября) ожидается "всего" 4000 кредитов, что явно недостаточно для достижения намеченной цели.
• 10-е октября - к операции присоединился Hoar со своими компьютерами, напор усилился.
• вечер11-го - зрители в лице, kvic-а положительно оценили напор команды: "Мощно идете, респект."
• утро 12-го - цель достигнута.
"Russia Team" 6,416.32 (Total) 518.57 (Aver.)
"Russia" 6, 381.71 (Total) 266.33 (Aver.)
• вечер 12-го - "Операция" закончена, мощности переведены на "боевое дежурство".
Вот так выглядела турнирная таблица вечером 12-го октября 2005 года. Что называется - почувствуйте разницу!

Объективно оценивая причины успеха можно сказать, что он стал возможен благодаря тому, что были правильно выбраны время и место проведения акции. Проект тогда был мало распространен среди российских участников. Если сейчас (зима-весна 2006 г) многих отпугивает непомерный трафик проекта, с которым организаторы ничего не хотят делать, то тогда мешали непомерные аппетиты к оперативной памяти. При работе клиент занимал 200МБ ОЗУ.
Конечно позднее, когда в новых версиях требования к ресурсам существенно снизились и к проекту присоединилось значительно больше членов команд, ситуация стала меняться, но еще многие месяцы наша команда оставалась российским лидером проекта Rosetta@Home.
Операция Predictor.
Шло время, периодически звучали предложения повторить подобный рывок в одном из проектов, однако надо было подготовиться и просчитать варианты. И вот такой момент настал.
В середине марта 2006 года SerVal обратился к команде с предложением осуществить новое наступление в проекте Predictor@Home.
Предложение было встречено неоднозначно, так как турнирная ситуация выглядела еще более сложно и были явные сомнения в возможности достижения такой цели как обойти команду "PolarSeti" и выйти на 3 место в России. Как говорится: "И хочется, и колется".
Поэтому после некоторого обсуждения были определены две цели - войти в мировой TOP100 и, по возможности, войти в тройку российских лидеров.
На тот момент команда в проекте состояла из 5 человек, но стабильно и производительно считал только один - citerra. Разрыв от "PolarSeti"составлял 116000 кредитов. По предварительным оценкам для достижения поставленной цели необходимо было привлечь в команду в этом проекте не менее 10 активных участников и считать в среднем по 1160 кредитов в день на участника. Задача - почти невыполнимая. Посмотрите на начальный расклад:

Опустим некоторые тонкости подготовительного периода, хотя подготовка заняла не меньше недели (тут и досчитывание старых заданий и уведомление членов команды о предстоящем рывке, и приглашения присоединиться к этому проекту и пр.). Следует заметить, что реально операция началась на несколько дней раньше объявленного срока, т.к. по мере приостановки проектов и перевода машин на единственный проект производительность стала несколько расти. И уже 23-го BoincStats-овский Over take сменился с 365+ на 272 дня, а к 25-му "дорос" до 192-х.
25-го марта о начале операции было объявлено официально на форуме команды и гонка началась. Конечно, не все успели к этому сроку разогнаться на полную мощность, но силы уже прибывали - подключались новые участники. Команда в проекте росла.
Сам ход процесса, мнения и прогнозы достаточно широко освещены в профильной ветке форума, поэтому повторяться не будем.
Однако хотелось бы привести несколько графиков, которые наглядно показывают ход этой борьбы:

Как видно, с началом активной фазы "операции" дневная выработка возросла почти в 2,5 раза, постепенно росла и достигла своего пика к моменту объявления конца акции. Причем пик держался несколько дней, в результате чего к 14 апреля отрыв, практически, сравнялся с дневной выработкой, так что в ближайший день можно ожидать обгона.
А вот так обе команды считали в этот период:

В общем, этот график только подтверждает предыдущий. А вот так выглядела турнирная таблица 11 апреля 2006 года.

Вот, вкратце, так проходили две "распределенно-вычислительные операции" под кодовыми названиями "Rosetta" и "Predictor», надеюсь, что не последние.

Операция "Spinhenge" - "Страх и Трепет"
В общем-то, наши ожидания оправдались. Третья операция не заставила себя долго ждать. Однако, она принципиально отличалась от двух предыдущих. Если прежде ставились узкокомандные цели, то на этот раз возникла грандиозная идея - объединить на одном направлении не только силы участников одной команды, но и силы нескольких российских команд. А цель этой акции - резко улучшить рейтинг России в мировой "табеле о рангах" и продемонстрировать единство российских распределенщиков перед всей мировой общественностью.
Надо сказать, что обсуждение и подготовка проходили очень непросто. Прежде всего, непросто было выбрать проект, в котором можно нанести подобный "удар". Предложения были различные, но основными кандидатами стали Rosetta и Spinhenge.
В подготовку входил и анализ мнения участников других команд. С этой целью на форумах наиболее крупных и активных команд были размещены объявления с предложением о проведении совместной активной акции. Реакция была совершенно различная, порой даже шокирующая:
- полное молчание и отсутствие какой-либо реакции на distributed.ru (хотя по поводу отсутствия реакции, могу и ошибаться, так как пытался сейчас найти то объявления, но оно мне на глаза что-то не попалось. Наверное я плохо искал);
- полная поддержка на polarseti.net;
- крайне активная дискуссия на overclockers.ru, проходившая на грани ссоры и обвинений в попытках раскола команды.
Вообще-то основная надежда по "удару" в проекте Rosetta была связана именно с командой TCS! Russia. Проект стал в команде довольно популярным, фактически вторым официально поддерживаемым, в проект переведено достаточное количество мощностей. Поэтому была большая уверенность, что идея "силовой акции" в этом проекте будет воспринята достаточно положительно, возможно добавятся временно дополнительные мощности, и остальные команды внесут свою существенную лепту. Могла бы получиться очень сильная атака. Но мы просчитались. Абсолютное большинство не поддержало идею. Вспомнить как это обсуждалось можно на нашем форуме. Поэтому организаторам ничего другого не оставалось, как переориентироваться на запасной проект - Spinhenge@home.
Здесь были свои сомнения. Было заранее решено объявить о своих намерениях на форуме проекта. Поэтому крайне необходимо было трезво оценить свои возможности, чтобы потом "не было мучительно больно ...", а точнее - стыдно, за срыв собственных установок. Россия находилась на 9 месте. Прикидки показывали, что, объединив все усилия вполне реально рассчитывать вывести страну на 6, а возможно и на 5 место. Но здесь были большие сомнения, так как Норвегия считала гораздо сильнее нас. Однако более детальный анализ показал, что все соперники идут практически на пределе своих возможностей и не смогут существенно увеличить мощность. Поэтому было решено заявить свои претензии на 5 место мирового рейтинга. Что и было сделано - 20 октября 2006 года Fetisoff объявил о начале операции "Страх и трепет".
Сам ход операции здесь комментировать нет смысла, так как все

[SETI_home_v8]

Predictor-25mar2006g.PNG

[Lexx77]

SETI_home_v8
Ты сам это прочитал полностью?

[SETI_home_v8]

Цитата (Lexx77) »

SETI_home_v8
Ты сам это прочитал полностью?

да, а что люди уже читать разучились?

[Полковник Исаев]

SETI_home_v8
Нет, просто километровые портянки никому не интересны - это пустая писанина вникуда, вся суть которой сводится к зазыванию на бесплатное участие в проектах, на которых зарабатываются реальные деньги, а участники получают картиночки в статусы - циферки, грибочки, зверушки и прочую ерунду.

[SETI_home_v8]

Цитата (Полковник Исаев) »

SETI_home_v8
Нет, просто километровые портянки никому не интересны - это пустая писанина вникуда, вся суть которой сводится к зазыванию на бесплатное участие в проектах, на которых зарабатываются реальные деньги, а участники получают картиночки в статусы - циферки, грибочки, зверушки и прочую ерунду.

Это волонтерское движение, никто никуда никого насильно не тянет, мне вот например было просто интересно почитать о космосе, чем занимается тот же проект энштейн, сети, космолоджи и так далее

Добавлено через 2 минуты

Цитата (SETI_home_v8) »

Это волонтерское движение, никто никуда никого насильно не тянет, мне вот например было просто интересно почитать о космосе, чем занимается тот же проект энштейн, сети, космолоджи и так далее

Да нас таких интересующихся мало, но пусть будут...
Как говорится пусть расцветут тысячи цветов. сказал кто то из китайцев...

[Полковник Исаев]

SETI_home_v8
Насильно конечно никто не тянет, это всё дело добровольное, просто есть нюанс, что компании, проводящие все эти исследования, финансируются государствами и частными компаниями +/либо продают результаты исследований, но дополнительно бесплатно привлекают множество простых людей красивыми сказками и картиночками в статусы, хотя у них есть деньги, чтоб оплачивать участие добровольцев и они зарабатывают на этих исследованиях, но предпочитают получать сверхприбыли и засирать мозги добровольцам.
Могли бы и иначе расплачиваться, например, все участники медицинских исследований могли бы получить медицинские услуги равнозначные своему вкладу в исследования, но нафиг это надо, если можно рассказывать сказки и зарабатывать на бесплатных вычислительных ресурсах, тем более, что нельзя точно знать, что там комп обсчитывает в данный момент.
Отсюда вытекает, что я могу распиарить свой проект медицинских исследований и продавать результаты исследований другим компаниям, тупо зарабатывая на чужом труде, а если обнаглеть вконец - помимо самого исследования половину времени майнить что-нибудь.
Именно это меня больше всего напрягает во всех этих "соревнованиях" и "исследованиях" - что на мне будет кто-то зарабатывать и делиться только картиночками в статус.
Совсем другое дело, когда есть конкретная цель и люди присоединяются, потому что что результат им выгоден - это когда ломали ключи RSA-512 и прочие -)

[SETI_home_v8]

Использование BOINC в CERN
BOINC (Berkeley Open Infrastructure for Network Computing) [1] это программная платформа для распределенных вычислений с открытым исходным кодом, которая использует добровольно предлагаемые вычислительные ресурсы. Она использует неактивные циклы центрального процессора, участвующих ПК, для выполнения научных расчетов.

Компоненты

BOINC представляет собой специализированную вычислительную сеть (Grid), которая подходит для выполнения прикладных программ, являющихся "псевдо параллельными", таким образом, что вычисления распределяются среди тысяч машин, которые не общаются друг с другом. Такая конфигурация идеальна для вычисления емких задач с небольшими требованиями к операциям ввода/вывода. Однако,конфигурация BOINC достаточно проста и требует только одного сервера, хотя вычисления могут быть распределены на несколько машин для повышения производительности.
Приложения, которые выполняются в BOINC-проектах, должны иметь общественную привлекательность, чтобы участники хотели предлагать свои ресурсы. Важная часть этого вида проектов - дать обществу ощущение прямого участия в научных проектах. Часто разрабатываются привлекательные скринсейверы, а также система ранжирования на основе полученных кредитов (очков - Прим. перев.) для пользователей.
Сайт проекта LHC@home
Успешные проекты
Первым проектом, выполняющемся на BOINC был известныйSETI@home, анализирующий данные, полученные от радиотелескопов, которые ищут внеземные сигналы. Проект произвел более 9 миллионов лет объединенных процессорных вычислений и задействовал более 5 миллионов, предоставленных добровольцами ЦПУ. Теперь BOINC используется во многих проектах в таких областях как физика, медицина и предсказания климата.
Одним их ведущих BOINC-проектов является LHC@home в CERN's (Европейском Центре Ядерных Исследований - Прим. перев.) [2,3]. Его первым приложением было SixTrack, которое моделирует частицы, циркулирующие в ускорителе Large Hadron Collider (LHC) для изучения долговременной стабильности орбит частиц. Другие приложения, представляющие интерес для физики высоких энергий также готовы. В настоящее время в проекте занято примерно14 000 активных участников, 25 000 активных хостов, которые могут обеспечить вычислительную производительность более 5 Tflops. Это соответствует 700 годампроцессорного времени за несколько месяцев вычислений, для типичного 1 KSfp2K процессора, который эквивалентен процессору 2.8 GHz Intel Xeon. Конечно эта мощность не является абсолютно бесплатной, но соотношение цена/производительность очень высоко, и это без учета других положительных моментов. LHC@home имеет потенциал для развития, если будет достаточно работы по использованию предлагаемой вычислительной мощности.
История
В этом контексте было проведено изучение возможности объединения общественных ресурсов и распределенных (Grid) вычислений [4]. Возможность распределения заданий между сетевыми общественными ресурсами было проверено и отработано для программных средств LHC Computing Grid (LCG)[5] и NorduGrid/ARC [6].
Среда CoLinux, позволяющая Linux выполняться как расширение ядра Windows также была проверена на возможность интеграции с BOINC, позволяя переносить задания на соответствующую операционную систему.
SixTrack вывод
Ферма из ста старых ПК в Вычислительном Центре, которые должны были быть списаны, были настроены для выполнения BOINC-клиента. Мы управляем этими машинами, используя Quattor с BOINC-клиентом RPM (Redhat Package Manager) который мы усовершенствовали. Кроме вклада в проект LHC@home, эти ПК позволяют исследовать механизмы метапланирования, которые позволят осуществить работу приложения с ресурсами добровольцев, дополненные специальными ограничениями, чтобы гарантировать качество обслуживания.
BOINC-сервер RPM был создан, чтобы автоматизировать инсталляцию и управление BOINC серверами. Мы протестировали его, нашли и исправили несколько ошибок. RPM и исправленные ошибки были использованы для доработки BOINC-проекта.
Перенесение других приложений.
Также мы исследуем другие приложения, которые могут подойти для BOINC, мы выпустили тестовую версию приложения Geant4 [7] для BOINC. Это приложение является упрощенной версией контроля луча и используется для проверки новых версий Geant4. Перенос был сделан для Linux и Windows в сотрудничестве с разработчиками Geant4. Приложение Geant4 было представлено на симпозиуме CHEP 2005 и 2006. Следующим шагом необходимо рассматривать более реалистичные и полезные модели Geant4, и мы уже делаем шаги для достижения этой цели.
Мы также успешно перенесли приложение ATLFAST 0.02.22 [8] на BOINC и продемонстрировали его работу для реальных физических процессов. Это FORTRAN-версия программы быстрого моделирования и реконструкции ATLAS, которая используется случайным генератором PYTHIA 6.2 [9].
Программа Garfield/Magboltz [10] для моделирования газообразных датчиков была доработана для BOINC в координации с автором программного обеспечения. Мы демонстрировали реальное использование на Linux на перенастроенных на BOINC PC-фермы в Вычислительном Центре. Хотя нам еще необходимо портировать приложение под Windows, мы ожидаем в ближайшем будущем получить запросы от экспериментаторов LHCдля массового промышленного применения.
Были проведены предварительные консультации во Франции и Японии относительно будущего проекта под названием Feynman@home [11]. Несколько групп планируют моделировать квантовые процессы, происходящие в LHC (и будущих ускорителях, типаInternational Linear Collider - Международного Линейного Коллайдера), вычисляя их диаграммы Феймана (Feynman diagrams) с использованием BOINC. Это вычислительно емкая задача, которая тесно связана со случайной генерацией.
Мы также помогли запуску проекта Africa@home для Швейцарского Тропического Института,Университета в Женеве и двух неправительственных организаций. Проект проходит тестирование и выполняет эпидемиологические расчеты на основе модели малярии.
Мы также сотрудничаем с областью Экстремадура (Extremadura) в Испании. Местные власти собираются устанавливать клиентов BOINC в тысячи машин, в основном в школах и больницах, и выполнять вычисления для нужд ЦЕРНа (CERN). Они также пошлют представителей в ЦЕРН для работы по переносу приложений на инфраструктуру BOINC. Для ускорения старта проекта был проведен семинар в CIEMAT, Исследовательском Центре Энергии, Окружающей среды и Технологии (Research Centre for Energy, Environment and Technology) в Мадриде, который посетили представители региона. Несколько усеченная версия семинара прошла в виде вычислительного семинара в ЦЕРНе. Слайды об этих событиях включены в LHC@home Twiki, где документируется всю работу ЦЕРН, связанную сBOINC-деятельностью[12].
Мы сотрудничаем с группой IS, чтобы развернуть BOINC-клиентов на настольных Windows-компьютерах ЦЕРНа с использованием NICE механизмов. Мы планируем эффективное развертывание, которое начнется на добровольной основе в отделе IT. В ближайшие месяцы мы обратимся с просьбой о сотрудничестве ко всем пользователям настольных ПК в ЦЕРНе.
w w. boinc . ru/Doc/LHC/athome/LHC/lhc.htm
w w. boinc . ru/Doc/LHC/athome/default.htm

[Nether15Lands]

Единственное что opencl тормозит компьютер, некоторые задания так сильно тормозят что не реагирует интерфейс виндовс, пришлось выбрать cuda и самые простенькие opencl, с ними подтормаживает но терпимо. Проблема по всей видимости очень редкая, в интернете на рускоязычном нашёл всего одно упоминание о тормозах на opencl, зато о тормозах на openGL целая куча постов. На процессоре принципиально не считаю, сильно разогнан, уже старенький, боюсь чтоб не сгорел. Да и с процессором электроэнергии набегает много, неприлично много, видюха то топовая, только древняя.

[SETI_home_v8]

Цитата (Nether15Lands) »

Единственное что opencl тормозит компьютер, некоторые задания так сильно тормозят что не реагирует интерфейс виндовс, пришлось выбрать cuda и самые простенькие opencl, с ними подтормаживает но терпимо. Проблема по всей видимости очень редкая, в интернете на рускоязычном нашёл всего одно упоминание о тормозах на opencl, зато о тормозах на openGL целая куча постов. На процессоре принципиально не считаю, сильно разогнан, уже старенький, боюсь чтоб не сгорел. Да и с процессором электроэнергии набегает много, неприлично много, видюха то топовая, только древняя.

opencl тормозит комп если только ему не хватает видео памяти или оперативной. А так ничего нормально работает ...

А вот у меня наоборот видюха жрет электроэнергию как не в себя, поэтому я ее не использую, а только процессор.

Ну и главное это реклама этих вычислений и привлечение людей...

[Nether15Lands]

Цитата (SETI_home_v8) »

opencl тормозит комп если только ему не хватает видео памяти или оперативной. А так ничего нормально работает ...

А вот у меня наоборот видюха жрет электроэнергию как не в себя, поэтому я ее не использую, а только процессор.

Ну и главное это реклама этих вычислений и привлечение людей...

16gb оперативы и гиг видео, хватает там всего, я ж говорю проблема еденичная, думаю связана с варпами в видеочипе, самый прикол что стало в несколько раз сильнее тормозить когда удвоил оперативку, может с ресурсами материнки что или с адресами памяти, в общем в инете нет инфы. У меня кстати тоже видюха жрёт как не в себе, но с процессором может выйти ещё больше на 2-3 холодильника я уж незнаю, прикидывал что не должно так мотать, даже если взять за основу 250 ват круглосуточно, это 6 в сутки, 180 в месяц, так как стоят светодиодные лампы и режим экономии во всём доме, ну не должно так мотать в общем, у меня только одна мысль, что блок питания с активным коректором неисправно работает, фильтрует импульсы из общей сети не те что нужно , и свои и чужие, а счетчик и рад подсчитывать эти импульсы

[garniv]

Цитата (Nether15Lands) »

с варпами в видеочипе

С чем с чем?..
https://ru.wikipedia.org/wiki/%D0%92%D0%B0%D1%80%D0%BF

[SETI_home_v8]

Acoustic@Home challenge,
посвященный тестированию нового семейства оптимизированных счетных приложений Opti v1.0
завершился.

Американцам из SETI.USA почет и уважуха, огромные счетные скорости, 1-е место!

Шотландская The Scottish Boinc Team, похоже, собрала всех остальных англоязычных энтузиастов кранчинга, 2-е место!

На 3-м месте мы, Russia Team. Ну как, "мы"? Ваш покорный слуга из TSC!Russia, но там так никто и не заинтересовался ни забегом, ни новым оптимизированным приложением (причина, в принципе, ясна). Считал за команду, которая одной из первых присоединилась к забегу, о ней речь ниже.

Затем идут, кто бы подумал, украинцы! Ukraine и 4-е место! Это я назвал бы главным сюрпризом забега. Что ж, молодцы.

Crystal Dream взяла всего лишь 5-е место. Тут хотелось бы отметить само участие, чуть ли не первая она подключилась к соревнованию. За нее я и считал. Моё мнение, надо объединяться с более весомой командой Russia Team, так спортивная составляющая, которая собственно и мотивировала меня считать Acoustics, станет более очевидной.

После Top-5 идут L'Alliance Francophone, , SETI.Germany и BOINC@Poland соответственно на 6-м, 7-м, 8-м, 9-м и 10-м местах. В случае с BOINC@AUSTRALIA, пожалуй, заберу свои слова про то, что англоязычные участники заканчиваются после The Scottish Boinc Team, в целом, в забеге принял участие очень пестрый и разнообразный состав. Последнее, надеюсь радует вас также, как и меня!smile

[SETI_home_v8]

Искусственный интеллект помогает находить таинственные быстрые радиовсплески

Искусственный интеллект проникает во многие научные сферы, включая астрономию и поиски разумной жизни во Вселенной, известные как SETI.

В новом исследовании ученые проекта Breakthrough Listen, проекта SETI, возглавляемого Калифорнийским университетом в Беркли, США, использовали алгоритмы машинного обучения, чтобы открыть с их помощью 72 новых быстрых радиовсплеска, идущих со стороны таинственного источника, расположенного на расстоянии примерно 3 миллиарда световых лет от Земли.

Быстрые радиовсплески являются мощными импульсами радиоизлучения продолжительностью всего лишь несколько миллисекунд, которые, предположительно, происходят из далеких галактик. Источники этого излучения, однако, до сих пор остаются неизвестными ученым. Предлагаемые объяснения этих таинственных вспышек в радиодиапазоне разнятся от нейтронных звезд с мощным магнитным полем, атакуемых джетами близлежащих черных дыр, вплоть до версий, включающих представление о технически развитых иных цивилизациях, посылающих нам свои сигналы.

В новой работе команда под руководством студента докторантуры Калифорнийского университета в Беркли Джерри Чжана (Gerry Zhang) успешно разработала новый, мощный алгоритм машинного обучения и применила его для изучения события FRB 121102, уникального события множественных, повторяющихся радиовсплесков, зарегистрированного в 2012 г. при помощи телескопа Грин-Бэнк, расположенного на территории штата Западная Вирджиния, США. Использование этого нового алгоритма позволило команде обнаружить дополнительно 72 быстрых радиовсплеска, которые не были обнаружены ранее. В результате общее число обнаруженных быстрых радиовсплесков события FRB 121102 теперь составляет 300 вспышек.

Эти результаты также помогли команде Чжана наложить новые ограничения на периодичность быстрых радиовсплесков – в работе показано, что периодичность в поступлении импульсов отсутствует, по крайней мере для периодов более 10 миллисекунд.

Исследование принято к публикации в журнале Astrophysical Journal.

https://www.astronews.ru...ge=news&news=1121...

Добавлено через 8 минут

История распределённых вычислений.
По самым смелым оценкам, начало распределенным вычислениям было положено два столетия назад. Безусловно, ни о каких компьютерах тогда не могло быть и речи, но это было время, когда перед учеными уже ставили задачи крупномасштабных вычислений. И эти задачи нужно было решать. Догадываетесь каким образом? Вот именно! Применяя принцип распределенных вычислений.

В конце 18-го века правительство Франции решило существенно улучшить логарифмические и тригонометрические таблицы. Работа была связана с огромными по тем временам объемами расчетов, а потому ее поручили профессионалу, барону Гаспару де Прони, состоявшему главным вычислителем при французском правительстве в 1790-1800 гг. В результате появилась знаменитая "вычислительная мануфактура" барона де Прони.

Барон смело взял на вооружение идею о разделении труда и перенес ее принципы на вычислительный процесс. Исполнители проекта были распределены на три уровня. Низший уровень в системе занимали обыкновенные люди-вычислители ("компьютеры" , от которых требовалось только производить аккуратные арифметические действия. На втором уровне стояли образованные технологи ("серверы" проекта), которые организовывали рутинный процесс, распределяя задания и обрабатывая полученные вычислителями данные. Высшую ступень занимали выдающиеся французские математики ("администраторы-программисты" проекта), среди которых были Адриен Лежандр и Лазар Карно. Они готовили математическое обеспечение - по существу писали "программы". В результате барону де Прони удалось организовать процесс таким образом, чтобы свести очень сложные задачи к набору рутинных операций, благодаря четкой системе контроля и хорошо отлаженной системе распределения работы между вычислителями.

Идеи де Прони подтолкнули Чарльза Бэббиджа к созданию первой в истории вычислительной машины, а основанные на прототипе барона "вычислительные мануфактуры" использовались в исследовательских проектах вплоть до середины 20 века, с их помощью, в частности, рассчитывались первые ядерные бомбы в США, Великобритании и Советском Союзе.

Впервые задача совместного использования свободных вычислительных ресурсов компьютеров была оригинальным образом решена вначале 1970-х гг. учеными из исследовательского центра PARC (Xerox, Palo Alto), занимавшихся разработкой программ для первых компьютерных сетей. В 1973 г. Джон Шох и Жон Хапп написали простую программу, которая запускалась по ночам в локальную сеть PARC, расползалась по работающим компьютерам и заставляла их выполнять вычисления.

Следующий качественный скачок в техническом решении задачи совместной работы многих компьютеров над единой сложной задачей произошел к концу 1980-х гг., когда появились персональные компьютеры и электронная почта. В 1988 г. Арьен Ленстра и Марк Менес, работавшие на компанию DEC (Palo Alto), написали программу для факторизации (разбиения на множители) длинных чисел. Для скорейшего завершения поставленной задачи программа могла запускаться на нескольких не связанных друг с другом машинах, каждая из которых обрабатывала свой небольшой фрагмент числа. Новые блоки заданий рассылались на компьютеры участников (также как посчитанные результаты принимались) с помощью центрального сервера проекта по обычной электронной почте. Для успешного разложения на множители числа длиной в сто знаков этому сообществу потребовалось два года и несколько сотен персональных компьютеров.

Таким образом, именно проект Ленстра-Менеса продемонстрировал не только принципиальную возможность распределенной вычислительной сети, но и высокую эффективность в выполнении поставленных перед таким проектом задач. По сути, именно отсюда нужно начинать историю публичных Internet-проектов распределенных вычислений (Distributed Computing).

В случае же с более ранним "червем" из исследовательского центра PARC, это было скорее начало другого направления распределенных вычислений, кластерного, позже названного Grid Computing (параллельные вычисления или "решетки" вычислительных ресурсов). Ведь в лаборатории PARC машины были связаны первой Ethernet-сетью и постоянно обменивались данными на большой скорости, синхронизируя свою работу над отдельными фрагментами задания.

Позже, в 1994 г., появилось первое техническое воплощение технологии Grid Computing - виртуальный кластер "Беовульф", организованный Дональдом Бекером и Томасом Стерлингом на основе 16 обычных компьютеров 486DX4, объединенных в единую 10Мбитную сеть с постоянным обменом информации между процессорами. Результат превзошел все ожидания. Фактически была доказана возможность построения сетей любой необходимой вычислительной мощности на базе обычных машин без использования дорогих суперкомпьютеров.

Теперь необходимо дать отличительные признаки двух направлений распределенных вычислений. Понятия Distributed Computing и Grid Computing зачастую смешивают, но это неправильно.

Задачи, которые реализуются с помощью Grid Computing, требуют активного межмашинного взаимодействия и синхронизации, реализуемого с помощью специальных библиотек MPІ, PVM, BSPlіb и др. Эти библиотеки обычно применимы только в кластерных системах, поскольку требуют высокой скорости сетевых взаимодействий и, соответственно, большого объема непрерывного сетевого трафика. Тот факт, что сетевые взаимодействия осуществляются между всеми машинами, задействованными в вычислениях, также означает запрет на использование межсетевых экранов или других средств ограничения сетевых потоков. Также это обычно означает, что абсолютно все машины должны быть доступны с начала до конца решения задачи. Поэтому, реализованная на таких принципах вычислительная сеть возможна чаще всего в пределах некоторой замкнутой организации. В силу этих ограничений, задачи, которые требуют использования этих библиотек, обычно не подходят для крупномасштабных распределенных проектов.

Вычислительные задачи, которые не требуют никакой координации или синхронизации между машинами, и не нуждаются в дополнительном управлении в процессе работы, обычно решаются с помощью технологии Distributed Computing. Этот тип задач очень подходит для больших Internet-проектов распределенных вычислений, реализуемых посредством связки "сервер - компьютер участника", поскольку отдельные фрагменты задачи могут выполняться в любом порядке, и могут быть перераспределены по другим машинам, если какой-нибудь из результатов не удалось получить с первого раза. Отсюда, кстати, проистекает необходимость избыточности вычислений, когда один и тот же блок задания рассылается нескольким участникам. Это необходимо, чтобы гарантировать получение результатов вычисления отдельного блока, что не всегда возможно, учитывая пестроту участников и установленного на их компьютерах программного обеспечения.

Конечно, технология Distributed Computing накладывает серьезные ограничения на спектр решаемых с ее помощью задач, но также очевидны и преимущества. Некоторым исследовательским организациям, особенно некоммерческим, зачастую недостаточно финансирования для приобретения или аренды специальных ресурсов - тех же суперкомпьютеров или кластерных вычислительных сетей. К тому же суперкомпьютеры и кластеры требуют постоянного обслуживания, модернизации и обучения ответственного персонала. Распределенные вычисления посредством армии пользователей Internet лишены этих недостатков и зачастую подключенные к проекту вычислительные мощности сопоставимы и даже превосходят мощности современных суперкомпьютеров.

Высказываются оптимистические прогнозы, что в скором времени в строй войдет новая архитектура Distributed Computing, которая позволит компьютерам-участникам обмениваться данными непосредственно между собой, несмотря на сложности и эпизодичность подключения к сети Internet. Более того, проводятся активные исследования возможности использования в вычислениях графических процессоров (GPU) видеокарт. О планах по запуску клиента для GPU уже объявлено руководством проекта Folding@Home уже запущено в 2007 году. Это позволит не только расширить область применения публичных распределенных вычислений, но и значительно увеличит емкость ее вычислительного потенциала.

Но вернемся к истории Distributed Computing - времени выхода распределенных вычислений на широкую арену.

После успешного окончания проекта Ленстра-Менеса в ходу были проекты различных математических исследований. В 1993 г. участники одного из таких проектов факторизовали число длиной 129, потом 130 знаков. Затем пошла мода на поиск простых чисел (т.е. делящихся только на единицу и на самих себя), новых чисел Серпинского, Мерсенна и пр. в том же духе. Эти проекты не отличались ни технической проработанностью, ни размахом, ни большим количеством участников. Но так продолжалось не долго.

28 января 1997 г. стартовал конкурс RSA Data Security на решение задачи взлома 56-битного ключа RC5-32/12/7 методом простого перебора. Благодаря хорошей технической и организационной подготовке проект быстро получил невиданную до этого известность, привлек внимание мировой общественности к распределенным вычислениям и заложил основы последующих проектов Distributed Computing. Этот и последовавшие за ним проекты и конкурсы подобного рода (RC5-64, RC5-72, OGR и др.) организованы при активном участии Джеффа Лоусона и основанного им некоммерческого объединения distributed.net, которому удалось разработать наиболее совершенное программное обеспечение под математические задачи, решаемые с помощью Distributed Computing. В проектах distributed.net RC5-72 и OGR участвуют сильные украинские команды.

13 мая 1999 г. Дэвид Гиди и Крэйг Кэснов запустили проект поиска сигналов внеземных цивилизаций SETI@Home (SETI - Search for Extraterrestrial Intelligence), который стал наиболее массовым проектом распределенных вычислений всех времен. Огромной популярности (более 5 млн. участников) способствовало то, что проект впервые переложил на рельсы Distributed Computing интригующую научную задачу далекую от скучной факторизации или взлома очередного ключа. Оглушительный успех проекта (в плане привлеченных вычислительных мощностей) убедил ученых активнее использовать незадействованный потенциал компьютеров рядовых пользователей всемирной паутины во многих областях научных исследований.

1 октября 2000 г. под руководством Виждая Панде, основателя академического учреждения Pande Group при Стенфордском университете, стартовал проект Folding@Home. Благодаря четким практическим целям, хорошему научному основанию и реальным результатам проект получил массовую поддержку (более полумиллиона участников за все время работы проекта) и серьезные вычислительные ресурсы (более 200 тысяч процессоров, постоянно или временно подключенные сейчас к проекту).

Наконец, в 2004 году командой во главе с Дэвидом Андерсоном, возглавляющим также SETI@home, из Space Sciences Laboratory Калифорнийского университета в Беркли был разработан BOINC ( Berkeley Open Infrastructure for Network Computing — открытая программная платформа (университета) Беркли для распределённых вычислений) — некоммерческое межплатформенное программное обеспечение для организации распределённых вычислений. Первоначально BOINC разрабатывался для крупнейшего проекта распределённых вычислений — SETI@home, но впоследствии разработчики сделали платформу доступной для сторонних проектов. На сегодняшний день BOINC является универсальной платформой для проектов в области математики, молекулярной биологии, медицины, астрономии, физики, химии, климатологии и искусственного интеллекта.

BOINC даёт исследователям возможность задействовать огромные вычислительные мощности персональных компьютеров со всего мира. На 7 апреля 2008 BOINC являл собой распределённую сеть из более чем 565000 активных компьютеров со средней производительностью, равной 1 PFLOPS (1 квадриллион операций с плавающей запятой в секунду). Платформа работает на различных операционных системах, включая Microsoft Windows и варианты юниксоподобных GNU/Linux, FreeBSD, NetBSD, OpenBSD, Solaris и Mac OS X.

Сейчас ведутся успешные работы по использованию в вычислениях графических процессоров (GPU) видеокарт, обладающих гораздо большей вычислительной мощностью, чем центральный процессор компьютера. Это позволит не только расширить область применения публичных распределенных вычислений, но и значительно увеличит емкость ее вычислительного потенциала.

P. S. По крайней мере этот текст примерный и если найдете какие-нибудь ошибки, то пишите исправлю. По крайней мере из нескольких мной вариантов истории развития РВ эта более приемлемая. Ну и малость под редактирована в плане того, что убрал вроде всё о командах. По крайней мере выношу данную историю на форум для того, чтобы она была вами всеми рассмотрена и по возможности, что-нибудь добавить, убрать и под редактировать.

[SETI_home_v8]

Cистемного администратора Брэда Неслучовски (Brad Niesluchowski) одного из школьных округов в Аризоне уволили за слишком излишнее рвение в поиске внеземных цивилизаций.

Как следует из материалов уголовного дела, Неслучовски украл 18 компьютеров и установил их у себя дома, используя вычислительный кластер для программы SETI@Home, а также, скорее всего, для аналогичной системы распределённых научных вычислений BOINC. Кроме того, он установил программу SETI@Home на всех школьных компьютерах.

В результате админу вменяют ущерб в размере от $1,2 млн до $1,6 млн. Это расход электричества за десять лет, амортизация процессоров и прочие издержки.

Расследование выявило, что Неслучовски зарегистрировался в проекте SETI@Home в феврале 2000 года, через месяц после приёма на работу в школьный округ, и с того времени стал безусловным лидером проекта SETI@Home по количеству обработанной информации (см. статистику SETI@Home по нику NEZ): 579 млн «кредитов», что эквивалентно примерно 10,2 млн часов машинного времени.

Хотя усилия Неслучовски были направлены на благо всего человечества, но с работы его уволили. В ходе расследования также выяснилось, что он не установил в школьной сети защитный файрвол и не занимался обучением технического персонала. Относительно суммы финансового ущерба ещё будут разбираться. Суд над Брэдом Неслучовски состоится в ближайшее время.

[SeHi]

Цитата (SETI_home_v8) »

Хотя усилия Неслучовски были направлены на благо всего человечества, но с работы его уволили.

Воровать во благо человечества. Очень смешно, и главное, очень умно.

Добавлено через 52 секунды

Цитата (SETI_home_v8) »

Может кто поможет вспомнить?

Может, quazatron?

[SETI_home_v8]

Цитата (SeHi) »

Воровать во благо человечества. Очень смешно, и главное, очень умно.

Добавлено через 52 секунды


Может, quazatron?

Мне кажется он не очень умно поступил, тем что жарил наверное на всю катушку, а если бы ограничился одним ядром с каждого пк, то то сих пор никто бы не заметил...
Цель же состоит не в том что бы упарываться и жечь энергию на сколько возможно, а типа хобби, комп считает че то там на одном ядре и тебе не затратно и помощь какая никакая идет.


НЕТ это не та игра, но похоже, и графика была лучше.

[garniv]

Цитата (SETI_home_v8) »

тем что жарил наверное на всю катушку, а если бы ограничился одним ядром с каждого пк, то то сих пор никто бы не заметил...

эээ?

Цитата (SETI_home_v8) »

Как следует из материалов уголовного дела, Неслучовски украл 18 компьютеров и установил их у себя дома