The OpenNET Project / Index page

[ новости /+++ | форум | wiki | теги | ]

Вышел PelicanHPC 2.2, Linux дистрибутив для развертывания кластеров

11.09.2010 15:03

Вышел PelicanHPC 2.2, Linux дистрибутив для быстрого развертывания кластеров. PelicanHPC построен на пакетной базе Debian testing и позволяет превратить обычный офисный компьютерный парк в вычислительный кластер, загрузив один управляющий компьютер с LiveCD/LiveUSB, а остальные машины использовав в качестве загружаемых через PXE узлов. Графический интерфейс управляющей станции построен на основе Xfce4. Размер установочного iso-образа 697 Мб.

В состав входят такие кластерные приложения, как пакет Open MPI, х MPI-биндинги для GNU Octave, интерфейс мониторинга работы кластера Ganglia, набор для тестирования производительности кластеров Linpack. Из новшеств отмечается реализация упрощенного способа сохранения конфигурации загружаемых по сети узлов, что позволяет организовать полноценное централизованное удаленное управление кластером, используя дистрибутив для обеспечения функционирования постоянно работающих кластеров, а не только для проведения одноразовых экспериментов.

  1. Главная ссылка к новости (http://pareto.uab.es/mcreel/Pe...)
Лицензия: CC-BY
Тип: Программы
Короткая ссылка: https://opennet.ru/27930-cluster
Ключевые слова: cluster, debian, PelicanHPC
При перепечатке указание ссылки на opennet.ru обязательно
Обсуждение (21) Ajax | 1 уровень | Линейный | +/- | Раскрыть всё | RSS
  • 1.1, pavlinux (ok), 15:22, 11/09/2010 [ответить] [﹢﹢﹢] [ · · · ]  
  • +1 +/
    Вечером, уходя домой, грузим дистр,.... ждем коннекта.
    Естественно предварительно все офисные компы по крону или как там в венде,
    вырубаются в 23:59, а по таймеру из БИОС врубаются в 00:30,
    по дефолту стоит загрузка по PXE.

    Осталось придумать, нафига?! :)

     
     
  • 2.2, twilight (ok), 16:06, 11/09/2010 [^] [^^] [^^^] [ответить]  
  • +/
    Как это нафига?
    Набирать очки в обсчете задач на нужды ФБ^W^W^W фолдинга белков!
    Один правда добаловался таким образом - уволили нафиг :)

     
     
  • 3.4, pavlinux (ok), 17:47, 11/09/2010 [^] [^^] [^^^] [ответить]  
  • +/
    >Как это нафига?
    >Набирать очки в обсчете задач на нужды ФБ^W^W^W фолдинга белков!
    >Один правда добаловался таким образом - уволили нафиг :)

    Жертва науки!

     
  • 2.3, JL2001 (ok), 16:19, 11/09/2010 [^] [^^] [^^^] [ответить]  
  • +1 +/
    >Вечером, уходя домой, грузим дистр,.... ждем коннекта.
    >Естественно предварительно все офисные компы по крону или как там в венде,
    >
    >вырубаются в 23:59, а по таймеру из БИОС врубаются в 00:30,
    >по дефолту стоит загрузка по PXE.
    >
    >Осталось придумать, нафига?! :)

    гораздо удобнее было бы чтоб обычный десктопный дистриб был одновременно кластерной нодой, одновременно работая и рабочим местом и нодой распределённого надёжного хранения данных и вычислительной нодой
    а зачем - ддосить конкурентов и ломать пароли на архивах спёртых у конкурентов

     
     
  • 3.5, pavlinux (ok), 17:50, 11/09/2010 [^] [^^] [^^^] [ответить]  
  • +/
    >>Осталось придумать, нафига?! :)
    > гораздо удобнее было бы чтоб обычный десктопный дистриб был
    > одновременно кластерной нодой,
    > одновременно работая и рабочим местом и
    > нодой распределённого надёжного хранения данных и
    > вычислительной нодой

    Панимаишь ли,... Кластер эта такая хрень, в который возможно возможны возможные возможности. =)

    В общем,  man кластер

     
     
  • 4.7, JL2001 (ok), 19:25, 11/09/2010 [^] [^^] [^^^] [ответить]  
  • +/
    >man кластер

    хочется apt-get install кластер-вычислительная-нода кластер-распределённое-хранилище-нода
    зы: чисто из-за того что периодически вижу как строят почти один в один велосипедный миникластер - хочется чтоб это было в мейнстриме

     
     
  • 5.9, pavlinux (ok), 22:18, 11/09/2010 [^] [^^] [^^^] [ответить]  
  • +1 +/
    >>man кластер
    >хочется apt-get install кластер-вычислительная-нода кластер-распределённое-хранилище-нода

    apt-get install ocfs2-tools lvm2-clvm pacemaker openais openmpi ...

    >зы: чисто из-за того что периодически вижу как строят почти один в
    >один велосипедный миникластер

    В отличи от кофемолок продаваемых для населения в М-видео или Никсе,
    надо сначала придумать задачи кластера.

    > - хочется чтоб это было в мейнстриме

    Хе, как грязи ...

    Red Hat Cluster Suite http://rehdat.com
    SUSE Linux Enterprise Server - http://novell.com
    Сaos Linux - http://www.caoslinux.org/
    BCCD Bootable Cluster CD (ранее Сluster Knoppix) - http://bccd.net/
    ....

    ---
    Про профит написано ниже..., иначе 90% времени он у вас будет простаивать в ожидании транзакций.

     
     
  • 6.12, lefan (ok), 12:43, 12/09/2010 [^] [^^] [^^^] [ответить]  
  • +1 +/
    Как-то народ похоже не понимает разницы между HPC и HA Cluster.
    Хоть бы wiki посмотрели для приличие прежде чем писать коменты.
     
     
  • 7.16, pavlinux (ok), 14:14, 12/09/2010 [^] [^^] [^^^] [ответить]  
  • +/
    НРС можно на НА, HPC можно не на НА, для НА нужно НА железо.
      
     
     
  • 8.22, Lefan (?), 11:14, 13/09/2010 [^] [^^] [^^^] [ответить]  
  • +/
    Ну да Это еще раз подтвердило мои выводы ... текст свёрнут, показать
     
  • 2.6, ы (?), 19:17, 11/09/2010 [^] [^^] [^^^] [ответить]  
  • +1 +/
    >Вечером, уходя домой, грузим дистр,.... ждем коннекта.
    >Естественно предварительно все офисные компы по крону или как там в венде,
    >
    >вырубаются в 23:59, а по таймеру из БИОС врубаются в 00:30,
    >по дефолту стоит загрузка по PXE.
    >
    >Осталось придумать, нафига?! :)
    >
    >

    осталось еще сетку проложить как минимум в 10Гбит, чтобы хоть какой-то профит от кластера был.

     
     
  • 3.8, JL2001 (ok), 19:32, 11/09/2010 [^] [^^] [^^^] [ответить]  
  • +/
    >осталось еще сетку проложить как минимум в 10Гбит, чтобы хоть какой-то профит от кластера был.

    не обязательно, есть много задач не требующих большой связанности, как минимум распределённые бекапы :) или обэп порадуется забрав сервера на которых только каждый третий байт базы
    когда это всё устанавливается одной строчкой это как минимум удобно

     
     
  • 4.13, pavlinux (ok), 14:04, 12/09/2010 [^] [^^] [^^^] [ответить]  
  • +/
    >>осталось еще сетку проложить как минимум в 10Гбит, чтобы хоть какой-то профит от кластера был.
    >
    >не обязательно, есть много задач не требующих большой связанности,

    Тогда нафига кластер?
    для бэкапа NFS/CIFS/SSHFS хватит, boinc - если считать надумаете.

     
     
  • 5.17, JL2001 (ok), 15:06, 12/09/2010 [^] [^^] [^^^] [ответить]  
  • +/
    >>>осталось еще сетку проложить как минимум в 10Гбит, чтобы хоть какой-то профит от кластера был.
    >>
    >>не обязательно, есть много задач не требующих большой связанности,
    >
    >Тогда нафига кластер?
    >для бэкапа NFS/CIFS/SSHFS хватит, boinc - если считать надумаете.

    grid это тоже по определению кластер
    NFS/CIFS/SSHFS - централизованное хранение, при наличии 200 компов с 0,5 тера винтах и фри 50% == 50 терабайт на дороге не валяются ?

    лично мне больше интересен вопрос - почему например суся не кричит "под нашим линуксом ваши 100к фоток будут сконверчены в N(количество сусь в квартире/локалке) быстрее!!!1" ? всего то припаять грид к конвертору (или даже припаять грид-баш с раздачей команд по нодам)
    и собсно даже безопасность побоку, вспомнить тот же винХрюХом с расшаренными юзерскими папками
    помнится майкрософт уже анансировал что-то такое вроде "грид фо хоме"

     
     
  • 6.18, pavlinux (ok), 18:43, 12/09/2010 [^] [^^] [^^^] [ответить]  
  • +/
    >[оверквотинг удален]
    >и фри 50% == 50 терабайт на дороге не валяются ?
    >
    >
    >лично мне больше интересен вопрос - почему например суся не кричит "под
    >нашим линуксом ваши 100к фоток будут сконверчены в N(количество сусь в
    >квартире/локалке) быстрее!!!1" ? всего то припаять грид к конвертору (или даже
    >припаять грид-баш с раздачей команд по нодам)
    >и собсно даже безопасность побоку, вспомнить тот же винХрюХом с расшаренными юзерскими
    >папками
    >помнится майкрософт уже анансировал что-то такое вроде "грид фо хоме"

    Чего сказать-то хотел? Набор букв только вижу.


    ---

    http://p2p-fs.sourceforge.net/
    http://regal.lip6.fr/spip.php?rubrique18
    https://launchpad.net/colonyfs
    http://tahoe-lafs.org/trac/tahoe-lafs

     

  • 1.10, Riens (?), 11:02, 12/09/2010 [ответить] [﹢﹢﹢] [ · · · ]  
  • +1 +/
    Мне, как ламеру в этом вопросе видится для офисного применения такой вариант. Ставим на офисные машинки (да хоть под винду) XEN. Пусть он у нас стартует, например в 21-00. Грузятся Пеликан или другой дистр. Обращается за своей порцией задач к серверу на котором тоже в виртуалке крутится сервер который распределяет задания. Да медленнее, но работать ИМХО будет.
     
     
  • 2.14, Damon_ (ok), 14:06, 12/09/2010 [^] [^^] [^^^] [ответить]  
  • +/
    > Да медленнее, но работать ИМХО будет.

    Никто и не спорит. :-)

    Только фишка не в этом. Прочтите треды выше -- там народ определиться не может, а зачем ему [b]это[/b], собственно! А Вы уже технические детали обсуждаете. :-)

     
     
  • 3.21, upyx (ok), 10:49, 13/09/2010 [^] [^^] [^^^] [ответить]  
  • +/
    >Прочтите треды выше -- там народ определиться не может, а зачем ему это, собственно!

    Ответ на вопрос "Зачем?" самый сложный :) И часто сводится к "Хочу!" :)

     
  • 2.15, pavlinux (ok), 14:06, 12/09/2010 [^] [^^] [^^^] [ответить]  
  • +/
    > Обращается за своей порцией задач к серверу на котором тоже в виртуалке
    > крутится сервер который распределяет задания.

    http://boinc.berkeley.edu/


     

  • 1.19, Riens (?), 06:34, 13/09/2010 [ответить] [﹢﹢﹢] [ · · · ]  
  • +/
    Спасибо, очень интересное решение !
     
  • 1.23, Аноним (23), 17:35, 13/09/2010 [ответить] [﹢﹢﹢] [ · · · ]  
  • +/
    Создание кластера дело хорошее не спорю, а самое главное интересное. Но вот только простому работнику невидимого фронта, ктр целыми днями что-то там делает на своем компе да еще и успевает каким-то нелепым образом спасти флешку бугалтера от вирусов, нафиг не нужен этот кластер. И так работы столько, что начальство каждый раз пытается урезать зарплату. Короче простому челу он нафиг не нужен и хватит про него.
     

     Добавить комментарий
    Имя:
    E-Mail:
    Текст:



    Спонсоры:
    Inferno Solutions
    Hosting by Hoster.ru
    Хостинг:

    Закладки на сайте
    Проследить за страницей
    Created 1996-2020 by Maxim Chirkov
    Добавить, Поддержать, Вебмастеру