The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

Clusters

   Корень / Программы для администратора / Clusters
Администрирование группы машин [13]
Балансировка нагрузки и отказоустойчивые системы [29]
Вычислительные кластеры [13]
Распределенные и кластерные ФС [26]

rus-* Кластерные системы [+]
[обсудить]
 Неплохая подборка программного обеспечения для построения и обслуживания кластеров.
 
----* PelicanHP - LiveCD for set up a high performance computing cluster [+]
[обсудить]
 Linux дистрибутив для быстрого развертывания кластеров. PelicanHPC построен на пакетной базе Debian и позволяет превратить обычный офисный компьютерный парк в вычислительный кластер, загрузив один управляющий компьютер с LiveCD/LiveUSB, а остальные машины использовав в качестве загружаемых через PXE узлов. Графический интерфейс управляющей станции построен на основе Xfce4. Из реализаций интерфейса MPI в состав дистрибутива входит только Open MPI, ранее присутствовавший LAM-MPI удален из поставки. Для мониторинга работы кластера используется Ganglia, но в качестве альтернативы в поставке имеется и пакет ksysguard. Для тестирования производительности кластеров в дистрибутив включен пакет Linpack.
 
----* Gluster - GNU cluster distribution aimed at commoditizing Supercomputing and Superstorage. (Версия: 1.3 от 2007-10-19) [+]
[обсудить]
 GNU платформа для построения вычислительных кластеров или распределенных хранилищ данных. В качетсве базиса может использоваться любой популярный Linux дистрибутив.
 
----* CHAOS - Linux distribution for openMosix node [+]
[обсудить]
 Небольшой Linux дистрибутив (всего 6 Мб) предназначенный для загрузки любого компьютера в качестве узла вычислительного openMosix кластера, жесткий диск при этом не используется.
 
----* CHPOX - Checkpointing for linux (Transparent dumping) (Версия: 1.0 от 2006-07-08) [+]
[обсудить]
 Модуль Linux 2.4.x ядра позволяющий сохранять контекст выполняющегося процесса (и всех потомков) в файл с возможностью последующего восстановления состояния, при этом для процесса подобная заморозка будет незаметна.
 
----* TIPC - Transparent Inter Process Communication Protocol for Linux [+]
[обсудить]
 Реализация транспортного протокола (примерно на 30% производительнее TCP/IP) для обмена сообщениями между приложениями запущенными на разных машинах внутри кластера для Linux ядер 2.4 и 2.6. В будущем ожидает выход для других ОС.
  • Обзор технологии.
  • RFC Draft
  •  
    ----* Rocks Cluster Distribution - Open Source High Performance Linux Cluster Solution [+]
    [обсудить]
     Готовое кластерное решение на базе Linux на CD-ROM. ISO образы дисков доступны для x86, x86_64 (Opteron) и ia64 (Itanium). В top500 самых производительных кластеров уже есть около десятка систем использующих Rocks Cluster Distribution.
     
    ----* BProc - Beowulf Distributed Process Space [+]
    [обсудить]
     Набор патчей к Linux ядру, библиотек и утилит для запуска и контроля выполнения процессов на других машинах работающих в рамках Beowulf -style кластера. На центральной машине удаленные процессы выглядят как локальные, принимают сигналы, wait() ловит код завершения и т.д.
     
    ----* LSE - Linux Scalability Effort [+]
    [обсудить]
     Проект развития масштабируемости Linux. Собраны интересные патчи и программы позволяющие увеличить масштабируемость Linux. Субпроекты: NUMA, Scheduling, Locking Primitives, Linux Global Spinlock Document, 2.4.17 BKL Reduction, suparna's aio and bio docs, epoll Scalability, Resource Scalability, Large Pipe Support, Scalable Counters, Disk I/O Statistics.
     
    ----* ng_fec - Cisco Fast EtherChannel mechanism for FreeBSD [+]
    [обсудить]
     Netgraph модуль для FreeBSD для реализации механизма Fast EtherChannel в FreeBSD. Суть Fast EtherChannel заключается в объединении нескольких сетевых интерфейсов в один объединенный интерфейс с увеличенной пропускной способностью, т.е. при использовании 2-x 100Мбит сетевых карт получаем один 200Мбит'ный интерфейс. Подробности о настройке Сisco.
     
    ----* User-Mode Linux lets you run Linux inside Linux, gives you a virtual machine [+]
    [обсудить]
     Интересная реализация для создания полностью изолированных друг от друга виртуальных машин под linux. Особенность в том, что в рамках работающей linux системы можно запустить дополнительные linux машины, со своей файловой системой, виртуальным аппаратным обеспечением и ядром, причем запуск ядра производится из текущего работающего окружения не требуя привелигированного режима работы. Можно запустить не только отличное от первичного linux ядро, но и установить другой дистрибутив.
     

    Близкие по значению ключи
    carp  heartbeat  nice  garbage  lustre  recover  failover  idle  fault  mpi 
    Близкие по совпадению ключи
    top500  mesos  yandex  mapreduce  lxc  lxd  microcloud  lustre  ceph  apache  ytsaurus  linux  disk  xen  virtual 
    Похожие разделы ключей
  • Решение проблем, оптимизация

  • Раздел новостей
     [18.11.2023] Canonical представил MicroCloud, инструментарий для быстрого развёртывания кластеров
     [14.11.2023] Опубликована 62 редакция рейтинга самых высокопроизводительных суперкомпьютеров
     [22.05.2023] Опубликована 61 редакция рейтинга самых высокопроизводительных суперкомпьютеров
     [23.03.2023] Яндекс открыл YTsaurus, платформу для обработки и хранения больших объёмов данных
     [17.06.2022] Выпуск кластерной ФС Lustre 2.15
     [31.05.2022] Опубликована 59 редакция рейтинга самых высокопроизводительных суперкомпьютеров
     [17.11.2021] Опубликована 58 редакция рейтинга самых высокопроизводительных суперкомпьютеров
     [08.04.2021] Apache сворачивает разработку кластерной платформы Mesos
    Следующая страница >>

    Советы и заметки
     История про Ceph и реплику 1+2
     Зеркалирование дисков по сети, между двумя FreeBSD серверами (аналог DRBD)
     Настройка СУБД PostgreSQL 13 под управлением Pacemaker/Corosync в Debian 11
     Настройка кластера для запуска Cloud-окружений с использованием Ubuntu Enterprise Cloud
     Запуск John the Ripper в MPI-кластере на базе Ubuntu 10.04
     Как увеличить количество shared memory для работы высоконагруженного PostgreSQL
     Организация мульти-мастер репликации двух memcached-серверов
     Дублирование сервера с использованием VRRP
    Следующая страница >>

    Тематический каталог
     Создание кластера высокой доступности для XEN с Live миграцией в CentOS 5.3 с использованием VLAN и DRBD
     Обеспечение надежности http(s) сервисов с помощью Linux Virtual Server.
     Уставновка кластерной ФС OCFS в CentOS и Debian
     Использование доменов Xen поверх DRBD-устройств
     Обзор недостатков NBD, ENBD, GNBD и iSCSI
     CARP(4) Руководство по интерфейсам ядра FreeBSD
     Iptables CLUSTERIP Multicast MAC + Catalyst
     Собираем HA кластер
    Следующая страница >>

    Каталог программ
     PelicanHP - LiveCD for set up a high performance computing cluster
     Dbmail - storing and retrieving mail messages from a database.
     DrFTPD - Distributed FTP Daemon
     HA/FST - High Availability for Solaris
     PVFS - Parallel Virtual File System
     MogileFS - open source distributed filesystem
     Программы для типовой установки Linux на большое число машин.
     Clustering Daemon - guarantees that a response will be serviced provided at least one cluster node is up
    Следующая страница >>

    Каталог ссылок
     Построение отказоустойчивого кластера, используя DRBD и Heartbeat
     Учебно-информационный центр по параллельным вычислениям
     Oracle on Red Hat Linux Portal
     MPI для начинающих
     cluster.linux-ekb.info - практические руководства по организации Linux-кластеров
     Форум по серверному железу и RAID
     Высокопроизводительные алгоритмы

    Архив документации
     MOSIX-кластер
     Построение отказоустойчивого кластера, используя DRBD и Heartbeat
     Руководство по MySQL Cluster
     Средства параллельного программирования для ОС Linux
     MPI: Стандарт интерфейса передачи сообщений
     Построение высоко доступного web кластера с балансировкой нагрузки на базе linux
     MPI-2: Расширение стандарта на интерфейс передачи сообщений
     MPI для начинающих.
    Следующая страница >>



    Партнёры:
    PostgresPro
    Inferno Solutions
    Hosting by Hoster.ru
    Хостинг:

    Закладки на сайте
    Проследить за страницей
    Created 1996-2024 by Maxim Chirkov
    Добавить, Поддержать, Вебмастеру