forum.opennet.ru

Форум Разговоры, обсуждение новостей
Вариант для распечатки		Пред. тема \| След. тема
Режим отображения отдельной подветви беседы		[ Отслеживать ]

Оглавление

Компания SGI объявила о поддержке кластерной ФС Lustre, opennews (?), 12-Май-11, (0) [смотреть все]

народ а кто в курсе, чё там в оракловом с zfs скрестить планы ещё есть этот са, ананим (?), 20:22 , 12-Май-11, (1) –1 //

Запуском люстры поверх zfsовского менеджера томов в линаксе занимается Белендорф, non anon (?), 17:43 , 13-Май-11, (10) //

вобще этим занимался Sun до покупки Ораклом - а потом стало сложно Ибо народу да, Аноним (-), 20:15 , 14-Май-11, (11)

Открыли бы они CXFS, было бы чудно ---Ораклов уже жалко становиться - OpenOffice, pavlinux (ok), 23:35 , 12-Май-11, (2) +10 //

От люстры они сами отказались уже как несколько месяцев назад, Аноним (-), 23:57 , 12-Май-11, (4)
Зато саппорт MySQL подорожал А ненужное выкидывают, да , Мяут (ok), 01:48 , 13-Май-11, (6) //

Совершенно верно В настоящее время все эти распределенные кластерные файловые с, НихтАрбайтен (?), 13:05 , 13-Май-11, (8) +2 //

Люстра является POSIX совместимой И при этом имела native клиентов для Linux Wi, Аноним (-), 20:19 , 14-Май-11, (12)

POSIX compliance The full POSIX test suite passes with _limited exceptions_ o, Нихт Арбайтен (?), 22:38 , 14-Май-11, (15)

Ага Например, если клиент читает данные из своего кэша, то другие клиенты не ув, Омоним (?), 22:52 , 14-Май-11, (16)

atime давно уже можно заставить обновлять , Аноним (-), 23:01 , 14-Май-11, (17)
Вот только не надо мне что-то впаривать, всё равно я не ваш клиент Основное моё, Нихт Арбайтен (?), 14:10 , 15-Май-11, (18)

как смешно читать ваш бред все машины из top10 и большинство из top500 имеют l, Аноним (-), 10:09 , 16-Май-11, (19)
Честно говоря, не понял, к чему эти лозунги Пользователи Lustre - это крупнейши, Омоним (?), 20:22 , 16-Май-11, (20)

Всегда удивлялся, почему некоторые люди так любят делать утверждения вселенского, Омоним (?), 20:24 , 14-Май-11, (14) +1

Ага, вот такие оряклы до чужого добра жадные Тока чего-то я в ванильном ядре дра, pofig (?), 04:23 , 13-Май-11, (7) //

Наверно по тому что - для быстрой работы люстры нужна была стопка патчей - котор, Аноним (-), 20:22 , 14-Май-11, (13)

Сообщения [Сортировка по времени | RSS]

6. "Компания SGI объявила о поддержке кластерной ФС Lustre" +/–

Сообщение от Мяут (ok), 13-Май-11, 01:48

Зато саппорт MySQL подорожал. А ненужное выкидывают, да.

Ответить | Правка | К родителю #2 | Наверх | Cообщить модератору

8. "Компания SGI объявила о поддержке кластерной ФС Lustre" +2 +/–

Сообщение от НихтАрбайтен (?), 13-Май-11, 13:05

>>ненужное выкидывают
Совершенно верно. В настоящее время все эти распределенные кластерные файловые системы натуральная петриковщина. Т.е. мошенничество, где клиента обувают с помощью высокотехнологичной фразеологии.
Т.е. клиент, когда слышит про файловые системы, думает про POSIX-совместимость (это, если клиент юниксоид, умеют ли думать вендузятнеги наука пока не установила), или, грубо говоря, он надеется, что его любимая программа не будет вылетать с жалобами на ошибки при записи/чтении файла. А на самом-то деле производители распределённых "файловых систем" подразумевают при этом что-то совсем своё. Т.е. в настоящее время наука не знает способов синхронизации доступа к носителям, контролирумыми разными системами (т.е. с шаред-дисками всё нормально, там непосредственную запись на диск выполняет одна система), чтобы оно натягивалось на POSIX-семантику. Видимо, Ларри Эллисон это тоже понимает.
А что там на top500 крутится, это ещё не показатель. На top500 работает весьма специальное ПО, и ему что POSIX, что не POSIX ... Достаточно MPI-IO стандарта, чтоб фактически программа сама (ну, разумеется, с помощью весьма недешевого штата админов) контролировала доступ к файлу.

Ответить | Правка | Наверх | Cообщить модератору

12. "Компания SGI объявила о поддержке кластерной ФС Lustre" +/–

Сообщение от Аноним (-), 14-Май-11, 20:19

>>>ненужное выкидывают
> А что там на top500 крутится, это ещё не показатель. На top500
> работает весьма специальное ПО, и ему что POSIX, что не POSIX
> ... Достаточно MPI-IO стандарта, чтоб фактически программа сама (ну, разумеется, с
> помощью весьма недешевого штата админов) контролировала доступ к файлу.
Люстра является POSIX совместимой. И при этом имела native клиентов для Linux/Win32, старый порт на OS/X. И все где может работать Fuse.
И очень много усилий тратилось именно на поддержку POSIX семантики.
А что до синхронизации.. надеюсь мисье может прочитать в wiki расшифровку DLM и почитает на wiki.lustre.org о LDLM.

Ответить | Правка | Наверх | Cообщить модератору

15. "Компания SGI объявила о поддержке кластерной ФС Lustre" +/–

Сообщение от Нихт Арбайтен (?), 14-Май-11, 22:38

# POSIX compliance: The full POSIX test suite passes with _limited exceptions_ on Lustre clients. In a cluster, _most operations are atomic_ so that clients never see stale data or metadata. Lustre supports mmap() file I/O.

Ответить | Правка | Наверх | Cообщить модератору

16. "Компания SGI объявила о поддержке кластерной ФС Lustre" +/–

Сообщение от Омоним (?), 14-Май-11, 22:52

>with _limited exceptions_
Ага. Например, если клиент читает данные из своего кэша, то другие клиенты не увидят обновление atime. Потому что иначе сеть ляжет. Впрочем, насколько я помню, планировалось реализовать (и, возможно, уже реализован) в полном объеме relatime.

Ответить | Правка | Наверх | Cообщить модератору

17. "Компания SGI объявила о поддержке кластерной ФС Lustre" +/–

Сообщение от Аноним (-), 14-Май-11, 23:01

atime давно уже можно заставить обновлять.

Ответить | Правка | Наверх | Cообщить модератору

18. "Компания SGI объявила о поддержке кластерной ФС Lustre" +/–

Сообщение от Нихт Арбайтен (?), 15-Май-11, 14:10

Вот только не надо мне что-то впаривать, всё равно я не ваш клиент. Основное моё возражение против распределенных файловых систем - что они не полностью POSIX-совместимы и иногда это очень сильно выходит боком. Тут меня начали окучивать, что, де, это всё не так, а оно всё POSIX-совместимо, на что была продемонстрирована цитата с домашней страницы. После этого окучивание перешло на следующий уровень, типа, эта несовместимость она совсем-совсем маленькая и вы её практически никогда не увидите. Спасибо, конечно, но я знаю, что когда я её увижу мне будет очень-очень больно.
top500 - это очень специальные системы и очень специальные задачи. POSIX-совместимость там ни разу никому не интересна. Может там вообще ни шелла, ни пользователей нету, а задачи выставляются туда через толстый PBS, типа, слёрма и торка, который позаботится, чтобы в каждый конкретный момент на каждом конкретном процессоре выполнялась ровно одна вычислительная задача (а нефиг контексты переключать). Вон, pvfs2 вообще никакой POSIX-совместимости не обещает, но одной ROMIO-библиотеки для её типичных применений оказывается вполне достаточно. А файловая система там -- это всё равно, что, к примеру, sshfs поверх fuse, типа, кому вообще в голову придёт от такой примочки требовать полной POSIX-совместимости.

Ответить | Правка | К родителю #16 | Наверх | Cообщить модератору

19. "Компания SGI объявила о поддержке кластерной ФС Lustre" +/–

Сообщение от Аноним (-), 16-Май-11, 10:09

как смешно читать ваш бред.
все машины из top10 (и большинство из top500) имеют login node, c которых таки запускают и отлаживают программы.
А еще смешнее читать - учитывая что Linux местами очень не совместим с POSIX ;-)

Ответить | Правка | Наверх | Cообщить модератору

20. "Компания SGI объявила о поддержке кластерной ФС Lustre" +/–

Сообщение от Омоним (?), 16-Май-11, 20:22

Честно говоря, не понял, к чему эти лозунги. Пользователи Lustre - это крупнейшие производители и/или пользователи суперкомпьютеров. Вы лично с вашими познаниями в распределенных ФС и попытками прицепиться к тексту, смысл которого вам был разъяснен, никому не интересны.

Ответить | Правка | К родителю #18 | Наверх | Cообщить модератору

14. "Компания SGI объявила о поддержке кластерной ФС Lustre" +1 +/–

Сообщение от Омоним (?), 14-Май-11, 20:24

>Т.е. в настоящее время наука не знает способов синхронизации доступа к носителям, контролирумыми разными системами
Всегда удивлялся, почему некоторые люди так любят делать утверждения вселенского масштаба, не имея представления даже об азах.

Ответить | Правка | К родителю #8 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема

Партнёры:

Хостинг:

Закладки на сайте
Проследить за страницей

Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру


	6. "Компания SGI объявила о поддержке кластерной ФС Lustre"	+/–
	Сообщение от Мяут (ok), 13-Май-11, 01:48
	Зато саппорт MySQL подорожал. А ненужное выкидывают, да.
	Ответить \| Правка \| К родителю #2 \| Наверх \| Cообщить модератору


	8. "Компания SGI объявила о поддержке кластерной ФС Lustre"	+2 +/–
	Сообщение от НихтАрбайтен (?), 13-Май-11, 13:05
	>>ненужное выкидывают Совершенно верно. В настоящее время все эти распределенные кластерные файловые системы натуральная петриковщина. Т.е. мошенничество, где клиента обувают с помощью высокотехнологичной фразеологии. Т.е. клиент, когда слышит про файловые системы, думает про POSIX-совместимость (это, если клиент юниксоид, умеют ли думать вендузятнеги наука пока не установила), или, грубо говоря, он надеется, что его любимая программа не будет вылетать с жалобами на ошибки при записи/чтении файла. А на самом-то деле производители распределённых "файловых систем" подразумевают при этом что-то совсем своё. Т.е. в настоящее время наука не знает способов синхронизации доступа к носителям, контролирумыми разными системами (т.е. с шаред-дисками всё нормально, там непосредственную запись на диск выполняет одна система), чтобы оно натягивалось на POSIX-семантику. Видимо, Ларри Эллисон это тоже понимает. А что там на top500 крутится, это ещё не показатель. На top500 работает весьма специальное ПО, и ему что POSIX, что не POSIX ... Достаточно MPI-IO стандарта, чтоб фактически программа сама (ну, разумеется, с помощью весьма недешевого штата админов) контролировала доступ к файлу.
	Ответить \| Правка \| Наверх \| Cообщить модератору


	12. "Компания SGI объявила о поддержке кластерной ФС Lustre"	+/–
	Сообщение от Аноним (-), 14-Май-11, 20:19
	>>>ненужное выкидывают > А что там на top500 крутится, это ещё не показатель. На top500 > работает весьма специальное ПО, и ему что POSIX, что не POSIX > ... Достаточно MPI-IO стандарта, чтоб фактически программа сама (ну, разумеется, с > помощью весьма недешевого штата админов) контролировала доступ к файлу. Люстра является POSIX совместимой. И при этом имела native клиентов для Linux/Win32, старый порт на OS/X. И все где может работать Fuse. И очень много усилий тратилось именно на поддержку POSIX семантики. А что до синхронизации.. надеюсь мисье может прочитать в wiki расшифровку DLM и почитает на wiki.lustre.org о LDLM.
	Ответить \| Правка \| Наверх \| Cообщить модератору


	15. "Компания SGI объявила о поддержке кластерной ФС Lustre"	+/–
	Сообщение от Нихт Арбайтен (?), 14-Май-11, 22:38
	# POSIX compliance: The full POSIX test suite passes with _limited exceptions_ on Lustre clients. In a cluster, _most operations are atomic_ so that clients never see stale data or metadata. Lustre supports mmap() file I/O.
	Ответить \| Правка \| Наверх \| Cообщить модератору


	16. "Компания SGI объявила о поддержке кластерной ФС Lustre"	+/–
	Сообщение от Омоним (?), 14-Май-11, 22:52
	>with _limited exceptions_ Ага. Например, если клиент читает данные из своего кэша, то другие клиенты не увидят обновление atime. Потому что иначе сеть ляжет. Впрочем, насколько я помню, планировалось реализовать (и, возможно, уже реализован) в полном объеме relatime.
	Ответить \| Правка \| Наверх \| Cообщить модератору


	17. "Компания SGI объявила о поддержке кластерной ФС Lustre"	+/–
	Сообщение от Аноним (-), 14-Май-11, 23:01
	atime давно уже можно заставить обновлять.
	Ответить \| Правка \| Наверх \| Cообщить модератору


	18. "Компания SGI объявила о поддержке кластерной ФС Lustre"	+/–
	Сообщение от Нихт Арбайтен (?), 15-Май-11, 14:10
	Вот только не надо мне что-то впаривать, всё равно я не ваш клиент. Основное моё возражение против распределенных файловых систем - что они не полностью POSIX-совместимы и иногда это очень сильно выходит боком. Тут меня начали окучивать, что, де, это всё не так, а оно всё POSIX-совместимо, на что была продемонстрирована цитата с домашней страницы. После этого окучивание перешло на следующий уровень, типа, эта несовместимость она совсем-совсем маленькая и вы её практически никогда не увидите. Спасибо, конечно, но я знаю, что когда я её увижу мне будет очень-очень больно. top500 - это очень специальные системы и очень специальные задачи. POSIX-совместимость там ни разу никому не интересна. Может там вообще ни шелла, ни пользователей нету, а задачи выставляются туда через толстый PBS, типа, слёрма и торка, который позаботится, чтобы в каждый конкретный момент на каждом конкретном процессоре выполнялась ровно одна вычислительная задача (а нефиг контексты переключать). Вон, pvfs2 вообще никакой POSIX-совместимости не обещает, но одной ROMIO-библиотеки для её типичных применений оказывается вполне достаточно. А файловая система там -- это всё равно, что, к примеру, sshfs поверх fuse, типа, кому вообще в голову придёт от такой примочки требовать полной POSIX-совместимости.
	Ответить \| Правка \| К родителю #16 \| Наверх \| Cообщить модератору


	19. "Компания SGI объявила о поддержке кластерной ФС Lustre"	+/–
	Сообщение от Аноним (-), 16-Май-11, 10:09
	как смешно читать ваш бред. все машины из top10 (и большинство из top500) имеют login node, c которых таки запускают и отлаживают программы. А еще смешнее читать - учитывая что Linux местами очень не совместим с POSIX ;-)
	Ответить \| Правка \| Наверх \| Cообщить модератору


	20. "Компания SGI объявила о поддержке кластерной ФС Lustre"	+/–
	Сообщение от Омоним (?), 16-Май-11, 20:22
	Честно говоря, не понял, к чему эти лозунги. Пользователи Lustre - это крупнейшие производители и/или пользователи суперкомпьютеров. Вы лично с вашими познаниями в распределенных ФС и попытками прицепиться к тексту, смысл которого вам был разъяснен, никому не интересны.
	Ответить \| Правка \| К родителю #18 \| Наверх \| Cообщить модератору


	14. "Компания SGI объявила о поддержке кластерной ФС Lustre"	+1 +/–
	Сообщение от Омоним (?), 14-Май-11, 20:24
	>Т.е. в настоящее время наука не знает способов синхронизации доступа к носителям, контролирумыми разными системами Всегда удивлялся, почему некоторые люди так любят делать утверждения вселенского масштаба, не имея представления даже об азах.
	Ответить \| Правка \| К родителю #8 \| Наверх \| Cообщить модератору