Вариант для распечатки		Пред. тема | След. тема
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы		[ Отслеживать ]

Выпуск распределённого отказоустойчивого хранилища LeoFS 1.4.0, opennews (??), 29-Мрт-18, (0) [смотреть все] https habrahabr ru company oleg-bunin blog 313364 Поначалу мы паниковали, проб, Anonim (??), 23:35 , 29-Мрт-18, (1) –4 // Как испоганилось айти, если это -- лучший доклад Это бред сумасшедшего, а не д, Аноним (-), 01:27 , 30-Мрт-18, (4) +12 Даже комментировать противно Где багрепорт в списке рассылки или официальном ги, Stax (ok), 04:05 , 30-Мрт-18, (7) +7 // Сразу видно что комментаторы выше доклад не смотрели Цитата вырвана из контекст, RudW0lf (?), 09:44 , 30-Мрт-18, (15) –1 // Кластер поехал Эти спецы начали отключать-подключать ноды в надежде, что само , Аноним (-), 10:53 , 30-Мрт-18, (17) +3 Читал - и как уже написал, комментировать противно Ну-ка а давайте теперь провер, Stax (ok), 12:15 , 30-Мрт-18, (19) +3 Они позвонили по телефону в техподдержку компании Rakuten, которая пишет этот le, XoRe (ok), 12:28 , 30-Мрт-18, (20) –1 Не понимаю, как у них вообще хватило наглости звонить в техподдержку компани, Аноним (-), 12:35 , 30-Мрт-18, (22) +3 А почему вы решили, что у них не было контракта , XoRe (ok), 09:43 , 02-Апр-18, (84) Я видел эту цитату Еще раз Багрепорт в трекере где Не говоря уж про то, что , Stax (ok), 12:45 , 30-Мрт-18, (24) Выпуск распределённого отказоустойчивого хранилища LeoFS 1.4..., 1 (??), 15:31 , 30-Мрт-18, (46) +2 С опенсорсным проектом вам никто ничего не должен даже при наличии комьюнити, а , Аноним (-), 16:31 , 30-Мрт-18, (55) Это опенсорс, дружище Хочешь чтоб дело сдвинулось с места - выдели ресурсы Ден, Николай Гаврилов (?), 13:20 , 30-Мрт-18, (34) // Согласен Эксплуататор продакшонов блин Хоть раз донат кинул, или только эксплу, Аноним (-), 13:24 , 30-Мрт-18, (36) Слушал я доклад этого дядьки вместе с еще каким-то толстяком на Highload e Веща, asand3r (?), 09:10 , 30-Мрт-18, (14) +2 // Они некомпетентны Позорят отрасль , Аноним (-), 16:17 , 30-Мрт-18, (50) Anonim пишется через y Это пост рекламы своей неинтересной статьи или ненужной , Аноним (-), 11:10 , 30-Мрт-18, (18) Хмммм Как-то это странно Такое может быть в какой-нибудь пре-альфа версии, н, Аноним (-), 13:00 , 30-Мрт-18, (26)   // Я вам секрет открою - в LeoFS ВСЕ узлы знают, где какие файлы лежат Без каких, Stax (ok), 13:34 , 30-Мрт-18, (39)   Этот ваш олег, мягко говоря, не самый авторитетный источник , Не олег (?), 13:07 , 30-Мрт-18, (29) +4 Скоро Amazon заблочат на территории РФ с помощью blackhole, что вызовет сбои в р, Roskompozor atakuet (?), 02:30 , 30-Мрт-18, (5) +24 // Ну да, во всем мире, на территории определенного государства , Аноним (6), 03:52 , 30-Мрт-18, (6) // Статью не читал да https en wikipedia org wiki Black_hole_ networking , ansel (?), 13:29 , 30-Мрт-18, (38) –2 // Типа, отключить приём анонсов с глючного или находящегося под контролем злоумышл, YetAnotherOnanym (ok), 18:46 , 30-Мрт-18, (63) Все в чебурашконеты , Вонни Бух и Потчк (?), 04:36 , 30-Мрт-18, (8) +1 // К сожалению нет Амазоном пользуются обычно мобильные игры и приложения , Аноним (-), 12:34 , 30-Мрт-18, (21) Скоро вероятно загонят Все идет к логической развязке , Аноним (-), 13:26 , 30-Мрт-18, (37) // Скоро это минимум через 10 лет Бюрократическая машина очень медленная , Аноним (-), 13:58 , 30-Мрт-18, (40) –2 Дурак ты, Вася У нас РКН 8 млн сайтов заблокировал без решения суда, попутно б, flex (??), 15:04 , 30-Мрт-18, (44) +11 Сколько лет закон Яровой принимается и когда запустится Почему не работает зако, Аноним (-), 15:18 , 30-Мрт-18, (45) –15 Ну привет тебе, простой обыватель Давай по порядку Меньше 2х лет назад приняЛИ , Евгений Канавалов (?), 16:09 , 30-Мрт-18, (48) +24 Почему тролль Я уехал, теперь можете смело отключать интернет Я только за , Аноним (-), 16:41 , 30-Мрт-18, (56) +1 Экспортный тролль, значит , YetAnotherOnanym (ok), 09:32 , 31-Мрт-18, (73) –1 Никакой DPI не нужен Можно если много трафика на один IP и это не ютуб, тогда б, Аноним (-), 20:25 , 30-Мрт-18, (66) –1 Ну толсто же , Аноний (?), 21:33 , 30-Мрт-18, (68) +1 Ну вот А то - ZOG, правительство, власти, рептилоиди угнетают простых граждан Во, Аноним (-), 15:43 , 03-Апр-18, (85) Пошел читать коменты в надежде узнать как оно относительно люстры В результате у, evkogan (?), 10:35 , 30-Мрт-18, (16) –1 // Это не аналог люстры и не предназначено для больших кластеров Это объектный сто, Stax (ok), 12:56 , 30-Мрт-18, (25) +8 // Т е LeoFS не предлагает готовую тулзу Даже несмотря на то, что Формат там эле, Moomintroll (ok), 13:07 , 30-Мрт-18, (28) –1 // Висит в багтрекере, но у них не хватает рук Официальная утилита же должна бы, Stax (ok), 13:23 , 30-Мрт-18, (35) PohmelFS с японцами, шашками и амазоном вместо яндекса , Andrey Mitrofanov (?), 14:20 , 30-Мрт-18, (41) –1 opennet - торт Спасибо, Stax Имхо, ваши комментарии вполне на отдельную статью, Alexander (ok), 15:03 , 30-Мрт-18, (43) +1 // Аккуратнее доверяйте комментариям в интернетах См рядышком каммент 69 где я с, RomanCh (ok), 22:37 , 30-Мрт-18, (70) –1 Спасибо, отличное описание Если оформите как статью будет здорово Прежде чем нап, evkogan (?), 15:58 , 30-Мрт-18, (47) Мм, рассказ тут не про Ceph, но когда набрасываете, то извольте конкретно излага, RomanCh (ok), 22:35 , 30-Мрт-18, (69) –1 // Тоже не хотелось бы, но пару вещей прокомментирую Например, вот это https gith, Stax (ok), 11:03 , 31-Мрт-18, (74) +1 Что вот это Список юнитов systemd вас испугал, или наличие готовых вам вел, RomanCh (ok), 13:47 , 31-Мрт-18, (77) –1 Вы действительно не понимаете или только делаете вид Вопрос не в наличии, а в т, Stax (ok), 14:45 , 31-Мрт-18, (78) –1 Внутри всё работает так как обещали Или вы дома каждый утюг и монитор разобрали, RomanCh (ok), 17:01 , 31-Мрт-18, (80) –1 Не разбираюсь - но в том-то и фишка, что оно со стороны в достаточной степени , Stax (ok), 18:58 , 31-Мрт-18, (81) Главная проблема ceph - это все же контрольные суммы данных Bluestore появился , alexk (??), 16:42 , 01-Апр-18, (82) Можно поподробнее, почему нет Насколько возможна расширяемость LeoFS и во что мо, kvaps (ok), 22:43 , 30-Мрт-18, (71) –2 // Не так Ceph замечательно работает например на 3х нодах ProxMox, который хранит , RomanCh (ok), 23:02 , 30-Мрт-18, (72) –1 Например, система репликации построена так, что другие серверы знают помнят , г, Stax (ok), 11:20 , 31-Мрт-18, (75) +1 Благодарю, очень исчерпывающе , kvaps (ok), 11:28 , 31-Мрт-18, (76) –1 Мда Вот смотрю я на тебя и вижу человека, который не может похвастаться широким, Gilneas (?), 13:13 , 30-Мрт-18, (31) –1 // Я действительно не очень разбираюсь в объектных хранилищах Ну не интересны они , evkogan (?), 16:21 , 30-Мрт-18, (51) +1 // Главное что ты знаешь как лучше , Аноним (-), 17:25 , 30-Мрт-18, (60) А есть какое-нибудь сравнение с Ceph Вот Ceph я знаю уже давно 8212 крупный и, Moomintroll (ok), 12:40 , 30-Мрт-18, (23) –1 // Подробно описал выше Пробовал Ceph В итоге без боли выбрал LeoFS Если совсе, Stax (ok), 13:05 , 30-Мрт-18, (27) +3 Интересно, есть ли у нее место не в промышленном применении , Аноним (-), 13:09 , 30-Мрт-18, (30) –1 // Оно вполне подходит для небольшой компании, которой нужно хранить например неско, Stax (ok), 13:20 , 30-Мрт-18, (33) +1 // Спасибо за подробный ответ , Аноним (-), 16:15 , 30-Мрт-18, (49) А не пробовал от reverbrain хранилище И вроде как в блогах хорошо описывает, и , Аноним (-), 15:02 , 31-Мрт-18, (79) А какие минусы у Amazon AWS, и аналоги есть , Аноним (-), 13:16 , 30-Мрт-18, (32) –1 Недоверяю я этим облакам Хранить данные на компе чужого дяди не важно - заморс, Аноним (-), 16:22 , 30-Мрт-18, (52) // При том что если так хочется, можно арендовать заморский VPS, и там поднять свое, Аноним (-), 16:23 , 30-Мрт-18, (53) // Тебе сказали не хотят дяде отдавать свои данные, а ты говоришь хранить на компе , Аноним (-), 20:28 , 30-Мрт-18, (67) +2 1,5,16,23,30,32,52

Сообщения

[Сортировка по времени | RSS]

	26. "Выпуск распределённого отказоустойчивого хранилища LeoFS 1.4..."	+/–
	Сообщение от Аноним (-), 30-Мрт-18, 13:00
	> мастер-нода теперь не знает, где у нее какие файлы лежат. Хмммм... Как-то это странно. Такое может быть в какой-нибудь пре-альфа версии, но чтобы японцы выкатили такое в продакшон - не могу в это поверить.
	Ответить | Правка | К родителю #1 | Наверх | Cообщить модератору

	39. "Выпуск распределённого отказоустойчивого хранилища LeoFS 1.4..."	+/–
	Сообщение от Stax (ok), 30-Мрт-18, 13:34
	>> мастер-нода теперь не знает, где у нее какие файлы лежат. > Хмммм... Как-то это странно. Такое может быть в какой-нибудь пре-альфа версии, но > чтобы японцы выкатили такое в продакшон - не могу в это > поверить. Я вам секрет открою - в LeoFS *ВСЕ* узлы знают, где какие файлы лежат. Без каких-либо внеших запросов. Просто потому, что узел определяется функцией над именем файла, использующей хэш (RING). И "мастер-нода" требуется только для запуска узла и распространения новой версии RING при изменениях узлов, ну и статистику с узлов собирает - а в остальном в обработке данных никак не участвует. Текущий RING знают все узлы, при добавлении/убирании узлов он меняется и новая версия распространяется. После чего выполняется операция rebalance, во время которой объекты перемещаются между узлами для соответствия новому RING'у. Перемещения, по возможности, минимальные, т.к. это consistent hash. Все узлы всегда знают не только текущий, но и предыдущий RING, что позволяет до окончания операции корректно обслуживать чтение / запись. Думаю, "мастер-нода теперь не знает, где у нее какие файлы лежат" надо понимать как - добавив новый узел, мы создали новый RING, но или еще не распространили его на другие узлы (тут надо смотреть, почему. В принципе, это неплохо логируется и показывется, где какая дата и версия RING, плюс есть ручные инструменты типа команды dump-ring - можно на всех узлах сдампить его в текстовые файлы и хоть вручную посмотреть), или еще не сделали rebalance. Но в любом случае, мастер-нода знает, где что лежит :) Просто команда whereis, показывающая "где что лежит" (по факту просто применяющая хэш к имени и спрашивающая статус этого объекта на полученных узлах) использует новый созданный RING, а не предыдущий, согласно которому данные еще могут лежать (до окончания rebalance). Это вообще мелочи и особо ничего не значит.
	Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема