The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]



Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы [ Отслеживать ]

Оглавление

Компания Netflix представила сеть доставки контента Open Con..., opennews (??), 06-Июн-12, (0) [смотреть все]

Сообщения [Сортировка по времени | RSS]


60. "Компания Netflix представила сеть доставки контента Open Con..."  +1 +/
Сообщение от letsmac (ok), 07-Июн-12, 09:18 
>>Other than a few small changes, we're using stock FreeBSD 9, tracking the 9-stable branch on a regular basis.  Our chassis is a semi-custom 4U 19" form factor with thirty six 3TB SATA disks and 2 SSDs.  Each disk has its own UFS+J filesystem, except for the SSDs that are mirrored together with gmirror

Чет странно - никто не проорал про "медленную" и "устаревшую" UFS+J на 108 терабайтном хранилище.....

Ответить | Правка | Наверх | Cообщить модератору

66. "Компания Netflix представила сеть доставки контента Open Con..."  –4 +/
Сообщение от AlexAT (ok), 07-Июн-12, 09:30 
> Чет странно - никто не проорал про "медленную" и "устаревшую" UFS+J на
> 108 терабайтном хранилище.....

Смысл? Вопрос вышел бы риторическим. А вот почему не горячо любимая ZFS - это более интересный вопрос...

Ответить | Правка | Наверх | Cообщить модератору

71. "Компания Netflix представила сеть доставки контента Open Con..."  +1 +/
Сообщение от Shadowcaster (?), 07-Июн-12, 09:47 

> Смысл? Вопрос вышел бы риторическим. А вот почему не горячо любимая ZFS
> - это более интересный вопрос...

Потому что ZFS  в данном случае - избыточный. У них приоритет - выдавать содержимое дисков в сеть на скорости 10G, а не делать отказоустойчивый сервак.

Ответить | Правка | Наверх | Cообщить модератору

74. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от AlexAT (ok), 07-Июн-12, 10:03 
> Потому что ZFS  в данном случае - избыточный. У них приоритет
> - выдавать содержимое дисков в сеть на скорости 10G, а не
> делать отказоустойчивый сервак.

Тогда выбор платформы вообще сомнителен, поскольку отдавать 10G можно и там и сям, а поддержка 10G карточек у ядра Linux более обширна.

Ответить | Правка | Наверх | Cообщить модератору

81. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от тигар (ok), 07-Июн-12, 10:17 
> Тогда выбор платформы вообще сомнителен, поскольку отдавать 10G можно и там и
> сям, а поддержка 10G карточек у ядра Linux более обширна.

и как, много можешь дать примеров карточек, которые:
1) распространены
2) не поддерживаются fbsd
3) поддерживаются в linux
?

Ответить | Правка | Наверх | Cообщить модератору

85. "Компания Netflix представила сеть доставки контента Open Con..."  +1 +/
Сообщение от Shadowcaster (?), 07-Июн-12, 10:23 
> Тогда выбор платформы вообще сомнителен, поскольку отдавать 10G можно и там и
> сям, а поддержка 10G карточек у ядра Linux более обширна.

10G отдать на самом деле - проблема, а в контексте CDN - большая проблема. По факту тут будет (очень) много http клиентов с MTU 1500, и выбор FreeBSD + nginx более чем разумен.

Ответить | Правка | К родителю #74 | Наверх | Cообщить модератору

270. "Компания Netflix представила сеть доставки контента Open Con..."  –3 +/
Сообщение от Аноним (-), 09-Июн-12, 22:53 
> MTU 1500, и выбор FreeBSD + nginx более чем разумен.

Вот только аргументация у фанов как обычно не отличается разумностью :)

Ответить | Правка | Наверх | Cообщить модератору

96. "Компания Netflix представила сеть доставки контента Open Con..."  +1 +/
Сообщение от o (?), 07-Июн-12, 11:43 
Вы не представляете что такое отдать 10G
Ответить | Правка | К родителю #74 | Наверх | Cообщить модератору

102. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от ragus (ok), 07-Июн-12, 12:37 
потому что производительность zfs по мере приближения свободного места к концу. для CDN важнее максимально использовать имеющиеся аппаратные ресурсы, а не версионность.

ну и можно вспомнить про имевшиеся проблемы с sendfile на zfs.

Ответить | Правка | К родителю #66 | Наверх | Cообщить модератору

107. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от тигар (ok), 07-Июн-12, 15:09 
> ну и можно вспомнить про имевшиеся проблемы с sendfile на zfs.

раскажи о них, не томи.

Ответить | Правка | Наверх | Cообщить модератору

114. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от Wulf (??), 07-Июн-12, 16:48 
>> ну и можно вспомнить про имевшиеся проблемы с sendfile на zfs.
> раскажи о них, не томи.

двойная буферизация zfs->vm + проблемы с кешированием

Ответить | Правка | Наверх | Cообщить модератору

115. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от тигар (ok), 07-Июн-12, 16:52 
>>> ну и можно вспомнить про имевшиеся проблемы с sendfile на zfs.
>> раскажи о них, не томи.
> двойная буферизация zfs->vm + проблемы с кешированием

и они не решаемы, правда?;)

Ответить | Правка | Наверх | Cообщить модератору

124. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от AlexAT (ok), 07-Июн-12, 18:01 
> и они не решаемы, правда?;)

вот это и называется - "костылить"

Ответить | Правка | Наверх | Cообщить модератору

125. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от тигар (ok), 07-Июн-12, 18:03 
>> и они не решаемы, правда?;)
> вот это и называется - "костылить"

не правда, это называется "иметь мозг и уметь им пользоваться"
попробуй сам найди, почему это называется именно так, как я написал.

Ответить | Правка | Наверх | Cообщить модератору

301. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от Аноним (-), 10-Июн-12, 16:10 
> не правда, это называется "иметь мозг и уметь им пользоваться"

Это называется находить проблемы на ровном месте а потом бороться с ними. Или проще говоря, донкихотство.


Ответить | Правка | Наверх | Cообщить модератору

307. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от тигар (ok), 11-Июн-12, 01:31 
>> не правда, это называется "иметь мозг и уметь им пользоваться"
> Это называется находить проблемы на ровном месте а потом бороться с ними.
> Или проще говоря, донкихотство.

ты наверное (как и алехат) не знаешь, о чем в 114 коменте написал Wulf.

Ответить | Правка | Наверх | Cообщить модератору

117. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от Аноним (-), 07-Июн-12, 16:59 
А надо? Вопрос задач. Да вам и так вверху накомментили.
Ответить | Правка | К родителю #66 | Наверх | Cообщить модератору

129. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от Аноним (-), 07-Июн-12, 18:08 
> Смысл? Вопрос вышел бы риторическим. А вот почему не горячо любимая ZFS
> - это более интересный вопрос...

Тонко!

Ответить | Правка | К родителю #66 | Наверх | Cообщить модератору

300. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от Аноним (-), 10-Июн-12, 16:10 
> Смысл? Вопрос вышел бы риторическим.

Ну так нормальный человек сделает бенчи и сам поймет что выбросить надо. Фанат любой ценой втолкает свой микроскоп для вбивания им гвоздей.

Ответить | Правка | К родителю #66 | Наверх | Cообщить модератору

67. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от Shadowcaster (?), 07-Июн-12, 09:41 
У них не одно хранилище, у них же написано - по файловой системе на каждый жесткий диск, кроме 2 SSD с кешем и системой в софт-зеркале. Как я понимаю, поддержанием нужного количества копий данных занимается не OS, а софт на более высоком уровне, и такая мелочь как выход диска или сервака из строя никого не беспокоит.
Ответить | Правка | К родителю #60 | Наверх | Cообщить модератору

118. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от filosofem (ok), 07-Июн-12, 17:40 
>У них не одно хранилище, у них же написано - по файловой системе на каждый жесткий диск, кроме 2 SSD с кешем и системой в софт-зеркале. Как я понимаю, поддержанием нужного количества копий данных занимается не OS, а софт на более высоком уровне, и такая мелочь как выход диска или сервака из строя никого не беспокоит.

Логично. Осталось объяснить зачем журналирование.

Ответить | Правка | Наверх | Cообщить модератору

135. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от Slava (??), 07-Июн-12, 19:16 
а журналирование потому что fsck
Ответить | Правка | Наверх | Cообщить модератору

145. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от filosofem (ok), 07-Июн-12, 21:00 
А подробнее, как это относится к вышеописанной ситуации?
Ответить | Правка | Наверх | Cообщить модератору

151. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от Аноним (-), 08-Июн-12, 03:33 
> А подробнее, как это относится к вышеописанной ситуации?

Прямым образом. Если ни кого не беспокоит выход сервака из строя, это не значит, что дозволено и чеку работать сутки.

Ответить | Правка | Наверх | Cообщить модератору

160. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от filosofem (ok), 08-Июн-12, 11:15 
И это причина занижения скорости записи в 2 раза и увеличения износа дисков?
Если машина будет дохнуть раз в год и fsck будет длиться сутки, то ее средняя скорость чтения/записи данных уменьшится на 1/365, то есть в пределах погрешности измерения.

Кроме того, если у нас дублирование и проверки целостности выше этажом, то и чеки с восстановлением фс как-то не нужны. Сдох рейдконтроллер? Не проблема ― заменяем железку, mkfs во все диски и добавляем машину в пул.

Ответить | Правка | Наверх | Cообщить модератору

164. "Компания Netflix представила сеть доставки контента Open Con..."  +1 +/
Сообщение от Аноним (-), 08-Июн-12, 13:12 
По-моему, там SU-J. Какое занижение записи в два раза? Вы как-то уж совсем неприлично набрасываете.)
Ответить | Правка | Наверх | Cообщить модератору

319. "Компания Netflix представила сеть доставки контента Open Con..."  +/
Сообщение от Slavaemail (??), 18-Июн-12, 15:04 
Износа дисков нет, записи там по сравнению с чтением кот наплакал. по поводу занижения скорости - это справедливо лишь для gjournal. Но и то UFS+gjournal гораздо быстрее чем ZFS, особенно при 80% и более заполнении пула.

Но они используют SUJ - а это быстрее.

По поводу дублирования и проверок целостности этажом выше.... ну да, на случай критических поломок так и будет. но это не значит что нужно пренебрежительно относиться ко временеи загрузки железяки. в течение даунтайма железяки клиенты могут брать контент по более дорогим и или медленным каналам.

Ответить | Правка | К родителю #160 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру