Вариант для распечатки		Пред. тема | След. тема
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы		[ Отслеживать ]

Для Ext4 представлена поддержка контрольных сумм для проверк..., opennews (??), 02-Июн-12, (0) [смотреть все] А производительность на сколько просядет , Аноним (-), 11:25 , 02-Июн-12, (1) +3 // не идиоты же пишут, там куча реализаций крк32 под разные процессорные возможност, ВовкаОсиист (ok), 11:29 , 02-Июн-12, (2) +3 видимо в зависимости от проца, я надеюсь он догадался поюзать все современные оп, Анонимус_б6 (?), 11:29 , 02-Июн-12, (3) // в ядре фантазёр, Аноним (-), 12:05 , 02-Июн-12, (7) –14 // Да В ядре Достаточно посмотреть его исходники Или хотя бы 1 раз его собрать са, ананим (?), 13:04 , 02-Июн-12, (13) В каком месте это вообще здесь уперлось На микро экзо нано ядрах нет файловой п, BratSinot (?), 16:45 , 02-Июн-12, (28) Там счет crc32 покажется ерундой на фоне постоянного переключения контесктов , Аноним (-), 17:03 , 02-Июн-12, (31) +3 Отдельный сервер для расчёта CRC-32, да , Аноним (-), 17:34 , 02-Июн-12, (36) +2 Я бы лучше и не ответил , ананим (?), 18:36 , 02-Июн-12, (48) А разве такое выносится в отдельный процесс Просто будет библиотека, оптимизиро, Аноним (-), 21:21 , 02-Июн-12, (73) Вы вообще понимаете что говорите Где статическая да и любая другая линковка и , ананим (?), 21:39 , 02-Июн-12, (74) цитата Зубинского в контексте микторядра MINIX 3 За всякое улучшение надо п, Voviandr (??), 23:43 , 02-Июн-12, (94) +1 Да забодали вы с вашими сферическими конями в вакууме Сделайте практическую реа, Аноним (-), 00:59 , 04-Июн-12, (141) +3 вы выдвигаете тезис, что мои утверждения про полпроцента необоснованны, так как , Voviandr (??), 02:01 , 04-Июн-12, (160) +1 У меня есть валидное оправдание я на уровне инженерной интуиции вполне могу пре, Аноним (-), 02:29 , 04-Июн-12, (166) –2 Куча профильных ошибок для специалиста если вы специалист В том то и дело что , ананим (?), 18:58 , 02-Июн-12, (52) +1 В пингвине к счастью никто не страдает настолько упоротой некромансией чтобы исп, Аноним (-), 22:42 , 02-Июн-12, (87) Для вас это будет сюрпризом, но в библиотеке Glibc, которая используется почти в, Аноним (-), 09:31 , 03-Июн-12, (106) +2 Да хоть бы XOR по дефолту Что это меняет , filosofem (ok), 12:54 , 03-Июн-12, (111) –1 ещё бы ведь это ложь Dhttp www gnu org software libc manual html_node crypt, ананим (?), 13:07 , 03-Июн-12, (112) –1 Не вырывайте из контекста, а читайте дальше где написано, что по дефолту DES, а , Аноним (-), 23:27 , 03-Июн-12, (140) Ок Я не буду вырывать , а вы научитесь читать Нет никакого дефолта Есть переме, ананим (?), 09:42 , 04-Июн-12, (177) А причём тут glibc если crypt с DES это стандарт POSIX glibc наоборот добавляет, Аноним (-), 22:11 , 03-Июн-12, (130) +2 При том, что аноним выше ухмылялся про DES во FreeBSD, в то время как crypt и в , Аноним (-), 23:19 , 03-Июн-12, (139) Какой в попу дефолт Салт нужен в любом случае И это первое Второе 8212 какое, ананим (?), 09:37 , 04-Июн-12, (176) Осталось найти хоть 1 пароль в современном пингвине зашифрованный именно так , Аноним (-), 01:00 , 04-Июн-12, (142) Вообще-то надо найти впингвине хоть один вызов не умеющий многобайтовые символы , ананим (?), 11:06 , 04-Июн-12, (183) устаревшее барахло это grep в linux , Аноним (-), 20:50 , 05-Июн-12, (207) Мимо 8212 http www opennet ru opennews art shtml num 25926ЗыжКакое отношени, ананим (?), 07:17 , 06-Июн-12, (211) пример поиска в utf8 для grep-2 9 wget -O - http opennet ru 2 1 124 iconv , ананим (?), 07:30 , 06-Июн-12, (212) В пределах погрешности, Аноним (-), 11:35 , 02-Июн-12, (4) не должно просесть, здесь запись на диск намного тормознее вычисления crc, Аноним (-), 12:04 , 02-Июн-12, (6) +1 // Диски уже не покупают , pavlinux (ok), 14:56 , 02-Июн-12, (16) –1 // А что покупают SSD , анон (?), 15:28 , 02-Июн-12, (22) Примерно так На механические диски цены после наводнения в тайване довольно кон, Аноним (-), 17:32 , 02-Июн-12, (35) А как быть с большими объемами Цены на SSD все еще довольно высокие Цены на HDD, анон (?), 17:39 , 02-Июн-12, (39) Ну вот и выбираем между конскими ценами и еще более конскими , Аноним (-), 04:58 , 04-Июн-12, (174) угу админ локал хоста замечен А что бы данный админ сказал о raid6 который имее, Аноним (-), 14:58 , 02-Июн-12, (17) // А у меня дома RAID 60 на SAS SSD c суммарной записью 12Gb s, или мне это присни, pavlinux (ok), 15:05 , 02-Июн-12, (19) –1 а без SSD получить столько , Аноним (-), 12:03 , 03-Июн-12, (107) Конечно нет, да и с SSD столько не получишь, это ж маркетинг, как и 6Gb s и 3Gb , pavlinux (ok), 01:01 , 04-Июн-12, (143) В моем случае увы не маркетинг А реальная стойка с винтами - нечто типа того чт, Аноним (-), 01:26 , 04-Июн-12, (146) Давай скрины iozone -a - u -p -B -e -E А то эти SANы NASы - типа кэшуруют , а, pavlinux (ok), 13:39 , 04-Июн-12, (186) +1 сам ты жертва маркетинга Некоторые подобные железки собирают , Аноним (-), 17:54 , 04-Июн-12, (189) Если начальник не жмот, там и процы должны быть соответствующие , Аноним (-), 16:59 , 02-Июн-12, (30) +1 начальник не жмот - но вот в чем проблема - подсчет crc32 от такого потока - съе, Аноним (-), 12:06 , 03-Июн-12, (108) А че за железка такая, у которой скорость рандомной записи на raid 6 сравнима со, filosofem (ok), 13:07 , 03-Июн-12, (113) Можно сказать самосбор - аналоичный тому что продает NETAP только у NETAP наруж, Аноним (-), 09:54 , 04-Июн-12, (179) По моему, в новости написано о том, что будет У вас, наверное реализовано что-то, XoRe (ok), 18:48 , 03-Июн-12, (126) У нас другое - но хорошо показывает использования CPU на больших потоках данных,, Аноним (-), 09:52 , 04-Июн-12, (178) А у вас проверяются данные, или мета данные Наверное, у вас данные - тогда понят, XoRe (ok), 17:56 , 04-Июн-12, (190) Проверяется все Но если для данных - это выльется в загрузку CPU, то для метада, Аноним (-), 11:57 , 05-Июн-12, (201) Просто вы написали подсчет crc32 от такого потока - съедает 4 ядра и 12 Вы нев, XoRe (ok), 22:54 , 08-Июн-12, (213) Кстати в догонку - лучше бы сделали поддержку T10 DIF DIX Хотя бы половина зада, Аноним (-), 10:01 , 04-Июн-12, (181) Ну, положим не ГБ, а Гб Предполагаю, что сие можно будет отключить, когда оно, XoRe (ok), 18:48 , 03-Июн-12, (125) Ну допустим именно 3ГБ с - 4 контролера на 6 Gb s и backplane на 24 sas диска , Аноним (-), 01:28 , 04-Июн-12, (147) А если pci-e ssd взять , Аноним (-), 17:04 , 02-Июн-12, (32) +1 // вы все здесь какие-то все упоротые собрались У какого-то придурка там рейд выда, Аноним (-), 19:45 , 02-Июн-12, (55) +9 на каждую операцию операцию с диском приходится ровно одна операция с MD видимо , Аноним (-), 12:08 , 03-Июн-12, (109) Насчет упоротых соглашусь с предыдущим Анонимом , filosofem (ok), 13:17 , 03-Июн-12, (114) Месье, как я понимаю, в отличие от Вас, знал, что не при каждом обращении к файл, Yakov Markovitch (?), 16:40 , 03-Июн-12, (122) +1 gt оверквотинг удален Упроотые это все тестировали и писали реализаю этого ког, Аноним (-), 01:35 , 04-Июн-12, (150) –1 gt оверквотинг удален ах да, забыл - когда у тебя один raid 5,6 тогда io AT д, Аноним (-), 09:56 , 04-Июн-12, (180) gt оверквотинг удален 1 relatime _является_ опцией по умолчанию, на всякий с, Yakov Markovitch (?), 15:07 , 04-Июн-12, (188) gt оверквотинг удален welcome to HPC world пример - Cray acceptance testing п, Аноним (-), 17:59 , 04-Июн-12, (191) 30MB s OK, согласен, пишем на каждую операцию по странице - 120MB c 20 нагруз, Yakov Markovitch (?), 19:59 , 04-Июн-12, (192) +1 вы твердо уверены что MD операции могут выполняться паралельно в одной директори, Аноним (-), 12:07 , 05-Июн-12, (203) знаешь что я тоже могу сейчас у себя на локалхосте написать быдлокод и заявить, all_glory_to_the_hypnotoad (ok), 23:32 , 04-Июн-12, (195) Обратитесь в подразделение Cray за обоснованием этих цифр , Аноним (-), 11:58 , 05-Июн-12, (202) ах да, требуемые 15к unlink s это для кластера BlueWaters - TOP7 если склероз не, Аноним (-), 19:30 , 05-Июн-12, (206) Ты откуда вылез ext уже лет 5 как монтируется по умолчанию с relatime, Аноним (-), 22:14 , 03-Июн-12, (131) А мы виноваты что технологии - вот они Пошел в магазин да купил Упоротый - это, Аноним (-), 01:03 , 04-Июн-12, (144) –1 Я, честно говоря, свосем не понял вашего вопроса А именно что вы там в магазине, all_glory_to_the_hypnotoad (ok), 23:38 , 04-Июн-12, (196) +2 И как оно будет работать Ну вырубися у меня комп во время записи, файл не запис, Аноним (-), 11:53 , 02-Июн-12, (5) // Ну ёбни по диску кувалдой во время записи и проверь что будет CRC используютс, pavlinux (ok), 15:00 , 02-Июн-12, (18) // здесь 8212 метаданных, Аноним (-), 17:35 , 02-Июн-12, (37) // псевдо-, мета-, квази-, суб-, в общем данных , pavlinux (ok), 20:35 , 02-Июн-12, (64) –1 Сохранность данных во время операций записи, связанная со сбоями оборудования, н, анон (?), 15:22 , 02-Июн-12, (21)   // В т ч забота ФС Журналирование - попытка решить эту проблему Не важно что отка, Аноним (-), 17:40 , 02-Июн-12, (41)   // Заботой ФС это было бы в том случае, если бы она это могла сделать хотя бы теоре, анон (?), 18:15 , 02-Июн-12, (46)   А также ECC память, проверка целостности каждого блока данных записанного на дис, Аноним (-), 01:36 , 03-Июн-12, (98)   Проверка целостности данных, на сколько я знаю, происходит при передаче через ин, анон (?), 13:35 , 03-Июн-12, (115)   Ман версионные FS Никакой атомарности нам нахрен не нужно , Аноним (-), 02:03 , 03-Июн-12, (102)   На сколько понял, разница с обычными ФС только при изменении данных, т е они не, анон (?), 12:41 , 03-Июн-12, (110)   Да При том только измененных блоков И меняются структуры описывающие размещени, Аноним (-), 01:30 , 04-Июн-12, (148)   В контексте обсуждений это та же хрень, что и с журналом, только сбоку Тут обсу, анон (?), 02:32 , 04-Июн-12, (167)   С этой точки зрения атомарность - костылик обычным ФС по сути А у этих некое, Аноним (-), 01:37 , 04-Июн-12, (152)   Атомарность - свойство, а не сущность, т е иными словами не может быть костылем, анон (?), 02:39 , 04-Июн-12, (168)   Журнал решает совсем другую проблему - поддерживает целостность самой ФС, а не д, Аноним (-), 19:50 , 02-Июн-12, (56) +1   кто сказал zfs , Аноним (-), 20:43 , 03-Июн-12, (129)   // И она конечно гарантирует, что например при отключении питания все данные будут , анон (?), 22:14 , 03-Июн-12, (132)   Такие ФС гарантируют что у вас или уж старая версия файла, или новая А не непой, Аноним (-), 02:10 , 04-Июн-12, (165)   К сожалению тут, как уже отписался выше на 1 пост, обсуждается мной озвученная с, анон (?), 02:41 , 04-Июн-12, (169)   Во первых, журнал - один В него сначала пишутся намерения Если облом на этой ф, Аноним (-), 17:26 , 02-Июн-12, (33) // В COW тоже накладные расходы высокие При изменении файла, он еще и копируется в, Аноним (-), 17:38 , 02-Июн-12, (38) // Глупости Пишется в новое место только блок кластер сектор зависит от термина мин, ананим (?), 18:34 , 02-Июн-12, (47) такой же объём для сектора, но никто не гранулирует по секторам Грануляция идёт, Аноним (-), 20:00 , 02-Июн-12, (57) DВсё верно почти Вот только всё ЭТО только отговорка от темы перезаписи все, ананим (?), 21:55 , 02-Июн-12, (80) ЗзыжВо-первых это вопрос терминологии Во-аторых размер сектора бывает разный А, ананим (?), 22:01 , 02-Июн-12, (83) это называется кластером и никто не оперирует в ФС сектором , Аноним (-), 22:35 , 02-Июн-12, (85) БЛОКОМ сознательно заметаете свой слив , ананим (?), 23:15 , 02-Июн-12, (89) А все-равно тупо У нормальных людей нормальные экстентные аллокаторы уж давно, , Аноним (-), 01:32 , 04-Июн-12, (149) –2 С нетерпением ждём и надеемся Счастливые пользователи ZFS Так когда жда, iZEN (ok), 01:40 , 04-Июн-12, (153) Это того который даже отдебажить нормально не могут до сих пор, так что полно ви, Аноним (-), 02:07 , 04-Июн-12, (164) Вот только вопрос кто кому и чего покажет , schwed (?), 11:35 , 04-Июн-12, (184) какая разница где она происходит, этот процесс порождает несколько грязных класт, Аноним (-), 22:36 , 02-Июн-12, (86) Так что там с перемещением всего файла и оверхедом коу , ананим (?), 23:17 , 02-Июн-12, (90) про весь файл писал кто-то другой , Аноним (-), 01:16 , 03-Июн-12, (97) D, ананим (?), 01:40 , 03-Июн-12, (99) Я писал Первый снепшот в LVM2 дает сильное замедление в работе, последующие пра, Аноним (-), 01:42 , 03-Июн-12, (100) Я думаю что теперь вы понимаете почему так активно пилят btrfs Там снапшоты - н, Аноним (-), 01:36 , 04-Июн-12, (151) Никуда там файл не копируется При записи изменений 1 В сторонку пишется блок с, Аноним (-), 01:17 , 04-Июн-12, (145) Если формат метаданных изменился, значит получается несовместимость с предыдущим, АнонимЪ (?), 14:01 , 02-Июн-12, (14) // Вариант с простым игнорированием данной информации более ранними версиями Вами н, анон (?), 15:31 , 02-Июн-12, (23) Не совсем понятно это чего Что разе ехт4 ехт2 не могла чекать данные А други, anonymous (??), 14:14 , 02-Июн-12, (15) // разрушение метаданных может вынудить fsck порубить нормальные данные в капусту , Аноним (-), 17:39 , 02-Июн-12, (40) // Это понятно Понятно даже почему это было на кассетах от БК,но как это может про, anonymous (??), 23:33 , 02-Июн-12, (92) // Наверное потому что это файловой системой толком не являлось А чексумм блоков с, Аноним (-), 01:40 , 04-Июн-12, (154) А есть инфа как изменится занимаемое место , Panasonic1 (ok), 15:06 , 02-Июн-12, (20) // увеличится на 4 байта per inode петросян, Аноним (-), 20:02 , 02-Июн-12, (58) Да, посмотрели разработчики на ZFS BTRFS и закричали мы тоже такое себе хотим , dalco (ok), 15:39 , 02-Июн-12, (24) +1 // Зачем это надо не расшифруете , анон (?), 15:46 , 02-Июн-12, (26) // Чтобы обнаруживать сбои накопителей или линков к ним, например В момент их появ, Аноним (-), 17:31 , 02-Июн-12, (34) // Во первых, на сколько мне известно, хранимая на винте информация п у имеет избы, анон (?), 18:00 , 02-Июн-12, (44) К сожалению, нет гарантии, что на винте записаны те самые данные, что мы хотели , dalco (ok), 18:43 , 02-Июн-12, (51) +2 Ошибки интерфейса отлавливаются точно см SMART Буферная память ЖД также може, анон (?), 19:12 , 02-Июн-12, (53) –1 В идеальном мире из идеальных программ и идеальной аппаратуры вообще ни журналов, dalco (ok), 20:19 , 02-Июн-12, (62) +4 Я говорил о реально отслеживаемых ошибках, а не о способах их диагностирования , анон (?), 20:35 , 02-Июн-12, (65) кто будет восстанавливать запорченные реплики нормальными Что вы тут вещаете эт, Аноним (-), 20:47 , 02-Июн-12, (67) То, что я вещаю есть способ решения задачи То, что Вы говорите заметьте отсу, анон (?), 20:57 , 02-Июн-12, (70) –2 Имеет, к сожалению Целостность FS от всего вышеперечисленного нехило зависит И, dalco (ok), 20:56 , 02-Июн-12, (69) А то, что все это зависит от прямости рук админа От этого она не должна защищат, анон (?), 21:10 , 02-Июн-12, (72) Хм, попробую объяснить последний раз Есть железо, НЕидеальное железо Есть FS,, dalco (ok), 21:39 , 02-Июн-12, (75) +1 Все, что я узнал из вашего поста - не хочу знать где как и что работает, хочу вс, анон (?), 21:54 , 02-Июн-12, (78) страшно похоже на знакомую на шкуре полемикуленивого по определению админа и м, mix (??), 23:47 , 02-Июн-12, (95) тут всё прозаичнее, полемика условного технаря с ламерьём это анон Только лам, Аноним (-), 15:49 , 03-Июн-12, (119) Прозаичнее, это да Думаю что проблема в том, что моя точка зрения не модная и, анон (?), 16:28 , 03-Июн-12, (121) Господа, все довольно просто Были времена, когда мне действительно было интерес, dalco (ok), 19:11 , 03-Июн-12, (128) +1 Так с этого и надо было начинать ИМХО все хорошее начинается с велосипедов и не, анон (?), 22:29 , 03-Июн-12, (133) Поздравляю, ваш мозг заржавел Правда с этим обычно не поздравляют Небольшой ф, Аноним (-), 02:05 , 04-Июн-12, (163) Ваша точка зрения не требует знаний, она ровно такая же модная как и все здесь о, Аноним (-), 22:51 , 03-Июн-12, (136) +2 Ваше мнение очень важно для нас Ждите, мы сами Вам позвоним ЗЫ Еще один аноним , анон (?), 22:56 , 03-Июн-12, (138) Что, в две смены бедняга поди ишачишь Завтра серверов старент сотни тысяч и теб, kurokaze (ok), 13:56 , 03-Июн-12, (116) –1 Даже круче ECC, которая при сбое чтения пытается скорректироваться самим винтом, Аноним (-), 01:49 , 04-Июн-12, (155) И что вам не понравилось, будет ошибка - сообщит, будет исправимая ошибка - не с, анон (?), 22:13 , 04-Июн-12, (193) ему аналог CRC нужен совсем по другой причине Чтение с физического носителя идё, all_glory_to_the_hypnotoad (ok), 23:53 , 04-Июн-12, (197) Во-первых, спасибо за детали работы, не знал, хоть к делу это и не имеет отношен, анон (?), 00:45 , 05-Июн-12, (198) Не гарантирует Кроме чтения с физического носителя есть ещё firmware котроллера, all_glory_to_the_hypnotoad (ok), 10:50 , 05-Июн-12, (200) Приведу ссылку http rlab ru doc s m a r t html 1511и цитату Это лишь пример о, анон (?), 13:54 , 05-Июн-12, (204) это пример медийных ошибок, а не буфера Точно такие же ошибки как при чтении с, all_glory_to_the_hypnotoad (ok), 22:06 , 05-Июн-12, (209) Вы либо студент-идиот, либо умело здесь им прикидываетесь Я разговариваю с вами , анон (?), 23:43 , 05-Июн-12, (210) Да, во избежание недопонимания из-за многабуков, обсуждаемые контрольные суммы о, анон (?), 00:47 , 05-Июн-12, (199) ты же сам сбежишь от такой ФС первым , Аноним (-), 20:02 , 02-Июн-12, (59) Я один не вижу use case для этого Там, где нужна надёжность, подсчётом контроль, Crazy Alex (??), 15:44 , 02-Июн-12, (25) –1 // Черно-белый мир , Аноним (-), 16:35 , 02-Июн-12, (27) +1 // Ну так вам либо хоть как-то важны данные тогда их надо бэкапить или хотя бы рез, Crazy Alex (??), 17:44 , 02-Июн-12, (42) // И сейчас ничего не изменилось - по-прежнему нужен аппаратный контроллер , Аноним (-), 22:37 , 03-Июн-12, (135) Смотря где В ряде случаев можно и без него В том плане что это просто кучка sa, Аноним (-), 02:03 , 04-Июн-12, (162) Изменилось - раньше он был _необходим_, schwed (?), 14:02 , 04-Июн-12, (187) придурок, рейд не обеспечивает проверку данных, он _не_ считает контрольные сумм, Аноним (-), 20:07 , 02-Июн-12, (60) –1 // Какой умный и вежливый аноним Вы когда-нибудь слышали, как работают пятый и шес, Аноним (-), 21:54 , 02-Июн-12, (79) +2 // А это что-то меняет Что конкретно, на ваш взгляд, при нормальной работе может _д, iZEN (ok), 23:26 , 02-Июн-12, (91) Если не знаете - книжки почитайте, статьи Зачем к людям-то приставать , Аноним (-), 23:40 , 02-Июн-12, (93) +2 Это же изен Не нести фигню он не может клюв перевешивает , Аноним (-), 02:01 , 04-Июн-12, (161) Raid-6 может задетектить сбойный диск Ценой за это является лишний шпиндель пущ, Аноним (-), 01:52 , 04-Июн-12, (156) Современные hard- и soft-контроллёры RAID-1 тоже И что Эта цена при нормальном-, iZEN (ok), 03:50 , 04-Июн-12, (173) неужели ж 5 и 6 рейды чексуммят мою ФС осподи, чего только на опеннете не прочи, Михрютка (?), 14:04 , 03-Июн-12, (118) В какой-то роде В общем случае код коррекции ошибок является и кодом детектиров, Аноним (-), 02:00 , 04-Июн-12, (159) грамотей-опричник в треде you doing it wrong ну-ну я ж говорю, чего только на о, Михрютка (?), 15:54 , 05-Июн-12, (205) hint ошибки бывают не только аппаратные, но и программные , Михрютка (?), 21:56 , 02-Июн-12, (81) // Ну так вероятность ошибки в логике Ext4 ничуть не меньше чем вероятность ошибок , Crazy Alex (??), 22:54 , 02-Июн-12, (88) // и что , Михрютка (?), 00:52 , 03-Июн-12, (96) В чём хинт-то , Crazy Alex (??), 02:01 , 03-Июн-12, (101) В том, что ошибки бывают не только аппаратные, но и программные , Аноним (-), 02:40 , 03-Июн-12, (103) не тупи контроль целостности данных на уровне ФС и контроль целостности данных , Михрютка (?), 14:01 , 03-Июн-12, (117) ну тогда это получается отладочная возможность для разработчиков FS, не более, Crazy Alex (??), 17:56 , 03-Июн-12, (123) почему рейды тоже глючат и сбоят особенно саташные промисы без батареек или вс, Михрютка (?), 18:47 , 03-Июн-12, (124) вы чего такое все курите аппаратный ECC в SDRAM может спасти от разрушения дан, а (?), 18:48 , 03-Июн-12, (127) Имхо, бесполезно Лучше бы для RAID1 такое сделали - вот там оно действительно, , Аноним (-), 16:57 , 02-Июн-12, (29) // Вот-вот Здесь оно на месте было бы , Crazy Alex (??), 17:45 , 02-Июн-12, (43) +1 Просто ради интереса, по сообщениям с RAID контроллера или из SMART нельзя это о, анон (?), 18:40 , 02-Июн-12, (50) // А если они ничего не говорят, а данные с зеркал приходят разные , Аноним (-), 19:40 , 02-Июн-12, (54) // Тогда как гарантированно определить что это не контроллер , анон (?), 20:18 , 02-Июн-12, (61) И да, это реальная ситуация или из раздела Истории одного анонимуса Если реал, анон (?), 20:21 , 02-Июн-12, (63) От балды Одно из зеркал назначается первичным , и при несовпадении данных, бло, Аноним (-), 21:53 , 02-Июн-12, (77) А в логах ошибок при этом ни каких не пишется и SMART не меняется Т е тупо по , анон (?), 22:09 , 02-Июн-12, (84) А вот это - как повезет Вообще, как бы не сильно то удобно и быстро SMART пос, Аноним (-), 01:55 , 04-Июн-12, (157) Т е валидность одного из зеркал определяется сторонними средствами относительно, анон (?), 02:48 , 04-Июн-12, (170) имелось ввиду НЕ проблемами железа , анон (?), 02:50 , 04-Июн-12, (171) Для RAID1 надо сделать скоростную доставку в ближайшую дурку Бо находящие в здр, Аноним (-), 22:33 , 03-Июн-12, (134) Интересно, а поддержка вторых контрольных сумм для проверки целостности этих уже, Аноним (-), 03:44 , 03-Июн-12, (104) // Это делается проще Берут другой алгоритм подсчета CRC и просчитывают им все тож, dalco (ok), 07:56 , 03-Июн-12, (105) // это вы сейчас через задницу увеличили битность контрольной суммы, Аноним (-), 22:55 , 03-Июн-12, (137) +2 // И да, и нет Половинки мегаCRC получаются независимы друг от друга Их вычисля, dalco (ok), 12:49 , 04-Июн-12, (185) две CRC вычесленные по разным алгоритмам дают меньшую битность чем одно CRC с бо, all_glory_to_the_hypnotoad (ok), 22:53 , 04-Июн-12, (194) Так, стоп, а кто будет проверять что вторые контрольные суммы - правильные , Аноним (-), 01:58 , 04-Июн-12, (158) // Если уж прикалываться, и делать контрольную сумму на контрольную сумму, то предл, анон (?), 03:07 , 04-Июн-12, (172) Вы бы хоть почитали что-нибудь про CRC вместо того чтобы бред нести , ыгчч (?), 10:34 , 04-Июн-12, (182) +1 1,5,14,15,20,24,25,29,104

Сообщения

[Сортировка по времени | RSS]

	21. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от анон (?), 02-Июн-12, 15:22
	> И как оно будет работать? Ну вырубися у меня комп во время записи, > файл не записался и что > будет? Выяснит он, что контрольная сумма > не сходится, но данные то потеряются? Сохранность данных во время операций записи, связанная со сбоями оборудования, не забота ФС (может есть и такие, но я о них не знаю, да и не интересовался), ее забота сохранение уже содержащихся в ней данных, что и делает журнал, поддерживая свою внутреннюю структуру в корректном состоянии. Я не админ, но на сколько мне известно в некоторых контроллерах ЖД, как раз по этой причине, есть свой ИБП с аккумулятором позволяющий завершить корректно работу с ЖД в случае отключения питания. Я также уверен, что эксплуатация систем, от которых требуется хоть какая-то надежность без ИБП вообще сродни самоубийству, так что Ваша ситуация скорее исключение, чем реальное положение вещей. ЗЫ Если что не так сказал - пусть более знающие поправят.
	Ответить | Правка | К родителю #5 | Наверх | Cообщить модератору

	41. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от Аноним (-), 02-Июн-12, 17:40
	В т ч забота ФС. Журналирование - попытка решить эту проблему. Не важно что отказало оборудование или софт повис. Конечно можно обеспечить избыточность другим способом, в т ч рейдами и снэпшотами, но на каждый комп это не поставишь как и ибп.
	Ответить | Правка | Наверх | Cообщить модератору

	46. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от анон (?), 02-Июн-12, 18:15
	> В т ч забота ФС. Журналирование - попытка решить эту проблему. Не > важно что отказало оборудование или софт повис. > Конечно можно обеспечить избыточность другим способом, в т ч рейдами и снэпшотами, > но на каждый комп это не поставишь как и ибп. Заботой ФС это было бы в том случае, если бы она это могла сделать хотя бы теоретически. Но реалии таковы, что обеспечение гарантированной записи в случае сбоя возможно лишь в случае обеспечении атомарности этой операции, что по определению невозможно т.к. это сложная операция над большим количеством данных. Во время нее необходимо обеспечивать полную работоспособность системы. ФС, в этом случае, может лишь уменьшить вероятность своего разрушения или повреждения данных избегая или обособляя и оптимизируя критические операции, которые имеют место при записи, т.е. приближая их к определению "атомарная". То, о чем Вы говорите - не проблема избыточности. Во всяком случае избыточности системы хранения. Проблема в обеспечении работы без перебоев. В случае рейда, также нет 100% гарантии, что данные успеют записаться хотя бы на один жесткий диск. То, о чем Вы говорите лишь вероятность, а не гарантия. По поводу ИБП, то за все приходится платить. Если нужна стабильность и надежность, то Вам придется приобретать ИБП т.к. это единственный реальный способ обеспечить именно гарантию.
	Ответить | Правка | Наверх | Cообщить модератору

	98. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от Аноним (-), 03-Июн-12, 01:36
	А также ECC память, проверка целостности каждого блока данных записанного на диск (не помню как зовется технология) и еще много чего, но 100% гарантия вряд ли достижима на практике. Естественно, на серверах с важными данными девяток в этой цифре должно быть ооочень много. ext4 работает на куче простых устройств и компов, стрелять из пушки во воробьям (внедряя абсолютно все технологии по защите данных) тоже не стоит.
	Ответить | Правка | Наверх | Cообщить модератору

	115. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от анон (?), 03-Июн-12, 13:35
	Проверка целостности данных, на сколько я знаю, происходит при передаче через интерфейс диска и при считывании с диска (за счет этого работает внутренняя диагностика), так что за данные записанные/считанные с диска можно практически не беспокоиться. Про контроллеры и отслеживание ошибок в них ничего не знаю. А на счет пушки и воробьев, то да, согласен полностью, от включения проверок всегда и везде большого толку не будет, а минусы в виде сложности (потенциально больше ошибок), тотальной "велосипедности", снижения производительности и гибкости, гарантированы.
	Ответить | Правка | Наверх | Cообщить модератору

	102. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от Аноним (-), 03-Июн-12, 02:03
	> это сложная операция над большим количеством данных Ман версионные FS. Никакой атомарности нам нахрен не нужно.
	Ответить | Правка | К родителю #46 | Наверх | Cообщить модератору

	110. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от анон (?), 03-Июн-12, 12:41
	На сколько понял, разница с обычными ФС только при изменении данных, т.е. они не изменяются, а создается измененная копия (версия). Как это решает проблему записи данных на диск непонятно. То, что ФС позволяет откатиться назад, к валидному состоянию, так это решает проблемы исключительно самой ФС и не решает проблемы пользователя, гарантируя целостность его данных.
	Ответить | Правка | Наверх | Cообщить модератору

	148. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от Аноним (-), 04-Июн-12, 01:30
	> На сколько понял, разница с обычными ФС только при изменении данных, т.е. > они не изменяются, а создается измененная копия (версия). Да. При том только измененных блоков. И меняются структуры описывающие размещение файла чтобы указать что вон тот кус файла теперь брать вон там. Запись - только 1 раз а не 2 как с журналом. С обычным журналом блоки сперва полетели бы в журнал а потом в основную ФС. А тут сразу в сторонку, а старый вариант блоков не трогается вот так сразу, так что на него можно даже откатиться при желании. > Как это решает проблему записи данных на диск непонятно. Избавляются от двойной записи. Да еще и запись недеструктивная. Если все нагнулось когда "выносок" не успели записать - у вас остается старая версия. А когда он успел дописаться - у вас уже будет новая версия, как ни крути. Ну и старая тоже будет, покуда GC не подгребет временные сущности. > То, что ФС позволяет откатиться назад, к валидному состоянию, так это решает > проблемы исключительно самой ФС и не решает проблемы пользователя, Очень даже решает: снесли сдуру диру. Высрaли кирпичей. Откатили в вид как было. Ощутили облегчение т.к. кирпичи высирaться прекратили :) > гарантируя целостность его данных. А фокус в том что старое состояние не разрушается. Если случится факап то как минимум вы останетесь с оригиналом старой версии, а не каким-то полуперезаписанным нечто.
	Ответить | Правка | Наверх | Cообщить модератору

	167. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от анон (?), 04-Июн-12, 02:32
	В контексте обсуждений это та же хрень, что и с журналом, только сбоку. Тут обсуждается конкретная проблема: пропадает питание системы, а файл не успел записаться. Единственное решение - обеспечить работоспособность до завершения записи, а т.к. эта самая работоспособность не управляется файловой системой, то и обеспечить гарантию записи она не может, зато может ИБП. Вот и все. Какая там ФС (версионная или нет) все равно. ЗЫ С другой стороны ФС вполне в силах (и по большей части обязана) обеспечить валидность своего состояния т.к. работает на подверженной ошибкам и поломкам системе.
	Ответить | Правка | Наверх | Cообщить модератору

	152. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от Аноним (-), 04-Июн-12, 01:37
	> Ман версионные FS. Никакой атомарности нам нахрен не нужно. С этой точки зрения атомарность - костылик обычным ФС по сути :). А у этих некое подобие оной само получается, за счет принципов работы.
	Ответить | Правка | К родителю #102 | Наверх | Cообщить модератору

	168. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от анон (?), 04-Июн-12, 02:39
	>> Ман версионные FS. Никакой атомарности нам нахрен не нужно. > С этой точки зрения атомарность - костылик обычным ФС по сути :). > А у этих некое подобие оной само получается, за счет принципов > работы. Атомарность - свойство, а не сущность, т.е. иными словами не может быть костылем по определению. Или я не понял что вы имеете под словом "костыль". А потом, какая разница введена она в дополнение к уже спроектированной архитектуре или заранее включена в нее при проектировании. Главное конечный результат. ЗЫ Вы очень вольно разделяете "обычные ФС с костыликом" и "остальные". Так уж заведено, что универсальных и в то же время самых лучших вещей не бывает, так что где-то ZFS, а где-то и FAT лучший выбор.
	Ответить | Правка | Наверх | Cообщить модератору

	56. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+1 +/–
	Сообщение от Аноним (-), 02-Июн-12, 19:50
	Журнал решает совсем другую проблему - поддерживает целостность самой ФС, а не данных. Избыточность и сохранность уже существующих данных пока что умеет фс типа ZFS и прочие, которые умеют делать реплики на несколько физически разных носителя. И  таки да, это забота ФС в частности, но не все это умеют
	Ответить | Правка | К родителю #41 | Наверх | Cообщить модератору

	129. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от Аноним (-), 03-Июн-12, 20:43
	>Сохранность данных во время операций записи, связанная со сбоями оборудования, не забота ФС может есть и такие, но я о них не знаю, да и не интересовался) кто сказал zfs?
	Ответить | Правка | К родителю #21 | Наверх | Cообщить модератору

	132. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от анон (?), 03-Июн-12, 22:14
	И она конечно гарантирует, что например при отключении питания все данные будут записаны? Не смешите.
	Ответить | Правка | Наверх | Cообщить модератору

	165. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от Аноним (-), 04-Июн-12, 02:10
	> И она конечно гарантирует, что например при отключении питания все данные будут > записаны? Не смешите. Такие ФС гарантируют что у вас или уж старая версия файла, или новая. А не непойми что, когда половина новое а половина старое. Так что вообще фиг такой файл прочтешь.
	Ответить | Правка | Наверх | Cообщить модератору

	169. "Для Ext4 представлена поддержка контрольных сумм для проверк..."	+/–
	Сообщение от анон (?), 04-Июн-12, 02:41
	>> И она конечно гарантирует, что например при отключении питания все данные будут >> записаны? Не смешите. > Такие ФС гарантируют что у вас или уж старая версия файла, или > новая. А не непойми что, когда половина новое а половина старое. > Так что вообще фиг такой файл прочтешь. К сожалению тут, как уже отписался выше на 1 пост, обсуждается мной озвученная ситуация с отключением питания.
	Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема