https://www.opennet.ru/openforum/vsluhforumID3/134323.html Кент Оверстрит (Kent Overstreet), разработчик ФС Bcachefs, предложил для включение в состав ядра Linux 6.11 изменение с реализацией в ФС Bcachefs возможности автоматического прозрачного восстановления проблемных данных, используя сохраняемые избыточные коды восстановления ошибок. Логика работы предложенной функциональности напоминает реализацию подобной функции в Btrfs: если при чтении возникает ошибка ввода/вывода или вычислено не соответствие контрольной суммы, проблемный блок данных будет автоматически перезаписан заново, при наличии избыточности для его восстановления...<br><br>Подробнее: https://www.opennet.ru/opennews/art.shtml?num=61570<br> https://www.opennet.ru/openforum/vsluhforumID3/134323.html#189 Sat, 27 Jul 2024 07:52:40 GMT Битых систем - к счастью, не у себя, а у разных любителей "подешевле" - я ловил в своей жизни предостаточно.<br>Коллекцию не собирал, просто предлагал выкинуть и заменить на нормальное железо.<br><br>И вот если начался тот самый массовый "вой о чексуммах" или появились рандомные падения с порчей структур FS / данных - всё, дальше только бэкапы "до события", потому что с вероятностью 99% часть данных прекрасно записалась битыми. Но тут уже каждый сам себе в свою меру злобный буратина.<br><br>Всё это правда было задолго до того, как тот же zfs даже в проекте появился - я тогда подрабатывал консультацией всяких разных указанных любителей. А дальше всё это как-то уже прошло мимо меня - необходимости просто не возникало.<br> https://www.opennet.ru/openforum/vsluhforumID3/134323.html#188 Fri, 26 Jul 2024 20:34:17 GMT &gt; Ну вот эти. И да, именно благодаря характерному эксперименсу, ценнику и допущениям <br><br>которого у тебя - нет, как обычно.<br><br>&gt; В общем вон то - сугубо для унесенных ветром^W^W покусанных энтерпрайзом. О <br><br>нет. Но не для невменозников талдычащих одни и те же бредовые мантры и отвергающих все что выходит за пределы их мирка.<br><br>&gt; Как я уже сказал - у нас и правда разные хотелки. Пересекающиеся, <br><br>у нас разный опыт. У тебя его нет, у меня - есть, вот и вся разница. Там где у тебя мантры и религиозные верования и что-то как-то непонятно видел - у меня знания, как оно на самом деле, а не в фантазиях.<br><br>&gt; Если 1 бэд/ошибка чтения раз в пару лет - а смысл? Это <br><br>я никогда не видел ошибок чтения раз в пару лет. Вероятно и не увижу. Ну, надеюсь.<br><br>&gt; единичный upset, он ничего не означает.<br><br>нет, он означает что что-то серьезно поломалось, потому что в исправной системе этого быть не может. Нет там никаких ошибок чтения, кроме sector read error, resetting dma и так далее, привет диску.<br><br>&gt; А я видел с месяц наза https://www.opennet.ru/openforum/vsluhforumID3/134323.html#187 Fri, 26 Jul 2024 11:19:02 GMT &gt; но разбираться в чем причина - конечно же не стал <br><br>Я и в тыкании копьем мамонта профан.<br><br>&gt; Там все делается server-side.<br><br>Особенно билд кернела реактоса из актуального сорца на моей системе? :)<br><br>&gt; Твоя "квалификация" в очередной раз пробивает днище.<br><br>А уж как меня стебли бы неандертальцы при походе на мамонта...<br><br>&gt; На твоей стороне только трекинг ТВОИХ изменений, которых у тебя нет, по <br>&gt; всей видимости, поэтому ты выбрал вообще не тот инструмент.<br><br>Вот именно ВЫБРАЛ я для себя и правда - ДРУГОЙ инструмент. И не только я. Даже реактос, вроде, допер, хоть я и не слежу уже.<br><br>&gt; Это гит имеет привычку таскать ненужную никому галиматью<br><br>Это про историю? Да, уж, кому с VCS придет в голову мотаться по версиям?! Но если мы про документацию, в эту игру могут играть и двое. Про clone --depth=1 ты, видимо, не в курсе? :)<br><br>&gt; и если весь остальной день ничего не делаешь, то оно так работает.<br><br>Не понимаю как билд ядра мешает мне делать что-то еще. Я асинхронен относительно компов/vm/одноплатников и не об https://www.opennet.ru/openforum/vsluhforumID3/134323.html#186 Fri, 26 Jul 2024 10:06:34 GMT &gt; что тебе лапочка непонятно - любые рейды кроме совсем игрушечных умеют в <br>&gt; контроль массива - сравнивают зеркала или пересчитывают и сравнивают сумму. И <br>&gt; даже встроенный планировщик для этого бывает, внутри самой железки. Какие еще <br>&gt; тебе мерещатся допущения и рояли?<br><br>Ну вот эти. И да, именно благодаря характерному эксперименсу, ценнику и допущениям - я буду за штуки типа btrfs и bcachefs. Чтобы видеть ЭТО в более вменяемом вормате, с удобным управлением, и деланое человеками, для человеков. Когда можно подоткнуть +1 девайс из того что есть, не делая мозг, получить +N места, с минимумом side effects и considerations. И все это еще нашару, без вендорлоков, камасутр с выравниваниями, нужд типа склазирования зипов и прочего брейнфака, большим разнообразием поддерживаемых конфиг, вплоть до планов что делать при отклонении от идела на 1-девайсном конфиге, кроме как "помереть с позором".<br><br>В общем вон то - сугубо для унесенных ветром^W^W покусанных энтерпрайзом. О том что кому-то может хотеться чего-то м https://www.opennet.ru/openforum/vsluhforumID3/134323.html#185 Fri, 26 Jul 2024 09:13:35 GMT &gt; Я в свое время рекатос таскал оными. И помню сколько апдейт по сети занимал, капец. Оно реально <br><br>но разбираться в чем причина - конечно же не стал<br><br>&gt; большую часть репы заново таскало на любой пшик.<br><br>оно никогда не таскает никакие части никакой репы. Сюрприз. Там все делается server-side.<br>Твоя "квалификация" в очередной раз пробивает днище.<br><br>На твоей стороне только трекинг ТВОИХ изменений, которых у тебя нет, по всей видимости, поэтому ты выбрал вообще не тот инструмент.<br><br>Это гит имеет привычку таскать ненужную никому галиматью в сотни раз превышающую объем реального кода, только ради возможности посмотреть на дифф. Причем никакой распределенностью снова не пахнет, для сложного проекта только чтоб иметь счастье получить себе полную копию а не огрызок, нужны танцы с бубнами.<br><br>&gt; Во вторых не обязательно лично смотреть на билд. Пнул, прищел за результатом потом, прогнал<br>&gt; тесты, goto 1. Ну потрачу я по 5, минут несколько раз в день, и?!<br><br>и если весь остальной день ничего не делаешь, то оно так ра https://www.opennet.ru/openforum/vsluhforumID3/134323.html#184 Fri, 26 Jul 2024 08:55:43 GMT &gt; Поверь, если у тебя проц вызывает битфлип в данных - ты это <br>&gt; заметишь очень быстро через вставание системы раком. <br><br>Опять теоретики вылезли. Вы такое ловили хоть раз на практике чтобы лечить про это? Экземпляр это делал 1) редко 2) только после прогрева.<br><br>Так что система могла спокойно пахать почти неограниченное время в крейсерском без постановки в позу. Ну может пару раз в неделю странности бывали, но кто на них обращает внимание в современных сложных системах?<br><br>Но вот вой btrfs о чексумах - это повод расследовать проблемы железа. И вот тогда, после адресного тыкания палочкой, когда оказалось что scrub хаотично сыпется в разных участках без понятных паттернов, зато "через некоторое время от начала" - уже понятнее. Методом замены подозрения с RAM были cняты, и остался - вот - странный гаденыш. Реально подглюкивал изредка после прогрева. После его замены стало - ЗБС.<br><br>&gt; никакая мегадублированная ФС тебе не поможет, потому что данные с большой <br>&gt; долей вероятности уйдут на чексумминг и запись уже https://www.opennet.ru/openforum/vsluhforumID3/134323.html#183 Fri, 26 Jul 2024 08:42:08 GMT &gt; Всё ещё хуже.<br>&gt; Не-ECC память угробит данные ещё до записи.<br>&gt; И они во все десять копий запишутся угробленными :D <br><br>Только это все если и будет - то в 1 случае из дохреналиона. А еще дохреналион будет успешно запален чексумами, и если не нарываться и исправить проблемную ситуацию, то в целом все куда лучше чем если игнорить проблему до упора, прощелкав ее наличие без чексум.<br><br>А вот когда такое долго игнорят - потом тома могут в вермишель развалиться и fsck совсем не обязан сильно загаженый том моунтабельным сделать, и тем более - lossless.<br> https://www.opennet.ru/openforum/vsluhforumID3/134323.html#182 Fri, 26 Jul 2024 08:37:43 GMT &gt; о которых ты ничего кроме названия не знаешь.<br><br>Я в свое время рекатос таскал оными. И помню сколько апдейт по сети занимал, капец. Оно реально большую часть репы заново таскало на любой пшик.<br><br>&gt; т.е. собирающемся по часу, с необходимостью ручного ковыряния,<br><br>Во первых кернелконф разные бывают, у меня и лайтовые есть ;)<br>Во вторых не обязательно лично смотреть на билд. Пнул, прищел за результатом потом, прогнал тесты, goto 1. Ну потрачу я по 5, минут несколько раз в день, и?!<br>В третьих, замахать нетривиальные баги за это время - недурно. Другими способами это может совсем другие времена требовать.<br>В четвертых - сейчас у ядра есть и автоматический бот который бисекты делает для некоторых багов, ессно для того что он умеет репродусить на автомате. Прикольно со стороны выглядит, сам бисектит, сам пинает причастного - "вкалывают роботы" :)<br><br>&gt; безусловно на таком проекте очень-очень важны те 15 секунд за которые делается switch<br><br>Сколько я себя помню - на штуке типа реактоса качало полинтернета минут по 2 https://www.opennet.ru/openforum/vsluhforumID3/134323.html#181 Thu, 25 Jul 2024 20:49:40 GMT &gt;&gt; для _контроля_ - ЛЮБОЙ.<br>&gt;&gt; И да, даже совсем уж дешевые из приличных плат умеют такой контроль.<br>&gt; А все равно куча допущений о роялях в кустах. <br><br>понеслась бредятина... <br>что тебе лапочка непонятно - любые рейды кроме совсем игрушечных умеют в контроль массива - сравнивают зеркала или пересчитывают и сравнивают сумму. И даже встроенный планировщик для этого бывает, внутри самой железки. Какие еще тебе мерещатся допущения и рояли?<br><br>(про твой опыт работы с чем-то кроме битых флэшек - уже и так все понятно, раз ты этого не знаешь)<br><br>&gt; Это очень круто и полезно, но, вот, self heal меня - прикалывает.<br><br>А меня нет. Потому что такое железо надо просто выбрасывать. К счастью, первый и последний раз я видел подобное лет пятнадцать назад на трэшовом сервере за 15 евро, ему можно было простить. (кстати, ни одного ценного байта он так и не потерял, пока его не угробили физически рукозадые админы - видимо с твоим примерно опытом и умениями)<br><br>&gt; Ты еще не понял? Я отвисаю с толпой самого разного народа. У них ес