Вариант для распечатки		Пред. тема | След. тема
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы		[ Отслеживать ]

Началась разработка ФС Zero, вытесняющей неиспользуемые данн..., opennews (?), 10-Сен-18, (0) [смотреть все] Вот и верь людям, что Питон меленный , КО (?), 11:01 , 10-Сен-18, (1) –24 // Где ты прочитал что прототип работает быстро Желаемое за действительное не выда, Аноним (4), 11:22 , 10-Сен-18, (4) +21 У говнокодеров и си с ассемблером медленные , Аноним (6), 11:37 , 10-Сен-18, (6) +2 // И это логично Чтобы было быстро - надо понимать как работают компьютеры Перекл, Аноним (108), 23:29 , 10-Сен-18, (108) +1 // Воланд , анонимный анонимец (?), 00:39 , 11-Сен-18, (117) Брэд оф сив кэйбл Ещё деда Кнут завещал не чинить то, что не сломано Если над, лютый лютик... (?), 06:47 , 11-Сен-18, (119) –5 А что, с сетью таких факапов не бывает Когда кодер меняет тип с int на short и , Чайник с ручками (?), 20:17 , 12-Сен-18, (158) Какие фантазии Напрямую TCP пакеты создаёшь У нормальных пацанов по сети ходит, лютый лютик__ (?), 08:45 , 17-Сен-18, (164) Ты не понял Главное - быстрее кодить Взять какую-нибудь обертку над какой-нибу, X86 (ok), 10:49 , 11-Сен-18, (129) +6 Он и есть медленный Но для некоторых применений - вполне годится Особенно для , Crazy Alex (ok), 11:39 , 10-Сен-18, (7) +8 // Это отговорки слабаков и шkoлоты, неосиливших си и изначально грамотное проектир, Аноним (45), 15:12 , 10-Сен-18, (45) –2 // Изначально грамотное проектирование подразумевает отсутствие C в любом виде , Аноним (71), 17:49 , 10-Сен-18, (71) –7 А что, ты уже переписал фирмвари, бутлоадер, ядро ОС и ключевой софт запускающий, Аноним (-), 19:26 , 10-Сен-18, (84) А в чем прикол делать прототип откровенно говняно, без перспектив его сделать но, Аноним (87), 19:33 , 10-Сен-18, (87) –2 // То ли дело анонимы опеннета, сразу знающие, как надо правильно и что и как взлет, Аноним (45), 20:31 , 10-Сен-18, (96) +3 да только сишники тоже сцуко ленивые, поэтому возьмут готовую либу вместо это, Аноним (108), 23:21 , 10-Сен-18, (107) Поэтому предпочитали комментировать на опеннете, вместо ваяния _первой_ реализац, Аноним (45), 23:40 , 10-Сен-18, (109) +1 Ну вот например есть носкль Cassandra которую лузеры накуякали на тормозной жабк, лютый лютик__ (?), 05:20 , 12-Сен-18, (153) Нет, Led (ok), 23:58 , 11-Сен-18, (151) +6 Прототип, который быстро сделан на python для посмотреть ну вот как-то примерно, llolik (ok), 15:36 , 10-Сен-18, (50) // Зато надежно выдает авторов Все слагаемые на месте пермиссив, тормозной ЯП для, Аноним (-), 19:28 , 10-Сен-18, (85) –1 Python действительно медленный если не применять оптимизации и вынос критичного , Аноним (125), 08:59 , 11-Сен-18, (125) –1 // Только вчера читал, как EO люто тормозит во время более-менее крупных боёв При , лютый лютик__ (?), 05:23 , 12-Сен-18, (154) // Еще бы Даже и не знаю, реально ли вообще сделать бои подобного масштаба без тор, Аноним (159), 00:50 , 13-Сен-18, (159) +1 пихон, fuse, зеро зеробрейн вытесняйте уже сразу в dev null - меньше возни, нах (?), 11:06 , 10-Сен-18, (2) +6 // Сколько стонов Ну нравится fuse-davfs - используй, кто запретит Поглядим, как, Crazy Alex (ok), 11:44 , 10-Сен-18, (8) // тут нет никакой новой идеи - davfs устроена точно так же нового тут только мод, нах (?), 12:34 , 10-Сен-18, (16) –2 // Так привык к mount umount, что отсутствие необходимости использовать их вызвало , Аноним (18), 12:47 , 10-Сен-18, (18) –2 Как она устроена У неё жёстко прибитый один бэкэнд - webdav И если захочется п, Crazy Alex (ok), 16:53 , 10-Сен-18, (62) –1 А чем собственно webdav плох Чем плох FTP и backblaze - понятно Первый в полов, Аноним (-), 19:31 , 10-Сен-18, (86) а чем может быть хороша попытка приспособить гипертекстовый протокол под файлову, пох (?), 21:59 , 10-Сен-18, (98) –1 Плох не webdav, ftp или backblaze, плохо, когжа пытаются прибить гвоздями к чему, Crazy Alex (ok), 22:04 , 10-Сен-18, (99) С другой стороны когда начинается абстрагирование абстракций и модуляризация мод, Аноним (-), 00:01 , 11-Сен-18, (111) –1 конкретно эта штука - не может, у нее заточка под интерфейс, предназначенный для, пох (?), 19:24 , 11-Сен-18, (144) И я не нашёл вообще никакой свзяи автора с backblaze Ну выбрал человек то храни, Crazy Alex (ok), 11:47 , 10-Сен-18, (9) fuse-davfs не умеет кешировать Поэтому работает только в сферической сети в вак, Annoynymous (ok), 12:53 , 10-Сен-18, (19) // Шизика это не остановит от критики, у него в бреду свой собственый мирок , Аноним (-), 13:47 , 10-Сен-18, (25) umount mnt dav sbin umount davfs waiting while mount davfs pid 32292 syn, нах (?), 14:09 , 10-Сен-18, (32) –1 // Это совсем другая задача, ага , Annoynymous (ok), 15:05 , 10-Сен-18, (42) –1 Коннекты через 2 5G 3G ещё не исчезли, особенно за МКАДом Так что, Python здесь, Аноним (39), 14:48 , 10-Сен-18, (39) –1 // угу, оно просто работать не будет это ж хоть и не дав, но вебня, там таймауты и, нах (?), 15:12 , 10-Сен-18, (44) –1 // Ну так оборвалось - не вытеснил, какаие проблемы Это уже ответственность пользо, Crazy Alex (ok), 16:57 , 10-Сен-18, (65) –1 Да какие, обычные питонятина стандартно забьет на ошибки - ведь на машине разра, Аноним (87), 19:40 , 10-Сен-18, (88) –1 Да оно и на ста мегабитах ни хрена тормозить не будет, если usr portage или что, Crazy Alex (ok), 16:55 , 10-Сен-18, (64) –1 // Главное запускать эту парашу на локалхосте разработчика и только правильной сети, Аноним (-), 19:48 , 10-Сен-18, (90) +1 Он уже добавил сотни тысяч торомозов - в IT , Led (ok), 00:02 , 12-Сен-18, (152) +5 Интересная идея Можно создать хранилище документов гибридное и в итоге обращатьс, Аноним (6), 11:36 , 10-Сен-18, (5) –2 Вот и снова ФС Джорж, 40 лет прошло, а идеи теже Хотя есть и новое - тепер, fi (ok), 11:48 , 10-Сен-18, (10) +1 // В нетвари оно вообще прям из коробки работало , HyC (?), 14:06 , 10-Сен-18, (30) +3 в нормальных облаках есть версионность, так что не критично, имхо, Alex_hha (?), 12:08 , 10-Сен-18, (11) +2 // Какая связь облачности и версионности Ты какие облака называешь нормальными S3, F (?), 12:17 , 10-Сен-18, (14) // а какая связь между моим комментарием и твоим вопросом DAWS S3 GCP cloud storag, Alex_hha (?), 13:00 , 10-Сен-18, (20) +4 Мой хипстометр сломался Зачем они это делают Единственное логичное применени, Диалапщик (?), 12:15 , 10-Сен-18, (12) // Ну, например, у тебя маленький SSD и гигабитный канал к серверам хранения, тогда, Аноним (15), 12:28 , 10-Сен-18, (15) +1 // Скорость HDD больше гигабитного канала Для SSD нужно минимум 10 гигабит , имя (?), 06:50 , 11-Сен-18, (120) –2 Для стирания границ между локальным, серверным и облачным хранением Обычно это , Аноним (18), 12:35 , 10-Сен-18, (17) +1 // Нет, это наглухо забытое поколением пепси прошлое Уже в третий раз за 40 лет эт, HyC (?), 14:08 , 10-Сен-18, (31) +1 // но тогда мы эти хранилки располагали в своей серверной, а не в гуглевой-амазонск, нах (?), 15:13 , 10-Сен-18, (46) А принцип тот же Было быстрое хранилище и медленное, с файлы к которым редко ид, HyC (?), 16:18 , 10-Сен-18, (56) ну, в принципе, да - правда, когда хвататель, в очередной раз промазав мимо касс, нах (?), 16:50 , 10-Сен-18, (61) –1 Можешь поднять облачный сервис у себя на домашнем файловом сервере У меня на раб, Аноним (18), 18:31 , 10-Сен-18, (76) на домашнем файловом сервере я подниму банальную самбу на 10ge или вовсе rdma vo, пох (?), 22:06 , 10-Сен-18, (100) –1 Зато очень удобно Вот смотри, бэкапался ты на амазон, бэкапался Все было ЗБС и, Аноним (-), 19:54 , 10-Сен-18, (92) +1 А раньше ты ToS не читал, конечно Ну закономерно огреби Кстати, амазоновские т, Crazy Alex (ok), 22:07 , 10-Сен-18, (101) –1 Ну да И в результате шанс их угробить от всяких стихийных бедствий включая мест, Crazy Alex (ok), 22:10 , 10-Сен-18, (102) +1 В таком виде даже не бред, но сабж не про это, да и оголтелые впариватели очеред, Аноним (-), 00:07 , 11-Сен-18, (113) Ну вы то наверное догадывались что канал в интернет может и фигакнуться, а гугл , Аноним (-), 19:52 , 10-Сен-18, (91) Для этого есть SLA - соглашение о качестве предоставляемых услуг, где написаны х, Аноним (97), 21:10 , 10-Сен-18, (97) А когда какой-то промежуточный роутер, не подконтрольный ни мегапрову, фирмочке , Аноним (114), 00:16 , 11-Сен-18, (114) эта система на корпоративные акаунты, вообще-то, не распространяется Ну или по к, нах (?), 10:55 , 11-Сен-18, (131) –1 А, помните такую прогу от MS под DOS для увеличения размера дискеты - что-то тип, X86 (ok), 10:52 , 11-Сен-18, (130) –1 drvspace dblspace Помним Скорбим W Не частично, а вообще не копировались, т к, Аноним84701 (ok), 13:26 , 11-Сен-18, (132) Это называлось перетащить ярлыки на дискетку , ага Что бы диск не забивали , Аноним (-), 14:41 , 11-Сен-18, (138) Чтобы твои данные были от тебя подальше, а к ним поближе Такова логика всех эти, dq0s4y71 (ok), 13:19 , 10-Сен-18, (22) Допустим, лежит у меня на харде размером 1 терабайт библиотека из epub, fb2, pdf, IRASoldier (?), 16:41 , 10-Сен-18, (59) // тут вопрос, насколько оно надежное за эти деньги а, ну или так ну фиг знает -, нах (?), 16:54 , 10-Сен-18, (63) –1 // Оценить можно - какое оборудование, какая квалификация сотрудников, какое ПО сто, IRASoldier (?), 18:38 , 10-Сен-18, (77) –1 50 баксов - это бэкап, там оно само шуршит на твоём компе , рещает, что бэкапи, Crazy Alex (ok), 22:16 , 10-Сен-18, (103) +1 Кстати, а чего б не крэшплан , IRASoldier (?), 18:40 , 10-Сен-18, (78) –1 А крэшплан вообще умел быть просто хранилищем , а не бэкапилкой, шарящейся по т, Crazy Alex (ok), 22:20 , 10-Сен-18, (105) Да я давно не смотрел на то, чем крэшплан стал, помню только, был такой Так-то , IRASoldier (?), 22:49 , 10-Сен-18, (106) –1 Например, фотоархив - одна копия в этой штуке, вторая - оффлайн, как и положено , Crazy Alex (ok), 17:01 , 10-Сен-18, (66) Интересно, но для использования нужно еще encfs навесить пишут, что backblaze п, Аноним (13), 12:16 , 10-Сен-18, (13)   // У backblaze такие низкие цены как раз за счет механизма дедупликации вычисляютс, KonstantinB (ok), 18:42 , 10-Сен-18, (79)   // borgbackup умеет одновременно и шифровать, и сжимать, и дедуплицировать , h31 (ok), 00:24 , 11-Сен-18, (116) –1   // Предлагаете для всех пользователей backblaze шифровать одним и тем же ключом Оо, Аноним (118), 02:31 , 11-Сен-18, (118)   Почему Шифруем данные на клиенте, у каждого клиента свой ключ На сервер загруж, h31 (ok), 20:13 , 11-Сен-18, (146) –2   Да А что делать при коллизии хэшей Приехали , Ракоман (?), 08:37 , 12-Сен-18, (155)   Я не знаю, как эту проблему решили в borgbackup Найдёшь - отпишись , h31 (ok), 02:55 , 13-Сен-18, (160)   никак авторы всех технологий дедапа верят, что коллизия хэшей невозможна Мысль , нах (?), 14:35 , 13-Сен-18, (162)   Окей, мы знаем, что у пользователей U1 и U2 зашифрованные блоки B1 и B2 имеют од, KonstantinB (ok), 05:46 , 15-Сен-18, (163)   зачем Если ты каким-то чудом например, нанятый вменяемый разработчик понимал, , нах (?), 10:49 , 17-Сен-18, (165)   Что даёт присутствие таких функций вытеснение на облако и т д на уровне ФС, а, Fracta1L (ok), 13:04 , 10-Сен-18, (21) // чтоб утилиты пользовать это нужно что-то там в консоли писать и вообще мозгом ду, Аноним (27), 13:57 , 10-Сен-18, (27) // Так-то ковыряние в консольке нагружает мозг не больше, чем работа автомеханика в, Fracta1L (ok), 15:25 , 10-Сен-18, (48) // Но и автомеханик в гараже Должен работать и головой, и руками Конечно при услов, Аноним (57), 16:27 , 10-Сен-18, (57) Я не спорю, что автомеханик работает головой Но там, как правило, действия по н, Fracta1L (ok), 18:09 , 10-Сен-18, (75) –2 Собственно по изначальной задумке консоль в никсах это инструмент автоматизации, Аноним (114), 19:58 , 10-Сен-18, (93) Может это он про себя , Аноним (114), 19:59 , 10-Сен-18, (94) Ага, а глину для кирпичей ты тоже сам должен месить, железо для арматуры лично в, IRASoldier (?), 16:43 , 10-Сен-18, (60) –2 И статистику тоже отдельно собирать и потом анализировать То есть возни больше,, Crazy Alex (ok), 17:04 , 10-Сен-18, (67) // я, конечно, понимаю что atime сейчас немодно и немолодежно, но анализатор стати, пох (?), 07:12 , 11-Сен-18, (121) Интересно, что там по задумке авторов должна показать какая-нибудь df в плане ко, Очередной аноним (?), 13:45 , 10-Сен-18, (23) –1 // напишет -1 и свалится по segfault у современных разработчиков оно примерно так о, нах (?), 14:02 , 10-Сен-18, (29) –1 // NaN сейчас модно, nobody (??), 14:44 , 10-Сен-18, (36) +2 // кстати, да в gnu df floating арифметика вполне себе есть - , нах (?), 15:40 , 10-Сен-18, (53) –1 локальное свободное какая-нибудь облачная квота - занятое в облаке место , Очередной аноним (?), 14:45 , 10-Сен-18, (38) +1 // ну, в конечном счете, оно опирается на stat , но там ни разу не предусмотрено с, нах (?), 15:37 , 10-Сен-18, (51) –1 В рамках этой задачи как раз раздельнцы значения - это полная чушь Потому что в, Crazy Alex (ok), 17:08 , 10-Сен-18, (68) в смысле, тебе совсем неинтересно знать, ни сколько занято локально, ни сколько , нах (?), 09:57 , 11-Сен-18, (126) –2 Йопт, я такое же за бабло писал, только вместо облака там была оптическая архивн, A. Stahl Is Gay (?), 13:47 , 10-Сен-18, (24) –4 // Так это ты тот чувак из bell labs, писавший plan9 , Аноним (-), 13:48 , 10-Сен-18, (26) +3 // Нет , A. Stahl Is Gay (?), 14:00 , 10-Сен-18, (28) –4 Судя по названию их цель вытеснить всё, оставив локально только zero , Аноним (33), 14:19 , 10-Сен-18, (33) +1 Только если будет поддерживать хранение на собственном подконтрольном сервере, т, Аноним (39), 14:26 , 10-Сен-18, (34) +1 Ответ ненавистникам Питона PS Вовсе не утверждаю, что Python быстрый, но востреб, Аноним (39), 14:37 , 10-Сен-18, (35) –1 // Вам ненавистники Питона скажут, что если Питон можно запихать в файловую систему, dq0s4y71 (ok), 14:50 , 10-Сен-18, (40) +3 // И что характерно, будут правы , Аноним (43), 15:10 , 10-Сен-18, (43) +4 вообще FUSE - от слова userspace, не такое оно уж и системное, Аноним (80), 19:05 , 10-Сен-18, (80) –1 Востребован, на уровне зонтиков рыбками , Аноним (114), 20:03 , 10-Сен-18, (95) +1 Востребован фриками для извращений Так еще рекомендация , Вареник (?), 15:12 , 12-Сен-18, (157) Офигенно, мне как раз такое нужно Думаю на одном сервере обработку гонять, на д, ползкрокодил (?), 15:46 , 10-Сен-18, (54) –1 // есть, samba, nfs, тыщи их rsync еще есть Кстати, учти что davfs2 over fuse - по, нах (?), 17:32 , 10-Сен-18, (70) –1 // Если у тебя от активности одной программы клинятся другие - поздравления, операц, Аноним (114), 00:22 , 11-Сен-18, (115) –4 // я ценю остроумие, но читать тоже надо уметь Или считаешь, что твой шутливый комм, Аноним (-), 08:14 , 11-Сен-18, (123) там надо уметь не читать, а понимать прочитанное, это два разных умения , нах (?), 09:58 , 11-Сен-18, (127) –1 Короче, ничо вы не поняли Кураторы из АНБ накрутили хвост менеджменту Бэкблэйза, Аноним (55), 16:04 , 10-Сен-18, (55) –1 // да ну, у них же архивы были А тут в b2шную часть бэкблейза она изначально под с, нах (?), 17:29 , 10-Сен-18, (69) –1 // А хз что и как они там анализируют Ненужные файлы, которые не удалены, а позабы, Аноним (81), 19:14 , 10-Сен-18, (81) // ну если хотелось надежный, то их всего с пол-десятка, и ценник в 3-30 раз выше, , пох (?), 07:18 , 11-Сен-18, (122) –1 Заказная фигня наверное, идея конечно хорошая, но в цены на хранилище Или есл, Аноним (72), 17:52 , 10-Сен-18, (72) // Личное проще на Ceph с локальным кэшем нагородить , Аноним (150), 23:14 , 11-Сен-18, (150) Нужна поддержка s3, чтобы можно было на свой ceph натравить , anonymous (??), 17:54 , 10-Сен-18, (73) –1 // LeoFS , Аноним (81), 19:24 , 10-Сен-18, (83) я такое уже давно пльзую на телефоне, телефон синхронизируется с ПК, а на ПК фот, Аноним (104), 22:17 , 10-Сен-18, (104) –1 вот бы сделать обратный bcache для SSD HDDчтобы актуальные файлы жили на SSD 25, Superanon (?), 10:34 , 11-Сен-18, (128) // собственно, да iZEN тебе уже ответил - уже все написали до тебя, zfs arc2 называ, нах (?), 14:03 , 11-Сен-18, (134) –1 // dm-cache bcache flashcache имени фейсбука - да вагон на чем сделать можно, Аноним (136), 14:28 , 11-Сен-18, (136) есть еще к слову fs-cache который к NFS прикручивается да и можно к остальному , Аноним (136), 14:32 , 11-Сен-18, (137) bcache так и работает - не нужные блоки уезжают на hdd, а нужные живут на ssd , Аноним (136), 14:28 , 11-Сен-18, (135) // размер складывается Или на hdd всегда есть все данные , Аноним (-), 15:56 , 11-Сен-18, (140) –1 // В случае bcache HDD хранит все данные, а частоиспользуемые блоки зеркалируются н, Leah (?), 18:25 , 11-Сен-18, (142) имхо все блоки уезжают на HDD, на SSD продублированы частозапрашиваемые В этом п, Leah (?), 18:35 , 11-Сен-18, (143) Из ZFS тоже такое можно сделать в облаках размещаем блочные устройства физическ, iZEN (ok), 13:36 , 11-Сен-18, (133) // Вот разве что для этого ZFS и нужна Оно реально будет работать Или очень приве, Аноним (-), 14:57 , 11-Сен-18, (139) // mbuffer UDPspeeder, Аноним (141), 18:08 , 11-Сен-18, (141) Я ниасилил или никто так и не предложил достойной альтернативы и вообще камменты, GedNN (?), 19:55 , 11-Сен-18, (145) // ФС на гибриде питона с фюзой никаких ассоциаций, кроме как чистапаржать , не вы, Аноним (150), 23:11 , 11-Сен-18, (149) +3 // А аналоги какие-нибудь есть на чем угодно Идея мне очень нравится Сейчас приход, GedNN (?), 12:00 , 13-Сен-18, (161) // наша zfs с arc2нет, такой фигней мы не страдаему нас как-то не замечено именно т, oracle (?), 10:52 , 17-Сен-18, (166) Кто такая ZFS я вроде знаю С ее плюсами и минусами Не подходит Она использует, GedNN (?), 17:54 , 18-Сен-18, (167) Backblaze рекламу неприкрытую в новости этой вижу я А по теме - да, отличная тем, Аноним (150), 23:03 , 11-Сен-18, (147) –1 - Вот как теперь dev null называют , Вареник (?), 15:08 , 12-Сен-18, (156) +2 1,2,5,10,11,12,13,21,23,24,33,34,35,54,55,72,73,104,128,133,145,147,156

Сообщения

[Сортировка по времени | RSS]

13. "Началась разработка ФС Zero, вытесняющей неиспользуемые данн..."	+/–
Сообщение от Аноним (13), 10-Сен-18, 12:16
Интересно, но для использования нужно еще encfs навесить: пишут, что backblaze поддерживает шифрование, но данные расшифровываются на стороне сервера, т. е. оно там бесполезное, для галочки (https://en.wikipedia.org/wiki/Backblaze).
Ответить | Правка | Наверх | Cообщить модератору

	79. "Началась разработка ФС Zero, вытесняющей неиспользуемые данн..."	+/–
	Сообщение от KonstantinB (ok), 10-Сен-18, 18:42
	У backblaze такие низкие цены как раз за счет механизма дедупликации: вычисляются контрольные суммы а-ля rsync, и одинаковый блок хранится только один раз (ну, ок, три раза), а при запросе на получение бэкапа файлы реконструируются из набора контрольных сумм блоков. Так что шифрование там по определению невозможно.
	Ответить | Правка | Наверх | Cообщить модератору

	116. "Началась разработка ФС Zero, вытесняющей неиспользуемые данн..."	–1 +/–
	Сообщение от h31 (ok), 11-Сен-18, 00:24
	borgbackup умеет одновременно и шифровать, и сжимать, и дедуплицировать.
	Ответить | Правка | Наверх | Cообщить модератору

	118. "Началась разработка ФС Zero, вытесняющей неиспользуемые данн..."	+/–
	Сообщение от Аноним (118), 11-Сен-18, 02:31
	Предлагаете для всех пользователей backblaze шифровать одним и тем же ключом? Ооок:)
	Ответить | Правка | Наверх | Cообщить модератору

	146. "Началась разработка ФС Zero, вытесняющей неиспользуемые данн..."	–2 +/–
	Сообщение от h31 (ok), 11-Сен-18, 20:13
	> Предлагаете для всех пользователей backblaze шифровать одним и тем же ключом? Ооок:) Почему? Шифруем данные на клиенте, у каждого клиента свой ключ. На сервер загружаем зашифрованные данные + хэш незашифрованных (с солью, общей для всех клиентов). На основе хэша вычисляем дубликаты.
	Ответить | Правка | Наверх | Cообщить модератору

	155. "Началась разработка ФС Zero, вытесняющей неиспользуемые данн..."	+/–
	Сообщение от Ракоман (?), 12-Сен-18, 08:37
	Да? А что делать при коллизии хэшей? Приехали?
	Ответить | Правка | Наверх | Cообщить модератору

	160. "Началась разработка ФС Zero, вытесняющей неиспользуемые данн..."	+/–
	Сообщение от h31 (ok), 13-Сен-18, 02:55
	> Да? А что делать при коллизии хэшей? Приехали? Я не знаю, как эту проблему решили в borgbackup. Найдёшь - отпишись.
	Ответить | Правка | Наверх | Cообщить модератору

	162. "Началась разработка ФС Zero, вытесняющей неиспользуемые данн..."	+/–
	Сообщение от нах (?), 13-Сен-18, 14:35
	никак. авторы всех технологий дедапа верят, что коллизия хэшей невозможна. Мысль о том, что по сути они заменяют блоки данных, предположим, в 128k, строкой в 256 бит - причем ВСЕ блоки неизвестного содержимого - ограниченным количеством строк (в зависимости от типа хэша может оказаться, что далеко не каждая строка - валидный хэщ чего бы то ни было) им, по-моему, в головы вообще не приходит, там некуда, там карри. Единственное исключение - zfs, там сановские инженеры еще головами думали, а не только ели - там есть verify, если не хочется проверять свое везение (разумеется, снижает скорость, но часто этим можно пожертвовать) то есть по сути, да, на наших глазах переизобретается архиватор del, только уже в глобальном масштабе. оно бы и работало, даже, в масштабах локалхостов, даже достаточно больших - но в масштабах амазона или бэкблейза вопрос коллизии - только вопрос времени.
	Ответить | Правка | Наверх | Cообщить модератору

	163. "Началась разработка ФС Zero, вытесняющей неиспользуемые данн..."	+/–
	Сообщение от KonstantinB (ok), 15-Сен-18, 05:46
	Окей, мы знаем, что у пользователей U1 и U2 зашифрованные блоки B1 и B2 имеют одинаковый sha512. Как теперь хранить только один из этих блоков?
	Ответить | Правка | К родителю #146 | Наверх | Cообщить модератору

	165. "Началась разработка ФС Zero, вытесняющей неиспользуемые данн..."	+/–
	Сообщение от нах (?), 17-Сен-18, 10:49
	> Окей, мы знаем, что у пользователей U1 и U2 зашифрованные блоки B1 > и B2 имеют одинаковый sha512. Как теперь хранить только один из > этих блоков? зачем? Если ты каким-то чудом (например, нанятый вменяемый разработчик понимал, для чего на самом деле существуют криптографические хэши - чудо!) вовремя об этом узнал - просто сохраняешь второй блок отдельно от первого. Ровно так же, как в случае, если бы эти sha оказались разными (точнее "поиск хэша B2 ничего не нашел"). На момент, когда ты считал его хэш, он у тебя еще был, есть что сохранять. внутри файла-то они не по хэшам ищутся, а банально по ссылке. zfs dedup+verify примерно так и работает
	Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема