forum.opennet.ru

"Инцидент с СУБД проекта GitLab"

Форум Разговоры, обсуждение новостей
Версия для распечатки	Пред. тема \| След. тема

Исходное сообщение

[ Отслеживать ]

Присылайте удачные настройки в раздел примеров файлов конфигурации на WIKI.opennet.ru.

. "Инцидент с СУБД проекта GitLab"	+2 +/–
Сообщение от Pavel (??), 01-Фев-17, 15:36
Все очень сильно зависит от размера этого самого бекапа. Знаю одну контору у которой дамп БД делается в течении ~30 часов и следом начинается следующий дамп. Хочеш предложить им вариант как проверять эти бекапы методом "развернуть хотя бы раз"? Естественно никто даже не пробовал их разворачивать ибо это бессмысленно, и они нужны только на совсем крайний случай когда умерли все реплики и реплики отстающие на 6, 12 и 24 часа от мастера. И да, вариант что из дампа ничего не развернётся совершенно не нулевой.
Ответить \| Правка \| Наверх \| Cообщить модератору

Оглавление

Инцидент с СУБД проекта GitLab, opennews, 01-Фев-17, 14:23 [смотреть все]

Хипстеры DROP PgSQL бэкапы не нужны ага,,,, Аноним, 01-Фев-17, 14:25 (2)
Доверяйте облакам, говорили они Держите все свои важные данные в облаках Они от, Аноним, 01-Фев-17, 14:27 (3) //
- просто ещё не реализовали облаков для облаков Вот тогда-то заживём , Аноним, 01-Фев-17, 14:54 (10) //
  - реализовали - они ж написали, мы регулярно бэкпались в azure Но что-то пошло н, ., 01-Фев-17, 15:15 (18) //
    - нашли в чём бэкапится, алекс, 02-Фев-17, 20:09 (101)
- Ну так раз в 6 часов - это разве не регулярно Если хочешь чаще - то бесплатного, Аноним, 01-Фев-17, 21:51 (61)
Да это просто жесть Как-так это все школьники организовали и забыли про бекапы, Аноним, 01-Фев-17, 14:36 (5) //
- они не забыли So in other words, out of 5 backup replication techniques deployed, ., 01-Фев-17, 15:03 (13) //
  - кстати, это был хороший админ, поскольку догадался сделать _нештатный_ бэкап до , ., 01-Фев-17, 15:14 (17) //
    - кого уволить кто нанял недостаточно админов , поледанныхотсутств, 01-Фев-17, 16:26 (34)
      - как это его уволить Это ж человек, тяжким трудом сэкономивший фирме N admin_sa, ., 02-Фев-17, 18:17 (95)
  - Да де-лы не знающие, что бэкапы которые успешно не развернули хоть раз - не бэк, IB, 01-Фев-17, 15:20 (22) //
    - Все очень сильно зависит от размера этого самого бекапа Знаю одну контору у кот , Pavel, 01-Фев-17, 15:36 (26)
      - А развернуть тестовую базу раз в полгода никому в голову не приходило , Аноним, 01-Фев-17, 16:23 (33)
        
        Уверенность в одном из 146 бэкапов это Важно Никакой связи с Чуровым, сов, Andrey Mitrofanov, 01-Фев-17, 16:30 (36)
        
        Предлагаю вариант развернуть хотя бы раз , Аноним, 01-Фев-17, 16:40 (39)
        
        бывает, что не на чем например кластер из 11 хостов c vmware 60VM , тома на м, anonymous, 02-Фев-17, 13:23 (82)
        
        в dev null , tacitusdef, 02-Фев-17, 18:06 (92)
        а потом ORA 0600 или как там правильно, давно не видал и мы идем искать новую, ., 02-Фев-17, 18:12 (94)
        
        Ну лучше чем в 0 , vitalif, 02-Фев-17, 12:09 (81)
      - Что за детский сад Отдельный сервер, которые стягивает свежайший бэкап, развора, Аноним, 01-Фев-17, 20:00 (60)
        
        Все отдельные сервера заняли вэб-макаки под свои докеры с нодами , Led, 02-Фев-17, 00:09 (68)
        разница существенная - во втором случае, ты заметишь проблему только через недел, Аноним, 02-Фев-17, 17:05 (87)
        
        Нет пути ТМ Усё пропалоушеф Ц Люто плюсую, пиши ещё - завтра пятница , Andrey Mitrofanov, 02-Фев-17, 19:03 (99)
      - Нужно хотя бы раз развернуть бекап, чтобы проверить, что там есть все, что нужно, XoRe, 01-Фев-17, 23:33 (66)
        
        ух ты, давно я не брал в руки шашек В смысле, что они, оказывается, для этого к, ., 02-Фев-17, 18:08 (93)
      - Попадался мне на LORе один чел, который запаковал каталог gzip ом без tar а Ути, ivn86, 02-Фев-17, 11:30 (80)
        
        Хм Что-то тут не так в этом комментарии gzip на каталог, если с флагом -r, даст, freehck, 03-Фев-17, 03:04 (104)
        
        С ключом -cr гзип рекурсивно всё сжал и вывалил в stdout Но челу нужен был файл, ivn86, 03-Фев-17, 07:35 (105)
        
        Понял Весьма удивлён изобретательности человека Так отстрелить себе ногу -- эт, freehck, 03-Фев-17, 09:52 (107)
  - Чувак на самом деле не сильно виноват, а виноват тот кто не настроил процесс тес, Аноним, 01-Фев-17, 19:17 (56) //
    - а это тот чувак и был в числе прочих Но никакого дополнительного времени на э, ., 02-Фев-17, 18:01 (91)
- Это уже было несколько лет назад с каким-то крупным проектом, сценарий 1в1 p s , Аноним, 01-Фев-17, 17:02 (44) //
  - Раскраска подсказок, пауза перед нажатием энтера вплоть до посидеть на руках, п, Michael Shigorin, 01-Фев-17, 22:59 (64) //
    - Давно засунул себе в bashrc автораскраску PS1 в зависимости от md5sum от hostnam, KonstantinB, 02-Фев-17, 02:48 (71)
      - Да ладно, покажи, чоуж , Аноним, 02-Фев-17, 05:37 (74)
      - А покажите, действительно , Michael Shigorin, 02-Фев-17, 15:40 (86)
    - Не работать уставшим, посидеть подумать, угу Особенно когда стоят над душой и н, Аноним, 02-Фев-17, 10:14 (77)
      - если я нечаянно доломаю -- ты правда починишь нет тогда не мешай делать, чт, Michael Shigorin, 02-Фев-17, 15:38 (85)
      - я тебе страшный девопский тайна открою ее даже Шигорин не знает, потому что аль, ., 03-Фев-17, 00:14 (102)
        
        то-то у нас zabbix допиливали - https support zabbix com browse ZBXNEXT-22, Michael Shigorin, 03-Фев-17, 00:19 (103)
  - Это еще хорошо, если только 2 А если их 42 на 3-х мониторах и там еще закла, SysA, 02-Фев-17, 11:07 (79)
- Когда в голове дэдлайны, а над головой ПиЭмы, про бэкапы не думают , Led, 02-Фев-17, 00:07 (67)
Не было, и вот опять , Аноним, 01-Фев-17, 14:40 (6)
Надежность выбора технологий уровня GitLab,GiHub профинансировал ZFS OnLinux и и, Аноним, 01-Фев-17, 14:45 (8) //
- ZFS головного мозга дeтектед , Аноним, 01-Фев-17, 15:01 (12)
- уровня линyпс тут и постгрез, с его невменяемой неработающей без ручного пинани, ., 01-Фев-17, 15:10 (15) //
  - Поднял один раз, ни разу не пинал, все работает ЧЯДНТ , KonstantinB, 01-Фев-17, 15:30 (24) //
    - один разДаже фраза есть такая один раз не , Аноним, 01-Фев-17, 16:39 (38)
      - да я и много раз поднимал, всё чудесно работает для тех кто руками не умеет даже, эцсамое, 01-Фев-17, 17:07 (45)
  - Ну да, был бы оракл, или mssql, то этого бы никогда не случилось Гарантирую Без, Аноним, 01-Фев-17, 23:18 (65) //
    - _этого_ - ручного стирания каталогов под репликацию - да, никогда не случилось б, Аноним, 02-Фев-17, 17:27 (88)
То есть, раньше реплики БД у них не было Хипстота , Аноним, 01-Фев-17, 15:06 (14) //
- Была, но из-за атаки вторая БД начала лагать и репликация отвалилась В попытке п, Аноним, 01-Фев-17, 19:08 (55) //
  - Это выглядит как желание прибить муху которая сидит на кнопке запуска ядерных ра, Аноним, 01-Фев-17, 19:21 (57) //
    - Удаление содержимого директории data на сервере куда будет производиться реплика, Аноним, 02-Фев-17, 08:59 (75)
      - mv data old-datamkdir data, qqq, 03-Фев-17, 08:53 (106)
        
        надо б на досуге посмотреть результат этого действа на живом постгрезе - полагаю, пох, 03-Фев-17, 17:19 (108)
https www youtube com watch v nc0hPGerSd4 Live Stream восстановления , burik666, 01-Фев-17, 15:14 (16) //
- а может ради этого всё и задумывалось , Аноним, 01-Фев-17, 16:06 (31) //
  - Куда донаты кидать , Аноним, 01-Фев-17, 16:41 (40)
- Прикольно Одного из них Ёрик зовут Бедный Ёрик С , Аноним, 01-Фев-17, 17:42 (46) //
  - Еще и спец по СУБД Точно бедный , Аноним, 01-Фев-17, 17:51 (47)
Нормальное дело Можно подумать, никто из вас reboot не в том окошке мультиплек, aNoN, 01-Фев-17, 15:17 (20) //
- Набрать ребут не в том окне - нормально Не нормально иметь единственный сервер,, Аноним, 01-Фев-17, 15:20 (21) //
  - Первый раз - невнимательность Регулярно - СДВ СДВГ Лечится Симптомы СДВ 1 н, Аноним, 01-Фев-17, 16:29 (35) //
    - Зато в мериканнии детишек с этим заболеванием лечат медицинским кокаином Че, Andrey Mitrofanov, 01-Фев-17, 16:45 (41)
    - Признавайся, где ты спер мою биографию , Аноним, 01-Фев-17, 17:52 (48)
      - тыщи вас , Аноним, 02-Фев-17, 18:23 (96)
- clear config гораздо интереснее И бесплатного резерва в 50 мощности обычно нет, Аноним, 02-Фев-17, 17:51 (90)
А-ха-ха до боли знакомая ситуация Сам так делал не раз , Аноним, 01-Фев-17, 15:20 (23)
http checkyourbackups work , Shamil, 01-Фев-17, 15:31 (25) //
- http www worldbackupday com ru , user, 01-Фев-17, 15:55 (29)
Только зануды делают резервные копии настоящие мужчины просто закачивают все ва, Аноним, 01-Фев-17, 15:40 (27) //
- http russianfedora pro posts kernelorg-otkazyvaetsia-ot-ftp-serverov , Neptus, 01-Фев-17, 15:47 (28) //
  - на по - , Michael Shigorin, 02-Фев-17, 18:40 (97)
- Просто На В Git Же , Andrey Mitrofanov, 01-Фев-17, 16:33 (37)
гитлабживи, Аноним, 01-Фев-17, 15:55 (30)
у них все на Azurenuff said, omnomnin, 01-Фев-17, 16:06 (32)
Вот, что бывает с ручным devops NixOS - наше всё , Аноним, 01-Фев-17, 16:49 (42) //
- И что, там возможно настроить репликацию в PostgreSQL одной опцией А если в эти, www2, 01-Фев-17, 18:40 (49) //
  - Можно Фишка с Nixos в воспроизводимости проверил в vbox, задеплоил https git, Аноним, 01-Фев-17, 18:50 (51) //
    - в любой системе управления конфигурациями так можно да даже и с шелл-скриптами , й, 02-Фев-17, 00:44 (70)
  - Все можно сделать одной опцией , даже с puppet или скриптом bash Только nix ni, Аноним, 01-Фев-17, 18:54 (53)
  - И безотносительно nixos, надо правильно мыслить Не репликацию постгрес, а серве, Аноним, 01-Фев-17, 19:02 (54) //
    - и в датацентре сами собой воздвигаются новые стойки, из воздуха в них запрыгиваю, пох, 03-Фев-17, 17:28 (109)
Все злорадные такие То ли себя безгрешными считают, то ли GitLab не любят Я, в, www2, 01-Фев-17, 18:47 (50) //
- Да ерунда же, просто ребята настолько легкомысленные, что 5 вариантов бекапа сде, Аноним, 01-Фев-17, 19:27 (58)
Я так понимаю DoS-атака в итоге оказалась успешной , Гентушник, 01-Фев-17, 19:30 (59) //
- Да, в некотором смысле это новый класс -- можно назвать SDoS, self denial of , Michael Shigorin, 02-Фев-17, 18:42 (98)
- Атака второго порядка целью и жертвой оказался тот, кто чинил тот первый прост, Andrey Mitrofanov, 02-Фев-17, 19:09 (100)
мда, такие вот нынче специалисты, Аноним, 01-Фев-17, 22:14 (62) //
- Люди такие всегда , Andrey Mitrofanov, 02-Фев-17, 09:35 (76)
- минусуют видимо те, кто тоже на работе так лажает , Junker, 05-Фев-17, 01:47 (112)
а што все возбудились-то так, как будто на деньги кто-то попал хипсторская конто, Михрютка, 02-Фев-17, 00:12 (69) //
- У гитлаба бизнес - в продаже gitlab ee, а gitlab com - это так демостенд, там, Аноним, 02-Фев-17, 03:08 (72) //
  - ну так вот инвестор на деньги и попал - он не с платных функций живет, а с цены , пох, 03-Фев-17, 17:30 (110)
На волне хайпа с гитлабом хотелось бы узнать, а чем и как в вашей организации ор, QuAzI, 02-Фев-17, 10:26 (78) //
- Бесплатных не бывает Есть платный относительно дешевый enterprise, которым по, Андрейка, 02-Фев-17, 13:53 (83) //
  - вы заблуждаетесь в смысле - надежных платных тоже не бывает не бывает Бывает , Аноним, 02-Фев-17, 17:44 (89) //
    - Вы из какого-то 20 века что ли Гарантия восстановления данных заключается не в , Андрейка, 06-Фев-17, 14:35 (113)
      - Гонору у вас конечно много, с этим не поспоришь, но где пруфы дайте ссылку что, QuAzI, 07-Фев-17, 00:28 (114)
  - Андрейка, а иметь всю эту архитектуру, полиси, и т ддействительно дешевле чем ра, Аноним, 13-Фев-17, 10:40 (115)
и как это помогает, когда у вас 50 серверов , ALex_hha, 04-Фев-17, 19:29 (111)

Форумы | Темы | Пред. тема | След. тема

Партнёры:

Хостинг:

Закладки на сайте
Проследить за страницей

Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру