Фэйл при 1500 бекапах: как KDE свой код зеркалировал

Фэйл при 1500 бекапах: как KDE свой код зеркалировал

× Версия для печати

Один из администраторов инфраструктуры проекта KDE описал подробности произошедшего несколько дней назад инцидента, который разработчики KDE уже назвали Великим бедствием KDE 2013 года. В результате случившегося, проект KDE чуть было не потерял содержимое всех Git-репозиториев, включая репозитории смежных проектов.

Всё началось с повреждения содержимого файловой системы Ext4 на первичном Git-сервере после неудачного перезапуска хоста. В результате сбоя файловой системы оказалась нарушена целостность Git-репозитория, содержимое которого было разрушено. Ситуация стала напоминать катастрофу, когда администраторы приступили к восстановлению данных из резервных копий. Дело в том, что для резервного копирования применялась практика зеркалирования Git-репозитория.

Всего в мире было поднято около 1500 зеркал, но перебирая их администраторов охватил ужас — система зеркалирования успела автоматически синхронизировать ошибочные данные на запасные репозитории, содержимое которых также пришло в негодность.

Таким образом, содержимое большинства репозиториев KDE было удалено.

Великое бедствие KDE 2013 Git-репозиторий надежность облачного зеркалирования сбой Фейл при 1500 бекапах: как KDE зеркалировал свой код

История оказалась со счастливым концом — на одном из 1500 зеркал была найдена копия информации и содержимое репозиториев удалось полностью восстановить. Если бы не случайное стечение обстоятельств, данная копия вполне могла бы не появиться.

Дело в том, что за день до инцидента, в рамках переноса содержимого сервера на новое оборудование, была дополнительно настроена система клонирования репозитория на ещё не введённый в эксплуатацию новый сервер, при этом синхронизация была настроена на запуск раз в 20 минут и начало очередного цикла пришлось на перезагрузку проблемного сервера, что привело к завершению запуска скрипта полной синхронизации по таймауту и выполнению следом только скрипта загрузки последней ревизии из репозитория на сбойном сервере, который также завершился неудачей, так как сервер не сумел сформировать корректный набор данных.

В итоге разработчики получили хороший урок и поспешили предупредить коллег об опасности излишнего доверия к распределённому характеру Git и использованию git -mirror в качестве способа резервного копирования.

А мораль здесь такова: эта история о том, что ошибки в проектировании архитектуры системы не решаются полуторатысячным дублированием информации — Github здесь бессилен. Старая как мир аксиома звучит так: «Зеркалирование != резервное копирование».

Внешняя ссылка по этой противоречиво-опасной специфике Git’a (у Git нельзя сделать нормально инкрементальный бэкап в файлы всех бранчей): Git Isn’t as Safe as You Think.

Похожие страницы:

Подписка на обновления блога → через RSS, на e-mail, через Twitter

Теги: OpenNet, unix, безопасность, горячее, ненормальности, облачное, серверное, человеческое, чужое
Эта запись опубликована: Понедельник, 25 марта 2013 в рубрике Истории → Новости.

комментариев

Следите за комментариями по RSS

Аноним
25.03.2013 в 13:38

Прошу вас обратить внимание на постоянную "резку" текста сайта (пару букв справа не видны, и так по всему тексту), просматривая его на планшете или телефоне в zoom-овом режиме.

Уже не единожды прошу!
Stringer
25.03.2013 в 14:06

Аноним: К сожалению, у меня есть только два планшета, оба андроидных: старенький Galaxy Tab и новый Asus Nexus 7 - на обоих нет эффекта обрезания букв, как вы описываете. Сейчас глянул также через встроенный примитивный браузер на Нокиа E71 - тоже всё нормально.

Просто не знаю, что это и из-за чего эффект возникает в вашем случае.
Аноним
25.03.2013 в 17:27

Что, ни у кого из разработчиков склоненной репы не было? Не верю.
Аноним
25.03.2013 в 19:04

Хочу показать, как примерно это выглядит - http://ubuntuone.com/5FXPsFLhYg68srE8kTJgxY это в вертикальном отображении
Leonid
25.03.2013 в 21:33

iPad 2 - никаких проблем с текстом.
NN
26.03.2013 в 09:05

Ну или стоит использовать две системы для резервного копирования.

Тогда если одна накроется, вторая скорее всего спасет ситуацию.
ivanzoid
26.03.2013 в 15:43

Извините, но это хрень какая-та). При разработке в git, у каждого разработчика есть локальная копия репозитория. При количестве разработчиков KDE, я уверен, восстановить всё из этих локальных копий не составило бы проблемы.
seriyPS
28.03.2013 в 19:36

Не понял, откуда взялась цифра в "1500 зеркал по всему миру". Про 1500 репозиториев есть в первоисточнике, 1500 зеркал - нет.
Комментатор 1436
24.01.2019 в 10:29

В условиях неустойчивой экономики, в то время, когда заработная плата и пенсионное обеспечение не отвечает типичным условиям жизни людей, у многих возникает потребность в дополнительных средствах. Отнюдь не все подряд кредитные организации рады предложить финансовую поддержку, так как для ее получения нужно предоставить значительный пакет документов, справку о постоянном месте работы, о стабильном доходе, залог и поручителей.

На этом сайте , вы непременно можете найти предложения кредитных организаций, где предоставляют деньги на пластиковую кредитную карту без отказов, срочно без проверки кредитной истории. Из огромного перечня, сможете подобрать предложения по кредитам на любую сумму, пусть даже с плохой кредитной историей без справок и поручителей. Смотрите внимательно ставки по процентам, преследуя цель самостоятельно выбрать выгодный кредит с низкой ставкой по кредиту. Оформить кредит, можно онлайн в Москве,СПБ или любом другом городе России. Искренне желаем вам позитивного решения по займу!

[url=https://kreditnavseh.ru/mikrozajmy-onlajn-kruglosutochno]займы онлайн онлайн заявка[/url]
Комментатор 1446
25.01.2019 в 08:04

http://atopy-pharmacy.com/antibiotics/prograf.html Pharmacy 24 Hours Near Me pamelor contra indicaГ§Гµes click to read more trusted-canadian-online-pharmacy.com/arthritis/arava.html Oxford Valley Pharmacy cuanto cuesta una caja de viagra en colombia is 200mg of viagra safe
Комментатор 1446
25.01.2019 в 20:08

http://houstonmedic.com/blood-pressure/hyzaar.html Kelsey Seybold Pharmacy [url=http://gencanmed.com/]Prime Therapeutics Specialty Pharmacy [/url] Rancho Park Pharmacy gencanmed.com/erectile-dysfunction/tadacip.html canadian pharmacy viagra cialis [url=http://atopy-pharmacy.com/erectile-dysfunction/cialis-professional.html]viagra 100mg vs. cialis 20 mg [/url] acidita di stomaco con cialis
Комментатор 1551
01.02.2019 в 06:30

Kroger Pharmacy Lexington Ky e5r4y54eyh45ydf34 Hocks Pharmacy Pitt Street Pharmacy Monroe Pharmacy blog link Medpro Pharmacy i was reading this MALE ENHANCEMENT PILLS official source Pharmacy Compounding
Комментатор 1551
01.02.2019 в 10:48

CODEINE PILLS e5r4y54eyh45ydf34 go to this web-site Ridleys Pharmacy Weslaco Pharmacy Beekman Pharmacy Pharmacy Scholarships additional hints Sellersville Pharmacy Sex Pills For Men Trusted Online Pharmacy
Комментатор 1562
01.02.2019 в 23:16

North Park Pharmacy e5r4y54eyh45ydf34 Center Pharmacy New Orleans Pharmacy Museum Valley Vet Pharmacy Super Saver Pharmacy United Healthcare Pharmacy Cvs Pharmacy Sacramento Pharmacy Requirements Stultz Pharmacy Cvs Pharmacy Milwaukee
Комментатор 1562
02.02.2019 в 03:21

San Ysidro Pharmacy e5r4y54eyh45ydf34 Phoenix Pharmacy Rite Aid Pharmacy Sacramento Ca find more info Brookville Pharmacy Alliance Pharmacy Cvs Pharmacy Hiring Bartells Pharmacy Hours DIET PILL Cvs Pharmacy Bakersfield
Комментатор 1562
02.02.2019 в 19:11

New Orleans Pharmacy Museum e5r4y54eyh45ydf34 Mini Pharmacy Cvs Pharmacy Customer Service Glenview Pharmacy Kaiser 24 Hour Pharmacy Key Pharmacy anonymous Pharmacy Definition pop over here Call Kroger Pharmacy
Комментатор 1562
02.02.2019 в 23:57

Beverly Hills Pharmacy e5r4y54eyh45ydf34 The Canadian Pharmacy Four Corners Pharmacy Kp.Org Pharmacy click for info Lakeland Pharmacy 24 Hr Pharmacies Near Me Harris Pharmacy read this article Bittings Pharmacy
Комментатор 1584
03.02.2019 в 10:00

Kaiser Walnut Creek Pharmacy e5r4y54eyh45ydf34 PROTEIN PILLS 24 Hour Pharmacy Columbus Ohio North Park Pharmacy Student Doctor Network Pharmacy Walmart Pharmacy San Angelo Learn More Here navigate to this site Panther Valley Pharmacy Giant Pharmacy Refill
Комментатор 1584
03.02.2019 в 14:09

Elgin Pharmacy e5r4y54eyh45ydf34 Walmart Mail Order Pharmacy Walmart Pharmacy Hours Near Me Cvs Pharmacy Charleston Sc websites West Concord Pharmacy Pharmacy Careers Health First Pharmacy Cheap Online Pharmacy OVER THE COUNTER BIRTH CONTROL PILLS
Комментатор 1584
03.02.2019 в 23:28

Pharmacy Hours Walmart e5r4y54eyh45ydf34 [url=http://xn--pgbo2e.pichak.net/member.php?54916-AnRIp ]Greenville Pharmacy [/url] 24 Hours Pharmacy Near Me [url=http://larivelazione.altervista.org/member.php?395793-Pharmacy1Evola ]Wellcare Pharmacy [/url] Express Care Pharmacy [url=http://seafishzone.com/home.php?mod=space&uid=360476 ]Big Y Pharmacy [/url] West Main Pharmacy [url=http://friendlygames.ru/member.php?u=24006 ]Columbia Pharmacy [/url] view [url=http://bbs23.hcwang.cn/home.php?mod=space&uid=12831859&do=profile&from=space ]Free Ce Pharmacy [/url]
Комментатор 1584
04.02.2019 в 07:31

PREMATURE EJACULATION PILLS e5r4y54eyh45ydf34 [url=http://vent.md/user/Pharmacy1awaic/ ]Your Domain Name [/url] Royal Pharmacy [url=http://aradzist.ir/forum/member.php?action=profile&uid=8647 ]Lewis Drug Pharmacy [/url] What Time Does Rite Aid Pharmacy Open [url=http://casinositeuk.co.uk/forum/profile.php?mode=viewprofile&u=33630 ]BLUE PILL [/url] Walmart Pharmacy Price Check [url=http://xianbbs.com/home.php?mod=space&uid=22818 ]here [/url] great post to read [url=https://pearljamz.org/forum/member.php?action=profile&uid=524 ]What Is Pharmacy [/url]
Комментатор 1584
04.02.2019 в 16:59

Beekman Pharmacy e5r4y54eyh45ydf34 Harps Pharmacy 24 Hour Pharmacy Walmart 24 Hour Pharmacy Austin Canada Pharmacy Online Review Cvs Pharmacy Reno Davita Pharmacy Grady Pharmacy check over here Phone Number For Cvs Pharmacy
Комментатор 1616
05.02.2019 в 02:34

Pharmacy 11211 Walmart Pharmacy El Paso Tx Las Colinas Pharmacy Falls River Pharmacy my review here go Walmart Pharmacy Gainesville Fl Walmart Pharmacy Longview Tx Pharmacy At Walmart Pharmacies Near My Location
Комментатор 1616
05.02.2019 в 06:16

West Val Pharmacy Walmart Pharmacy Pooler Ga Pharmacy Target 110 Pharmacy Cvs Pharmacy Products SEX PILLS FOR MEN Umb Pharmacy Kmart Pharmacy Phone Number Franklin Pharmacy Walmart Pharmacy Tulsa
Комментатор 1616
05.02.2019 в 14:39

Canada Pharmacy Online Reviews Where Is The Nearest Pharmacy this link Bergen Pharmacy Veterinary Pharmacy Walmart Pharmacy Discount Card navigate to this website anchor Colts Neck Pharmacy BEST OVER THE COUNTER WEIGHT LOSS PILLS
Комментатор 1616
05.02.2019 в 22:05

Ut Pharmacy Avita Pharmacy Rogue River Pharmacy Pride Pharmacy see OVER THE COUNTER BIRTH CONTROL PILLS Hilltop Pharmacy SLEEPING PILLS useful content National Pharmacy
Комментатор 1650
06.02.2019 в 08:11

Pre Pharmacy Requirements SEX PILLS FOR MEN Continued Colonia Natural Pharmacy BEST WEIGHT LOSS PILL York Pharmacy Marshall Pharmacy Coram Pharmacy Sex Pills For Men Walmart Pharmacy Sherman Tx
Комментатор 1650
06.02.2019 в 11:56

Horizon Pharmacy Notre Dame Pharmacy Pharmacy Law Walmart Pharmacy Hours Saturday look at this website Dfw Wellness Pharmacy Clark Pharmacy review Male Enhancement Pills click to find out more