История произошла пару лет назад. Трудился я тогда в компании, которая занималась дистрибуцией продуктов и алкоголя. Как это принято считать в большинстве не айтишных контор, штат айтишников деньги не зарабатывает, а только тратит. Деньги на ИТ выделялись, но очень неохотно и каждый раз с боем. В конторах с таким подходом руководства к тратам на IT, на зарплатах, как правило, экономят тоже, поэтому спецов нанимают либо откровенно плохих, либо без опыта. Взяли в тот год в штат парня без какого-либо опыта работы, практически вчерашнего студента. Через какое-то время отправили его в командировку, необходимо было доставить на отдаленный филиал сервер под SQL, заменить 1 UPS и подключить через него несколько серваков, в том числе и SQL. UPS заменен, сервер гудит, парень уехал.
Офис филиала находился в промзоне, были нередки перебои электричества. Через пару месяцев мы получаем от netping смс с сообщением, что пропало электричество. Следом от заббикса прилетает смс о том, что тот самый SQL и backup - сервер легли. Мы не понимаем, что произошло, сервера выключиться сами явно не успели. Разбираться без света возможности не было, пришлось ждать. Когда питание появилось, все сервера поднялись. Не поднялась только SQL-база, check db и прочие манипуляции базу не оживили. "Хорошо, что есть бэкап", - подумали мы. "Надо было все-таки дожимать финдира и выпрашивать денег на raid-контроллер и дополнительные диски для backup-сервера", - подумал ИТ-дир, когда мы ему отчитывались о том, что базы нет, а ближайший живой бэкап был датирован 2-мя месяцами ранее.
Что же произошло? Мы по своей глупости не проинструктировали парня о том, что подключать SQL - сервер двумя блоками в 1 UPS не совсем правильно, а точнее совсем неправильно. Сервер с бэкапами же представлял из себя обычный десктоп с HDD 4ТБ, в нем блок был всего 1. "Новый" UPS был по факту не новым, а старым после ремонта. Не выдержал он скачка напряжения и отключился, потащив за собой наш SQL и бэкапы. Мы сделали для себя соответствующие выводы о подробном документировании работ, парень открыл для себя что-то новое, только финдир остался при своем мнении. А мнение его в том, что айтишники деньги не зарабатывают, а только тратят.
#Наташа