Коммуникационная компания купила новый сервер HP 7-й версии 380-й модификации. Открыли коробку, вынули сервер, смотрим. Главный админ поднимает плёночку, достаёт бокс с ПО и изрекает:
— Та-а-ак, народ, свежая заокеанская порнушка прибыла! В выходные смотреть будем.
Было это году в 94-м. Мы, трое выпускников и студентов вуза, в отдалённой области компьютеризировали и запускали серьёзную федеральную организацию. Более 30 районов, командировки в дождь и мороз, связь — «алё, барышня, мне город, пожалуйста», модемы на 2400, 286-е компьютеры пользователей и на каждый филиал по серверу на 386-х машинах. Стояла на этих серверах хорошая операционка, которую всегда и во все времена звали «нетварью». Графического режима она не знала, вид и запах мышей на переносила, слушалась консоль и держала на своём зеркале базу на FoxPro.
Шли годы, обновления, на пятки наступал прогресс. Через несколько лет наша дружная компания плавно разошлась в бизнес. Я по старой памяти на правах аутсорсинга присматривал за парой районов. В организацию приходили работать новые люди, появлялись современные компьютеры, а сервер в одном далёком райцентре спокойно жил и трудился.
«Нетварь» спокойно перенесла переезд на винты побольше. Сменились материнская плата, память и корпус, три блока питания, не счесть кулеров и UPS. Операционка проигнорировала энергетический кризис Чубайса с его веерными отключениями, разморозку помещений и даже нескольких уборщиц. Железо умирало, его вовремя меняли, а «нетварь» жила и спокойно тянула филиал. Да, было, что базу подтирали по глупости, но за все эти годы база ни разу не рухнула по вине операционной системы.
Немножечко лет назад было принято решение о списании старого и давным-давно устаревшего файл-сервера. В стойло (пардон, в стойку) ворвался резвый конь в красочной упаковке с 2003-м Сервером на борту, а старичка по моей просьбе положили на склад, ибо не заслужил он своим честным трудом закончить жизнь на помойке.
Не прошло и года, как резвый скакун в первый раз подвернул ножку, не выдержав перепада электричества в момент обслуживания той самой базы (да-да, той самой, написанной на FoxPro в прошлом веке под DOS). Высшим начальством оживление на месте было запрещено, и повезли скакуна в далёкий областной центр на перековку. Вот тут-то и вспомнили про старый сервер с двумя 20-гигабайтниками в зеркале. Снял я его с полочки, подключил. Пенсионер нехотя крутнул лопастями, разгоняя пыль, принял на себя свежую базу из архива и спокойно потащил, работу всей конторы. Позже я за его здоровье выпил бутылочку пивка, а самого протёр чистым медицинским спиртом и укутал целлофанчиком, относя на склад.
Вот вы спрашиваете: «Где же ваша „нетварь“?» Моя — на своём законном и заслуженном месте, боевом дежурстве запаса, ибо сейчас скакуну грозит переезд на 2008-ю платформу, и кто его знает — вдруг вновь придётся подставлять своё крепкое стариковское, но не дающее осечек плечо, чтобы вытащить очередного размалёванного гонщика из «неожиданно появившейся лужи»? Потому что пишут хулиганы вирусы, а писатели — обновления. Потому что гении строительства навострили свои перфораторы, протрезвел сварщик и не дремлет уборщица…
Фотку с мангалом из компьютерного корпуса все видели? Это что! Недавно побывал в командировке в Баку. Смотрю — огромный мангал напоминает что-то знакомое. Подошёл ближе — точно, уложенная горизонтально серверная стойка.
Взял однажды на аутсорс одну госконтору, потом оказался в штате вроде и админом, а вроде и нет.
Сервера имелись такие:
1) IBM, третий пень, 128 метров памяти, три разных по объёму SCSI-винта. Ещё живой, но еле тянет домен, 1С и Консультанта.
2) Две самосборки уровня Celeron 2000, 256 MB RAM: одна под интернет-сервер, другая под почту.
3) Рабочка админа: Хeon, гиг памяти и винт на 200 ГБ под Windows XP Home Edition.
Ладно, памяти в домен я добавил, в другие машины тоже. Заодно решил проблему потери писем: старый админ для борьбы с вирусами (или инопланетянами) вырубал сервера, запитанные через UPS, на выходные из сети. А так как почтовый ящик внешний был 20 МБ всего (спасибо местному полосатому провайдеру), то почта тупо забивалась спамом.
Но круче всего то, что в конторе, как мне объяснили, было две локалки. Но домен один, провода одни… В общем, в сервер была вставлена ещё одна сетевуха. Обе карты имели айпишники в одной подсети с шагом в 50. Но чтобы вторая сеть не видела инет, не были прописаны прокси и гейт. Зато в 1С на балансе гордо стояли «сеть локальная бухгалтерии» и «сеть локальная предприятия».
Обновили версию жёлтой программы. Заодно решил поставить её на новый сервер. Проблема в следующем: на сервере (одноюнитовом стоечном) два USB-порта снаружи, один внутри. Пачка приложений крутится, в конторе завал — не отрубишь. Этот же сервак используется как подставка ещё под два сервера в обычных миди-тауэрах. Спец, что версию меняет, ждёт за деньгу.
Помолясь, аккуратно передвигаем миди. Аккуратно снимаем крышку. Аккуратно вынимаем мешающие пластиковые детальки, что мешают доступу к USB. Аккуратно вставляем ключ. Аккуратно собираем-задвигаем всё обратно. Ффухх…
Тут спецу требуется зачем-то вытащить один из ключей из филейной части сервера. Недолго думая, лезет без спроса. Только прикасается к ключу — старенький монитор, подмигнув, гаснет…
Завтра выставлю, чтобы экран гас через час — нет, через два часа после простоя! А сейчас иду лечить нервы.
Знаете, каково это — настроить линуксовый сервер, являющийся единственным источником интернетов в штабе отряда противопожарной службы, находящемся за 180 км от города, показать шефу, как всё замечательно работает, и забыть забить настройки eth0, роутинга и rc.d для OpenVPN в конфиги, а на следующий день не обнаружить этот сервер в сети VPN, так как его выключали на ночь?
В начале нулевых старшему коллеге-программисту довелось побывать в одном из челябинских подразделений РАО ЕЭС России. Понятно, что контора серьёзная. И вот они с ведущим специалистом осматривают серверную, тот знакомит с оборудованием. С самого начала экскурсии у коллеги появилось смутное чувство: что-то не так. Под конец челябинец пожаловался: «Вот упсы новые пришли, а в шкафы поставить не могу. Боюсь, болты не выдержат». Тут-то и прояснилось, что не давало коллеге покоя.
Контора располагалась в старинном здании чуть ли не дореволюционной постройки. Перекрытия, соответственно, деревянные. Когда начали устанавливать серверные шкафы, пол начал ощутимо прогибаться и трещать. А под серверной располагался кабинет директора организации, который очень испугался за свою бренную жизнь и приказал любыми способами обезопасить себя от бездушных машин. Так как более подходящего помещения под серверную не нашлось, было принято гениальное и очень простое решение: серверные шкафы прикрутили болтами к потолку.
Случилась эта история с моим коллегой, ещё раз подтвердив, что законы Мёрфи не дремлют и только и ждут шанса напакостить нашему брату.
Началось всё с вполне благой инициативы: в среде удалённого развёртывания и управления, в которой мы работаем с клиентами, коллега решил немного изменить политику установки Microsoft Office на клиентские машины, чтобы перед установкой юзеру сначала показалось бы диалоговое окно, предупреждающее, что сейчас ему будут ставить Офис, с возможностью подтвердить, отложить или отказаться. В тестовом режиме политика отработала безукоризненно и недрогнувшей рукой была перенесена в боевую среду.
Первое подозрение закралось, когда свежедобавленная политика сообщила, что затронет вместо необходимых двух десятков машин что-то около трёх тысяч. «Что-то здесь не так», — смекнул наш инженер и полез проверять настройки, к своей великой радости обнаружив, что забыл поставить в них одну галочку — зато какую!
Политика была немедленно отключена и удалена с основного сервера, но её уже успели подхватить и принять к исполнению периферийные. Стройными рядами на машинах мирно работающих пользователей начали всплывать окошки с вопросом на английском языке. Прежде чем удалось заставить горшочек не варить, попришибав все периферийные и дополнительные серверы, политика успела обойти около двухсот машин, большая часть из которых была в Германии. Юзеры в большинстве своём были в явных неладах с английским, поэтому нажимали кнопку наугад. Сами-то пользователи в массе своей не возражали, кто-то даже обрадовался внезапно появившемуся на машине Офису, но нашлись и те, кому внезапно всплывшие окна на непонятном языке категорически не понравились, и в итоге о случившемся узнали менеджеры. Далее по цепочке очень быстро вычислили наш отдел, и в кабинете раздался звонок от Большого Начальника.
Весь следующий день был проведён в режиме телемоста с руководством компании в Европе. Выяснялись масштабы происшествия, составлялся список пострадавших, принимались меры. В общем, коллегу моего перевели в другой отдел, максимально урезав его в правах. Теперь он будет заниматься установкой программ — в том числе и злополучного Офиса — только вручную. А ведь он просто хотел как лучше!
Проводим IT-отделом модернизацию парка серверов. Пробившись через кошмарное сопротивление бухгалтеров, программистов, начальников других отделов, администраторов подсетей, просто пользователей, наконец, переводим всё на новое железо в новый домен. С радостью глушим задолбавший домен на NT-шках. Остаётся решить последнюю проблему: на железо одного из серверов зарегистрирована лицензия крупной корпоративной системы. Из множества решений начальство выбирает самое страшное: оставить сервер.
В силу сложности отношений между задачами, доменами и сетью в целом простое включение обратно в сеть неприемлемо. Вернутся не только старые глюки, но и добавятся те, что вызваны максимально мягким переводом ресурсов на новые сервера (в ущерб логике, в угоду юзерам и ленивым программистам). Принимаем решение: обновить систему, чтобы можно было понизить роль сервера и включить его без тени старого домена за плечами.
Дело поручают мне. Тестирую на другом старом сервере — всё ровно и гладко проходит. Начинаю работать с самим пациентом. Первая попытка — обновление не проходит до конца, и мы получаем коряво обновлённый контроллер старого домена на новой операционке. Приходится пристрелить — в смысле, восстановить бэкап и начать заново. После второго обновления не работает половина служб, а логи системы чистые. Вижу в диспетчере устройств, что требуется обновление некоторых системных драйверов. Сервер уже изрядно неприятен мне как личность. Нахожу драйвера на сайте производителя, обновляю — полный абзац. Сервер начинает по две-три минуты реагировать на любое действие сложнее передвижения курсора. Лезу читать форумы производителя. Нахожу похожую ошибку. Среди бреда, советов обратиться в сервис и самому взяться за паяльник нахожу гениальное: «Выключите на 30 секунд и включите снова».
Помогло. Сервер перестал включаться. Железячники, поковырявшись, сказали, что умерло всё, что могло, и запчастей нет даже в музее. Начальство плюнуло и перешло к человеческим способам переноса лицензии на новое железо. Дружно поём: «Да здравствует разум, да сгинет маразм…»
