байки системного интегратора, выпуск 1
давно обещал начать цикл. вот, начинаю :)
во время оно работал я веселом проекте по промавтоматизации для Газпрома. если кто не знает, газ по трубе гонят газовые компрессоры. которые суть газовые же турбины - доработанные судовые движки. ну, или от самалета ТУ-154. турбина обвешана хуевой тучей телеметрии - всяких разных датчиков и счетчиков. при запуске турбина раскручивается до шести тысяч с хреном оборотов т.н. "технологическим газом". технологический газ - это газ из трубы, по сути. затем зажигаются форсунки, и турбинко стартует. в процессе пуска давление технологического газа ослабляется, а на форсунках, наоборот, повышается. момент, когда технологический газ перекрыт, и турбина крутится сама, считается собственно готовностью к вводу турбины в рабочий режим. в общем, процесс запуска весьма и весьма непростой. равно как и последующая обработка телеметрических параметров. поетому как для снятия данных, так и в качестве исполнительных механихзмов, использовали мы замечательные промышленные контроллеры фирмы Octagon Systems. собственно, наша задача заключалась в том, чтобы отладить самописную софтину на Си под конкретную турбину. и работа эта была связана с большим количеством командировок по трубе. как-нибудь отдельное эссе про песню "Качаем газ" и вообще мужуков-газовиков накреативлю. но суть не в этом.
вообще, только в этом проекте понял я всю страшную мощщ хайтека. ощущаешь себя просто доктором Франкенштейном, выпустившим на волю монстра. щелк, щелк мышкой - бабах! все трясецца, турбина запускаетца, цифирки бегут по экрану! щелк, щелк! все смолкает. ууух.
а теперь о грустном. еблись мы полтора месяца на затерянной в дебрях снегах Сибири компрессорной станции. все сделали правильно, ошибок нету, вроде все хорошо. но периодически, совершенно бессистемно, в телеметрию начинала лезть всякая херня и турбины аварийно стопились. в том числе и с задействованием пожарной сигнализации. что только не пробовали - меняли версии софта, контроллеры целиком, датчики, турбины - один хуй никак. все сроки и графики были сломаны уже давно. что мы, что мужики-газовики начинали уже потихоньку звереть.
в один прекрасный день вызвали нас в город, в головной офис этого самого перепердюйск-трансгаза. а надо сказать, что и генеральный директор и евоный зам по ИТ - бывшие военные. в общем, в лучших традициях, на ковер, и началось:
- какого хуя, ебаный рот, пидарасы, совсем охуели, разъебете все турбины и т.д.
в общем, заковыристый, мастерский, многоэтажный мат. в самый разгар тирады генерал осекается, и, типа, наезжает на зама по ИТ
- Петрович! Ебаный ты насос, ты-то куда смотришь?
Петрович показывает на нас двумя руками ладонями вверх, и говорит пренебрежительным тоном (а-ля "бляди, сэр"):
- Василич. Хуй знает, компьютерщики.
типа, с этих людей никакого спроса быть не может.
Занавес.
P.S. в чем причина проблем мы все-таки разобрались. оказалось, у монтажников невовремя закончился медный кабель. а хочется уже домой из этого медвежьего угла, в тепло, к жене. ну вот ети уродцы взяли и нарастили медный кабель люминьевым, а люминьевый еще раз медным. а кабеля эти шли как раз таки от датчиков. получилась, что ни есть, термопара. поэтому, ежели температура окружающей кабеля среды была стабильна, после калибровки компрессор нормально запускался и работал. два-три градуса туда-сюда - пиздец, в показания датчиков лезла ересь. после того, как я это выяснил, оставил на хозяйстве свою банду, и не поленился слетать в мск, разбить ебало тому, кто это сделал.
но фраза "Хуй знает, компьютерщики." как объяснение любой некомпетентности, навсегда осталась в моём сердце.
UPD:
да, Петрович таки перед нами извинился. потом я попросился в другой проект. перенервничал. бойцы же, которые остались, рассказывали, что монтаж Петрович теперь курирует лично. типично армейским способом. а именно - проводит инструктаж через хуй, блядь, и еб твою мать, а кропотливо сличает каждое действие монтажника с проектной документацией. отступившим от оной выдает пенделя в прямом смысле. все-таки военные молодцы.
Байки системного интегратора, выпуск 14.
Национальный Банк.
Во время оно, впарили наши излишне доблестные сэйлзы тяжелую машину в нацбанк одной братской республики. Сделка была окутана такой тайной, как будто продавали технологию изготовления ядерной бомбы, а не высокотехнологичный 32-процессорный сервер. Пресейловой фазы как таковой не было - конфигурация машины была посчитана исходя из "32 процессора, 256 гигабайт, карточек и винтов по максимуму". Название клиента не разглашалось, site check (проверка места установки на предмет соответствия инженерной инфраструктуры и путей транспортировки) не производилась. Собственно, монтаж и запуск машины производил вендор.
Прошло время. И вдруг ВНЕЗАПНО поднялась большая буча по поводу совершенно бессистемных выходов машины из строя. Именно тогда я узнал, кому ее продали. Поскольку дело пахло международным скандалом, большие боссы попросили проблему как-то решить. Делать нечего, выдвинулись на локацию, попутно впечатлившись национальным колоритом. А уж шмон на входе в нацбанк был такой, как будто в его подвалах укрыты сокровища из "Тысячи и одной ночи", и мы не интеллигентные инженеры в костюмах и при галстуках, а сущие разбойники.
Путем снятия логов с сервисного процессора выяснилось, что причиной самовыключения машины является thermal shutdown. Говоря по-русски, если вдруг выходит из строя кондиционер, и температура в серверном помещении достигает определенной планки, машина аккуратно останавливает операционные системы и выключается. Процедура обратного ее пуска дело непростое, к тому же регулярный thermal shutdown (вместе с перебоями по питанию) является поводом для отзыва гарантии. Собственно, причиной, по которой я вместе с моей бандой высадился там, было то, что производитель умыл руки и пригрозил при следующем вызове разорвать гарантийный контракт. Кондиционеры, на которые пало первое подозрение, были хоть и промышленной мощности, но тупые - без системы управления и мониторинга, типа херовизора :) (Hirovisor у систем Liebert Hiross), работающие по термостату. Инженерно-эксплуатационная служба клялась Аллахом, что из строя они не выходили. Дежурные электрики показали, что электричество не выключалось. Причем самоубийство машины происходило исключительно по ночам, и совершенно бессистемно. Админы продемонстрировали телефонные фотограции градусника с уставными 18 градусами Цельсия, и горящими лампочками рабочего режима на кондиционерах, выполненные по факту обнаружения удушившей себя машины. В общем, мистика. Впору во всем было винить козни шайтана.
Процесс problem, так сказать, determination осложнялся еще и тем, что начальник службы безопасности и начальник ИТ-подразделения по каким-то своим национально-родовым причинам уже не первый год находились в состоянии "насмерть посрамшись". Соответственно, в просьбе об установке камеры, подключенной к видеомагнитофону, или хотя бы нашей веб-камеры нам было отказано. Равно как и в просьбе об обеспечении круглосуточного прохода и открытии канала наружу, чтобы припасенная на диагностическом ноутбуке система мониторинга могла отправить нам письмо по факту сбоя. Мобилы в помещении не работали, так что маленькая хитрость с использованием GSM-модема нам тоже не удалась. Ноутбук (еще одна маленькая хитрость), пишущий на встроенную камеру происходящее, оставить в помещении серверной тоже не дали. Как видите, я не совсем дурак, и все спортивные и неспортивные методы решения вопроса перебрал. Оставался только самый геморройный и наиболее тупой - установить ночное дежурство в здании банка под присмотром душманов из охраны, что ввергло меня в крайнее уныние, от которого я позвонил большим боссам, и пригрозил уволиться к такой-то матери. Боссы слезно умоляли и неуверенно сулили всем сокровища царей земных. Посовещавшись с бойцами, решили таки не отступать, тем более что такой расклад давал нам некоторый отдых от беспорядочных командировок в диапазоне от США до Хабаровска, а комната переговоров, которую нам предоставили для дежурства, отличалась подлинно восточной роскошью, и очень кстати вспомнилась восточная же мудрость "... а там или ишак умрет, или падишах, или я".
Так прошло две монотонных недели, в течение которых мы неплохо отъелись, расправили свои сжатые в спирали нервы, и даже душманы перестали нас закрывать на ключ при дежурстве. Начальство, поначалу донимавшее звонками в стиле "ну чо там?" было послано на хуй в прямом смысле, и этим удовлетворилось.
Заступив на вахту очередной раз, я было намеревался принять на сон грядущий коньячку, и нести нелегкую службу на огромном диване, как вдруг услышал отчаянный рёв системы охлаждения сервера, внезапно давшей максимальные обороты. А вентиляторы там такие, что в ряде цивилизованных стран запрещена эксплуатация машин этого класса без специальных акустических дверей, гасящих шум. Ну наконец-то! - подумал я, вбил ноги туфли, и рысью отправился смотреть, какой он, этот самый шайтан.
Коварный Шайтан оказался дедушкой, дежурным электриком, подставившим к машине сзади рабочий столик, расположивший на нем некую снедь, и вырубивший кондишены. 40 киловатт тепла, которые дуют из этой машины - прекрасная альтернатива иному духовому шкафу. Когда душманы строго допрашивали дедушку о причинах, выяснилось, что в бытовке у них стояла китайская микроволновка мохнатого года, которая то включалась, то не включалась. Хитрый дедушка присутствовал при пуске машины, и быстро просек, какая баня случается в случае отключения кондиционирования. Высокотехнологичный сервер воспринимался примитивным разумом дедушки исключительно как здоровущий громкий шкаф, из которого дует много тепла. Не пропадать же такому добру, и не кушать же холодную еду, правда?
В общем, дедушку попросили на пенсию, остальным электрикам пригрозили смертью и пытками, а нам, спасителям, устроили пышнейший банкет в лучших традициях восточного гостеприимства.
А новую микроволновку нищим электрикам я купил сам, потому как стало мне их очень жалко из-за скотских условий, в которых они работают. Благо что премия, которая мне светила по возвращении, была весьма впечатляющей.
Суть по своей идее очень даже замечательно, больше всего понравилась форма изложения(ЗАЧЕТ) - в общем и целом степень кривости рук монтажников и человеческий фактор - никто не отменял
Форум 
