Як поїхав робот, майже перевертався сірим і заливається кров на серверній кімнаті

Це історія одного з найбільш пам'ятних випадків у своїй інженерній практиці. З явних причин я змінив імена, місця та деякі деталі, щоб точно визначити клієнтів та інших учасників історії.




Це те, що сховище скотч виглядає як (рідше було) і бібліотечний робот. Китайський не входить.

Частина 1. Я пам'ятаю останні дні листопада. Вже подумав про закінчення робочого дня, я планував вечір, коли раптом я поінформував, що в славному Сибірському місті Н нашої бібліотеки стрічок замовника було порушено. Запасна частина була відразу відправлена транспортною компанією, але це було 3 дні, так як це було ще на дорозі. Транспортна компанія була непристойно роз’яснена і розтирається на телефон, а замовник став нервовим. Прогнози були невизначеними, тому було прийнято рішення про проведення чергової запасної частини на площині. На плечі з слів: «Не зайдіть в багаж – пам’ятайте. й

Коробка точно занурила мене, але я був однаково турбувати молочним порошковим мішком, що менеджер проекту подав мене в останні хвилини. Вони мають деякі трави з молоком тепер ... через погану погоду або щось ... місцеві хлопці просили 2 кг, щоб принести їх. Не важко для вас, це? він сказав. З виразу його обличчя і характерний жест своєї руки, що охоплює мій рот, було зрозуміло, як він тепер хотів, щоб мене бути переконливим або навіть матовим.

Ця історія стала ще кілька років тому, коли я був інженером, коли я летю по всій країні багато, і прокинувся в іншому готелі, іноді я не можу з'ясувати, що місто я зараз. 4-5 бізнес-поїздів на місяць залишають свій знак на шляху життя. І уособлення цього способу завжди був готовий до наступного рюкзака.

Частина 2. Я вийшов з таксі і раптом офіцер поліції припинив мене в будівлі аеропорту. "Ваші папери!" він спійманий, і почуття глибокого задоволення, якось припинив його обличчя. Погана вітрова тушка, що запобігає переробці моїх кишень і мішків. Я, як я міг, видобув свої документи і подався до правоохоронних органів. У теорії молодий людина, яка подорожує тільки з ноутбуком, великим ящиком і сумкою білого порошку, не повинно викликати будь-яку підозру, тому я пофарбував на обличчі справжній бджоли. «Що в ящику?» він запитав Звісно, той факт, що пакет нічого не був більш порошковим молоком, він вже визначив свій професійний вогонь, і тому пакет вже не зацікавився ним. Але коробка ще не приглушена до його розуміння. "Це робота", - сказав він.

У той момент я відчув, що його небайдужим обличчям було замінено, для нього було висвітлено зсередини справжнім інтересом, так як якщо модуль з функцією людської куріозності додано до кишечника його кокардіальної шапки. Я знав, що я хотів би відповісти, і я хочу виправити ситуацію швидше. "Це робот ... для бібліотеки," Я додав ще менш впевнено, що я продовжив дивитися інші модулі хропіння, потепління і життєздатні заглушки. «Сай, робот для бібліотеки...» Робота бібліотекарів?

Частина 3. Я зробив мій шлях до висадки, пам'ятаючи, коли я просто зробив з кокардієм. Я думав, «Я міг би пропустити літак. й

«Ми відключили наш багаж, куртки, ремені та взуття, виводимо наші телефони...» – бездоганно і безтурботно замовили жінку у формі. Захопивши свої речі на стрічці, я сам проходив через каркас металодетектора без звуку і вичавлення. Зрозуміло, що коробка з роботом була обурена офіцером з безпеки аеропорту, який переніс її назад і через рентгенівські промені. “Що це?” Вона, нарешті, сказала, як всі порівняльні зображення в її голові висушують. Я був спалений молочний мішок в руках, мислити про свою тактику, щоб я не повторю кокардіальний епізод. «Це робот для бібліотеки L200». Це третій раз цього тижня, сезон розбиття пішов. Приїжджайте, юнака! Не обмежувався моїм визнанням, але в той же час я був дуже вдячний за те, що я подарував мені, а також технічну грамотність своїх однодумців, які працюють в аеропортах.

Частина 4. Русти «Волга» підняли мене з аеропорту до готелю. З тридцяти чоловік сумнівний вид, який зустрів нічний рейс перед місцевим аеропортом, це здавалося мені найбільш зарезервований. У всіх своїх смоких появах було якесь доброчесність і навіть благородство. Однак зовнішній вигляд водія таксі часто занурюється, і він все-таки дивився, чому я живу в Москві, але я не знаю, як речі з Алла Борисівна Пугачева. «Ви живете в одному місті з нею, і ви не знаєте?» Він мене не хотів, щоб побити бруду з обличчям перед гістьм столиці. До дверей готелю ми розготовили сновидіння і з розсіюванням гальм, закінчуючи крутим піруетом, неприпустимо для автомобіля з таким поважним віком. Дверцята автомобіля здавалося відкрити себе, або просто впав. Ведучи своє питання: «Чи ви даєте мені перевірити?», водій таксі загинув руки і повністю забули свої навички.

Я входив в будівлю, шукаю на бездоганно оформлених стінах і стовпчиках, все з сірим покриттям як пил. Будівля була старою спорудою, можливо, колишня нерухомість. На прийомі дівчина небайдужно пофарбувала її нігті. Впевнений, що ми маємо право, як клієнт, Я відповідально забрав свій паспорт і скасував його на зустріч. Мадам відверто відвернув себе від нігті, дивився контемптуозно на мій паспорт і змащений: "Ми не дивуємо." "Що?.." у моїй голові миготливі перев’язки та інші ознаки екстремальної індикації. "У мене є кімната, забронювана тут," Я спробував бути ввічливим. "Це казино! Вхід до готелю з іншої сторони двору. Хто знав, що обидва місця мали однакову назву? І тоді я мав час подумати, що весь цей час водій таксі був кермом, очевидно, подумав, що я летю з Москви до цієї непристойної зимової землі, щоб приховати вміст коробки для карток і рулетки.

Частина 5. Сонце або не спить? Готельний зал привітав мене з шикарними шторами на підлогу і соковитим запахом вологості. Я сидів на краю ліжка, розташованого в ніші стіни, акуратно опущену коробку з роботом перед мною і з сюрпризу привітали павук в кутку. Робота в замовнику запланована на 9 ранку, на годиннику було 6 місцевих. Моя голова ще не здувала з двигунами IL-62 та іншими захопленнями довгого рейсу. Я думав про перспективу отримання пари годин сну і прокидатися свіжими, і прийняв правильне рішення, щоб просто залишитися вгору. Фізіологічно, мій випадок, як правило, закінчуючи вечерею, навіть нічний кефарик, тому я скоригував наш підпис зеленої скотчової коробки і пішов в душ.

Частина 6. Коли на 9 ранку я прибув з роботом і молочним порошком до замовника, на в'їзді я зустрівся представником ІТ відділу, який сказав, що його ім'я нібито Семион. Семіон тримав розмову про все навколо, зараз а потім протирання рота своїми руками. За своїм зовнішнім виглядом і простими манерами було зрозуміло, що в відділі роль людини він зустрічається частіше, ніж інші, як найбідніший фахівець, але дуже соковита людина. Без сумніву Семіон довіряв люди, і, як він вийшов, мав чудовий, практично неприпустимо апетит.

Підлога була загартована і запашна фарбою. Семіон пояснив, що це нова будівля і зараз друга платформа оснащена тут. А потім мій стільниковий телефон ранг. Це був менеджер проекту. «Знайди, що ви досягали успіху?» Дивитися, допомогти їм там. Ми зараз встановлюємо кластер для них. За тиждень наш Леша. Хтось не працює. Не важко для вас, це?

Частина 7. Прийнята Семіоном, вводила в гриб. Коробки різних розмірів розміщені всюди з написами Dell, Cisco, EMC. Багато з них вже були відкриті, навколо були дроти, рейки для монтажного обладнання в стійках, палях документації і електриках. Електроніки не просто кладуть там, вони змащуються дротами під хибним підлогою і заварюють спокійно. У центрі цього творчого хаосу став старшим спеціалістом відділу Миколая. Проходив майстер-клас. Ведуться з зустрічі, наш Alexei langued за пальцем коробок, що сидить на монітор свого ноутбука і таємно сніданку з бункером. Семіон також захотів бункера, але йому довелося брати участь у зустрічі, тому він просто заповнився.

З перших слів Миколая я зрозумів, що час запуску комплексу був запущений, менше дня. З приходом другого майданчика керівництво встановлює завдання реорганізації одного з найважливіших інформаційних систем. На базі даних було створено ядро інформаційної системи. Тепер зберігають на двох системах зберігання, між якими проводилися синхронні дані. Програмне забезпечення кластеру відстежувало стан усього комплексу і може автоматично реагувати на відмову в тому випадку, якщо на головній ділянці щось погане. Підготовча робота була практично завершена, але багато часу втратили в пошуку і ліквідації зламаних оптичних зв'язків між сайтами, які заклали підрядника. І було необхідно закінчити встановлення серверів, оновити операційну систему та мікрокоди на них, а також перевірити все. Запуск комплексу в комерційну операцію заплановано на ніч - єдиний час, коли можна зупинити відповідальні фінансові системи.

Частина 8. Від світанку до дука я не пам'ятаю, як цей день пішов. Я тільки пам'ятаю, що мої колеги відразу сказали мені, що Бібліотека стрічки буде чекати в світлі обставин, і зараз мої руки важливі в іншому питанні.

Ми витрачаємо всі сервери для монтажу, шпинінгові горіхи, прокладки кабелів, з'єднувальні адаптери. Ми вже встигли повечеряти в лісі. Потім я поставив операційні системи, патчі, мікрокоди. Інколи мікрокоди записали магію на мене, і для того, щоб не спати, я згадав, як на площині рейсу ведучий майстерно омолодився чайником, роз'ясне турбулентство і розподіліть чай до пасажирів, бояючись окропу. Він був ніч, і ви могли бачити з вікна, що великий апельсиновий місяць піднімався над лісом.

Частина 9. "Hour X прийшов" - cheerfully - сказав він, язик, Ніколаї, коротко звершуючи з кимось на місцевому телефоні. «Це прийшов, він прийшов,» вони повторилися йому з труби, він ще не встиг ставити, і загинув. Це був «апліканти», які також були обов’язковими, що вночі і після завершення нашої роботи довелося переконатися, що все працює.
На годиннику руки показали ніч. Ми приїхали до найбільш критичного моменту, коли нам довелося переключити повторення даних до іншої системи зберігання, чекаючи синхронізацію, щоб завершити і підняти кластер на другому місці. Цей процес був повністю створений Alexei, відомий фахівець в системах зберігання в наших колах. Іноземці усвідомлювалися про свою поведінку. Він, згасаючи, скопіював ідентифікатори об'єму в скрипт, перевіривши список, який клієнт надав йому. Половина години пізніше, коли було завершено цю роботу, Леша доторкнулася ключа для лояльності, і переконавшись, що це було реально, притиснувши її. Кожна була тривожно чекала чогось, а універсальна тиша була розбита тільки тріщиною люмінесцентних ламп. Я піднявся під хибним підлогою і в реальності уві сні, але не пам'ятаю чого.

Частина 10. Я прокинувся, тому що синхронізація була над, але всі не були щасливими. Послуги кластера не пройшли. Я називався з країни снів, щоб подивитися в журналі. На жаль, я прийшов до мене, що проблема була з підсистемою диска. Група логічних томів була імпортована з помилкою та даними. Причини ще не зрозумілі, але перспектива зворотного зв'язку до старої конфігурації, тобто план Б, почав ткати. У сім годині ранку система повинна працювати, тому немає часу думати. Я не мав ідеї, що трагічні події цієї ночі були тільки починають розгортатися.

Я лікував ще п'ять хвилин і запропонував розкачати стару систему. Невідкладно, мої колеги погодили, що вони допоможуть повідомляти свої переваги вранці. Ми переключили напрямок реплікації і дав команду імпортувати дискову групу на старому сервері. Я вже заспокоївся і мріяв про отримання в готельне ліжко з почуттям мита. "І це не так." І всередині нас все припинилося.

Частина 11. Фольга остаточно очищена в голові. Він сказав, що в екстремальній ситуації організм людини мобілізований. Про те, що я можу зробити. Все було чудово на боці зберігання. Зроблений з цього, мій колега Олексій захопив свою руку, підписавши свою безладність, і пішов дивитися фільм на своєму ноутбуці. Я вже згадував про своїх міраційних дій. Але формально нічого не скаржалось.

Причиною проблем була досить чітка. Додаткові обсяги були додані в дискову групу раніше замовником, але вони були забуті, щоб додавати до списку дисків, які відтворюються. На старті кластеру було імпортовано дискову групу, але метадані було оновлено тільки на частині дисків, а нові залишилися в режимі зчитування. Тепер конфігурація дискової групи остаточно не погоджується, а дані не доступні з нової системи зберігання або старого.

Коли мова йде про фінансові дані величезної організації, її втрата посилюється на катастрофу. Я відразу ж пам'ятаю схожу історію, коли, на дачі своєї інженерної кар'єри я знайшов себе ремонт одного клієнта – серйозну структуру, яка була легалізовані в 90-х роках. Вони обговорювали, що їх адміністратор недбалий. «Що сталося? Я запитав. «Прийміть, він сидить тут в підвалі третій день. Ми чекаємо на загальне, він вирішить, що робити з ним, поголені голови працівника з важкою мережею навколо його метелика відповів мені в повній серйозній серйозністі.

Частина 12. Хінді Ви коли-небудь відчували волосся, що рухається на голову, про поворот сірого? Припустимо, ми втратили базу даних, я навіть не хочу думати про те, що буде з ранку.

У ситуаціях, таких як наша, необхідно негайно викликати технічну підтримку виробника. Вона, в цей час, зрозуміло англомовний. Я шорстко намальовував ключові слова для себе і набрав номер. Відповіли два роги та англійський баритон. Я не сказав, що ми були і що сталося. «Що таке ім’я? Я припинив, але з моїми думками я відповів. Тоді прийшли питання про прізвище, ім'я клієнта, місто, розташування, серійне число, і так на невизначений термін. Час відбігається недорогим. Після завершення анкети, баритон попросив мене написати номер звернення і сказав мені чекати виклику фахівця. Він не викликав мене, він написав мені 5 хвилин пізніше. Він написав, що він прийняв мій додаток, але його зсув був над, так що я мав називати відправника знову і попросити його застосувати для іншого фахівця. Не зрозуміло, чому деякі люди не люблять працювати в Росії. Здавалося б, помилитися.

І сталося диво. Я отримав справу з іншого фахівця, але він прийшов з Індії. У другому глобальному технічному центрі технічної підтримки було прийнято рішення. Я був щасливий з ним, як мій батько, але моя радість не останню довго: ми не розуміли один одному. Він зрозумілий, що він здавалося говорити англійською мовою, але це не було простіше. Іноді деякі звуки його мови зробили мене дивно, що він означав. Але в кінцевому підсумку наше спілкування було зменшено на листування. Я процікавив свою пам'ять, пам'ятаючи всі найкращі моменти з індійського кіно і намагаючись дати відчути глибину нашого граната. Пройшов час. Не може допомогти нам.

Частина 13. На світ від виконання, в 4 a.m. ми зрозуміли, що немає іншого варіанту, але для відновлення з резервної копії. Всі очі були на бібліотеці стрічки. Миколаї навіть кинуться перед нею, втираючи підлогу краваткою. «Як довго буде підстава з стрічки?» – запитав місцевий ростак. "Це напевно три години", - відповів він невизначено, "але ми ніколи не перевірили." Для заміни роботи в бібліотеці необхідно терміново замінити на тригодинну протяжку. Ніколи перед тим, як я відкрив пакет так швидко і закручений гвинти. З роботи, потоплений в крові, був закінчений, він стояв на своєму місці. Я заливив кров на нього, боляче пальцем через щітку, але не було часу для бандування. Бібліотека висвітлюється зсередини з світлом, робота переїхала і почала калібрувати. Ми переповнили бібліотеку і подивилися через вікно, розумово допомагаючи йому переходити і читати штрих-коди з стрічок. Він зробив його повільно, з задоволенням, і ми натискаємо наші зуби на скло. "Ініціалізований!" - сказав грошийник, що відноситься до бібліотеки. І додав він, "Я відпустив відновлення." Робот думав другий, потім швидко кинувся до правого ряду касетів, впевнено захопивши праву, перевернув навколо осі гідіння і поїхав до диска.

У цей час Олексій в кутку за коробками захопився плівкою і іншим бункером. Фільм вийшов без звуку, але хвилювання на обличчі моєї незламної колеги. Інженери часто здійснюють з ними на довгих поїздках вибір улюблених фільмів, які хороші навіть без звуку. Для реального мистецтва, як Charlie Chaplin кіно, можна побачити як це.

У бібліотеці було чутно звук глухого стака. Роботи приймали стрічку до диска, але не змогли визначити, де отвір приводу і почали збити її стіну, намагаючись вставити її кудись. Він був повним фіаско, і знебарвлений вас. На жаль, механічні частини дуже чутливі до перевезення, тому є час, коли нова частина негайно класифікується як DOA (за умови прибуття).

Частина 14. Холодний піт розкочував мій чол і прикривав очі. Я повільно натискав ключі, перемикаючи кожного. У нас було менше години до дня, і всі наші спроби, здавалося б, Футилті, коли думав мене. «Ди ви отримуєте діагноз від старого сервера останнього часу?» «Святий вечір, що?» відповідав добре вроджений, голодний Семіон. «Чи може бути вихідна команда, яка відображає конфігурацію дискової групи до змін, і з цього висновку ми можемо спробувати відтворити її руками. й

І що я роблю зараз ходові команди своїми руками, які перепланують диски в зону обслуговування і зону даних. "Прийміть, що ти зробив це перед?" запитав мене, викинувшись кудись. «Ні, просто читати статтю, це сором'язливість, але ви повинні спробувати», - відповів я. Ще раз, я б зняв руки, якщо вони дізналися, що я просто загинув весь гурт. Це був єдиний шанс, щоб не було заперечення. В той же час ми були всі конспіратори і конспіратори. Надія у людини ніколи не гине.

Я закінчився з розміткою і набрав команду, яка згідно з документацією була відтворити дискову групу, але не для ініціалізації простору, тобто не стирати існуючі дані. «Не боятися, не боятися, не боятися, - пам'ятаю Конфуція і запустив команду. На мій особняк і радість, вона не зробила однієї помилки. Налаштовано всі логічні томи, з нормальним статусом. Залишилося перевірити наявність даних. У нас є ще 15 хвилин. У номері за 40 хвилин телефон ранговий причал, але ніхто не приділяв увагу. Що б не було, нічого не відповів. «Я запустив кластер, і я здивував мій голос.

У бібліотеці робота, відповідально заборонена на диску, очевидно, сподіваючись носити її швидше або пізніше. Alexei трахнув ноутбук, вражений закінченням фільму. Семіон був хворим нудним, думаючи про те, чи він вибрав потрібну професію, а в перерві мріяв шоколад. Хтось ще не хропився за лічильниками, потім і потім свербіж уві сні. Решта персонажів, спрямованих на монітор, який, без розмаїття, відображає наше життя. «Я почав!» видалив Ніколяй і захопив тубус. Вони були «апліканти», вони промивають мотузки і зателефонували, щоб сказати "Чека бат!" рояла Ніколая і потіла її краватку.

Частина 15. Я сидів на ящику і посміхнувся щасливо, думаю, як зараз з усіх житлових будинків цього красивого міста люди в кущалатах, Ушанка і черевики витягуються в потоках. Вони збираються в банкоматах, і вони також щасливо і надійно поєднують їх. І було якесь праве людське щастя у всій картині.

Запущено всі роботи та 2 хвилини до початку робочого дня. Язик мовчазно подякував мені, гоління руки і гоління голови. Все, що сталося, що ніч ми будемо приймати з нами, не кажучи вже про всіх.

Індуїсти тримають писати мені, як і раніше пропонують деякі божевільні ідеї. У цей час двері відкриваються в розім'яній кімнаті, а спить, що спить. Він був охоронцем безпеки з проходом. Він сказав: "Тут кур'єра тут." Він каже, що він приніс роботу. Робототехнічний лібера...

Починався новий день роботи.

Джерело: habrahabr.ru/company/croc/blog/227341/