Выстраивал новое, географически распределенное (4 региона), подразделение, отвечающее за все операции в коммерческих и собственных ЦОД компании – монтаж/демонтаж, кроссировка и базовая настройка оборудования, круглосуточная безаварийная работа всех систем (включая инженерные на собственных площадках), capacity management и краткосрочное/долгосрочное планирование ресурсов всех уровней (площадки, каналы связи, инженерка, шкафы, СКС, оборудование, виртуализация) в условиях экспоненциального роста компании, новых проектов и нестандартных задач, при общем высоком уровне неопределенности. - Подбирал, собеседовал, обучал и контролировал руководителей локальных групп и самих инженеров ЦОД (рост штата с 2 до 15 человек). - С нуля формировал процессы подразделения по эксплуатации площадок/оборудования и запросам/выдаче ресурсов, вел переговоры и согласовывал планы передачи ответственности от старых разрозненных команд в новое подразделение. - С нуля составил и защитил годовой бюджет подразделения на всех уровнях - штат и обучение, договоры аренды и строительства/поддержки ЦОД, закупка оборудования и расходников, и т.д. - Курировал и контролировал процесс строительства, приемо-сдаточных испытаний и ввода в эксплуатацию собственного ЦОД высокой плотности (2 МВт / 90 шкафов) в условиях частого изменения внешних факторов. Провел аудит существующих ЦОД и серверных помещений компании, подготовил предложения по необходимой модернизации инженерных систем. - Держал несколько договоров аренды коммерческих ЦОД – вел переговоры по резервам шкафов и дальнейшему расширению этих площадок с учетом пожеланий/планов компании. Вел часть крайне сжатого по срокам стратегического проекта по консолидации исторически разрозненных инфраструктурных ИТ-систем компании в катастрофоустойчивую конфигурацию 2+1 ЦОД – определение необходимого кол-ва оборудования/СКС и доступной мощности шкафов, формирование гибкого ТЗ, исследование текущего рынка коммерческих ЦОД московского региона, осмотр площадок и переговоры с поставщиками, несколько кругов корректировок ТЗ, предоставления и обновления коммерческих предложений. Параллельно участвовал в нескольких стратегических проектах модернизации систем виртуализации и VDI – выбор общей архитектуры решения, целевых серверных платформ и их сайзинга, сертификационное тестирование и проверка совместимости оборудования, подбор и собеседование администраторов направления виртуализации.

Руководил отделом из 6 человек — поддерживали и развивали инфраструктуру ЦОД, каналы связи головного и резервного офисов, мультимедийные системы здания. Вел проект оптимизации существующего ЦОД — увеличение числа эффективных юнито-мест, уплотнение размещения оборудования с параллельным снижением сложности его обслуживания, монтажа/демонтажа и кроссировки, упрощение топологии СКС и кроссового поля. Решал накопившиеся проблемы эксплуатации инженерных систем ЦОД путем их доработки без увеличения бюджета. Разработал проект замены систем кондиционирования в связи с наступлением срока EOL/EOS с параллельным увеличением количества стойко-мест на 12% без увеличения площади ЦОД, но с упрощением монтажа габаритного оборудования. Заключал и вел сервисные договоры на инженерные системы ЦОД, контролировал работу подрядных организаций. Разрабатывал проект и планировал создание резервного ЦОД. Вел проект комплексной модернизации вычислительной инфраструктуры (серверы, SAN/СХД, ЛВС ЦОД), учитывая требования импортозамещения — инвентаризация и аудит существующего парка оборудования, систем виртуализации и потребляемых ресурсов; определение перспективной потребности; формирование архитектуры решения и соответствующий сайзинг; составление и защита бюджета; проведение открытых конкурсных процедур; поставка, монтаж и ввод в эксплуатацию; разработка, актуализация и доработка проектной документации; миграция продуктивной нагрузки в новую инфраструктуру.

Вел проект преобразования корпоративного ЦОД в коммерческий: - Сформировал и руководил службой ЦОД из 4 человек, включая подбор и собеседование администраторов экспертного уровня по направлениям LAN/СКС, SAN/СХД, северного оборудования, виртуализации и VDI. - Разработал и согласовал дорожную карту передачи и консолидации ответственности за ИТ-активы от нескольких существующих команд к новой, составил переходную и финальную матрицы ответственности. Разработал план миграции сервисов из нескольких исторически разрозненных не стандартизованных ИТ-инфраструктур в общее приватное облако. - Осуществил аудит и инвентаризацию существующего парка серверного оборудования, систем виртуализации, инфраструктурных сервисов и т.д. Произвел сайзинг и осуществил закупку нового серверного оборудования с учетом требований бизнеса — переговоры с вендорами, составление и проверка спецификаций, конкурсные процедуры. - Осуществил сравнение различных средств серверной виртуализации и VDI, включая российских, и защиту выбранного решения. Обеспечил получение компанией статуса сервис/Cloud-провайдера VMware Cloud Service Provider (VCSP) - Произвел аудит здания, помещений ЦОД и инженерных систем с привлечением организаций, ответственных за проект и предшествующую эксплуатацию ЦОД. Разрабатывал план модернизации и дальнейшей эксплуатации инженерных систем, вел переговоры с подрядными организациями. Разрабатывал план создания системы гарантированного электропитания и резервной площадки ЦОД. - Работал над составлением типовых договоров на оказание услуг ЦОД: публичного и приватного облака, колокации, прорабатывал возможные уровни SLA. - Участвовал в подготовке документации и прохождении аудита AFNOR по сертификации компании на соответствие стандартам ISO 22301 (Системы менеджмента непрерывности бизнеса) и ISO 27001 (Менеджмент информационной безопасности - управление рисками информационной безопасности).

Вел проект модернизации исторического ЦОД (~20 лет в эксплуатации): - Произвел ретроспективный анализ потребления электропитания и сделал перспективный расчет с регулярной поправкой. Подготовил требования к будущему проекту модернизации систем бесперебойного/гарантированного электропитания здания. - Произвел аудит существующих подсистем электропитания, кондиционирования, вентиляции, пожаротушения, СКС и прочих. Составил ТЗ на термодинамическое моделирование (CFD). - Произвел расчет текущей и перспективной портовой емкости СКС ЦОД и сетей LAN/SAN. - Произвел аудит корректности исполнения текущего проекта модернизации инженерных систем ЦОД и соответствия текущего проекта фактическим актуальным требованиям. Разработал и защитил альтернативный проект модернизации инженерных и ИТ-систем ЦОД, учитывающий текущие нужды и перспективу на ~5 лет. Согласованы и реализованы: - Расширение площади ЦОД за счет прилегающих помещений. - Переделка кабельных и силовых лотков, линий электропитания, труб хладагента, с устранением недостатков предыдущего проекта/монтажа. - Монтаж ранее закупленных кондиционеров в конфигурации максимально возможной эффективности и отказоустойчивости. - Перемещение рядов серверных шкафов с целью повышения общей плотности размещения оборудования и герметизации холодных/горячих коридоров. - Модернизация СКС и кроссового поля со сменой парадигмы организации LAN/SAN. - Аудит и решение проблем с фальшполом, потолком, риском протечек, исторической запыленностью помещения и прочих. В процессе подготовки и реализации проекта вел переговоры с вендорами и подрядчиками о деталях реализации различных инженерных/технических решений. - Контролировал подрядчиков в части корректности исполнения обновленного проекта. - Формировал закупки оборудования, инвентаризировал склады в целях экономии бюджета. - Перевел питание всего оборудования на 2 ввода или АВР с минимальным простоем сервисов. - Произвел унификацию компонентов и монтажа шкафов/СКС, систематизировал размещение серверного и сетевого оборудования. Внедрил систему кабель-менеджмента. - Внедрил систему мониторинга потребления питания до уровня отдельных банков PDU. - Внедрил систему мониторинга среды и инженерного оборудования на базе APC StruxureWare Data Center Expert и NetBotz, подготовил инфраструктуру ко внедрению системы DCIM. В итоге, с минимальными инвестициями ЦОД уплотнен на 63% (40 -> 65 шкафов) при увеличении площади лишь на 33% (150 -> 200 м²), и значительно упрощена эксплуатация: - Систематизированы принципы размещения и эксплуатации оборудования. - Установка самого сложного серверного/сетевого оборудования занимает не более дня. - Кратно сокращено количество человеческих ошибок при внедрении изменений. - Заранее определены процедуры дальнейшего расширения стоечной/портовой емкости. Параллельно вел проект модернизации виртуальный инфраструктуры VMware – переход на последние версии vSphere (4.0 -> 5.5), внедрение Distributed vSwitch и СРК Veeam B&R, миграция со старых СХД, балансировка сайзинга хостов виртуализации и внедрение кластеров DRS/HA, общая оптимизация ресурсов и процессов работы со средой виртуализации. Поддерживал инфраструктуру на 100 физических и 600 виртуальных серверов и архива старых ВМ, 50 хостов виртуализации vSphere 4/5, 15 СХД c FC/iSCSI SAN.

Разработал и реализовал проект создания приватного облака и консолидации в него серверов/ВМ разрозненных команд, с параллельной оптимизацией ресурсов вычисления/хранения и сетевых сегментов. Планировал дальнейшее расширение облака с учетом роста потребностей, занимался соответствующими закупками. Подготовил проект автоматизации выдачи и учета ВМ по запросам из Service Desk. Производил перманентное тестирование, траблшутинг и восстановление работающих в прод-среде пред-релизных версий ПО СХД RAIDix, включая общение с поддержкой Supermicro/Mellanox по поводу проблем в прошивках и драйверах HBA Infiniband. Разработал проект отказоустойчивости SAN, при котором пред-релизные версии ПО RAIDix можно было использовать в прод-среде без риска отказа инфраструктуры. Поддерживал инфраструктурные (~50 ВМ) и тест/дев (~300 ВМ) фермы виртуализации на 20 хостах (vSphere, Hyper-V), 5 СХД, СРК Veeam B&R и архив старых ВМ.

Оптимизировал и задокументировал основную серверную, проектировал резервную. Осуществил долгосрочное планирование роста серверных мощностей, сайзинг и закупки оборудования, в т.ч. критично необходимые EOL/EOS комплектующие, включая общение непосредственно с вендором. Произвел сложный траблшутинг и восстановление прошивок/конфигурации СХД Fujitsu-Siemens. Вел проект миграции с VMware VI3 на vShpere 4 с параллельной оптимизацией вычислительной инфраструктуры и перепрофилирования освободившегося оборудования. Поддерживал инфраструктуру из 7 хостов виртуализации, 15 физических и 80 виртуальных серверов, 4 СХД (iSCSI и FC SAN), 300 рабочих станций и 50 тонких клиентов.

Руководил отделом из 5 человек — поддерживали, оптимизировали и развивали ИТ-инфраструктуру и системы ~20 компаний-клиентов. Вел проект интернет-провайдера с дополнительными облачными сервисами на базе VMware vSphere. Проектировал инженерные системы собственного коммерческого ЦОД.

Руководил отделом из 3 человек — поддерживали инфраструктуру из 4 хостов виртуализации, 25 серверов и 250 рабочих станций. Оптимизировал и задокументировал основную и резервную серверные, несколько узлов связи и масштабную СКС завода. Разработал, защитил решение и внедрил серверную виртуализации на базе VMware VI3 с последующим переходом на vSphere 4, включая виртуализацию существующих серверов и миграцию со старых разрозненных систем виртуализации.

Проектировал и производил монтаж СКС географически разнесенных корпусов кампуса, оптимизировал и документировал существующую СКС, узлы связи и серверную комнату. Развивал и поддерживал централизованный файл-сервер университета. Участвовал в разработке собственной системы Service Desk в качестве аналитика, проектировщика, дизайнера, UX и QA.

Спроектировал и построил ЛВС, внедрил MS AD с распределением прав доступа к ресурсам сети и ПО. Поддерживал пользователей и сеть на 30 рабочих станций, AD/файл-сервер, интернет- и спутниковый каналы связи.