Руководство созданием с нуля масштабируемой платформы данных для продвинутой аналитики, обеспечивая полный цикл от сбора данных до визуализации. Параллельно развиваем аналогичные решения на заказ для ключевых клиентов, демонстрируя экспертизу в enterprise-level дата инжиниринге. Достижения: разработана архитектура платформы (с защитой на архитектурном комитете), сформирована команда, организована разработка, деплой и выстраивание процессов как по реализации, так и поддержке. Руководство 1-3 командами. Ключевые обязанности и достижения ================================ ⮚ Формирование и развитие команды: Нанял и заонбордил всех ключевых специалистов (дата инженеры, BI инженеры, БА/CA, ReactNative разработчик, QA). Ввел менторскую программу и agile-практики. Являюсь Scum мастером, продактом и проджектом. ⮚ Стратегическое планирование инфраструктуры: Разработан роадмап с учётом роста. Разработана архитектура платформы с фокусом на безопасность и надёжность. Защитил дизайн на архитектурном комитете и согласовал с ИБ-отделом. Ключевые компоненты: ⮚⮚ 3 (4) слоя хранения данных (source, raw (cdc), datamart). ⮚⮚ Витрины данных (Data Marts) для высокопроизводительного анализа. Построен кластер ClickHouse с репликацией для надёжности, балансировка нагрузки на ChProxy с учётом загруженности нод, мониторинг производительности и медленных запросов. ⮚⮚ Батч-обработка для надежной ETL: Интегрировали DBT для моделирования, Airflow для оркестрации и кастомные сервисы на Java, Python. ⮚⮚ Near real-time стриминг: интегрирована kafka-экосистема с Kafka Connect, CDC (Debezium) и temporal storage, kSQLdb. Моя реализация сервиса по приёму данных (Java, Quarkus), аналог Яндекс-метрики. ⮚⮚ BI-стек полного цикла: ⮚⮚⮚ ReDash и Superset для ad-hoc запросов и быстрой аналитики. ⮚⮚⮚ Серьёзный проект миграции на Visiology как отечественной BI. Полный цикл: обзор рынка, скоринг (~38 параметров), презентация, защита, выбор. Контрактация, развёртывание и внедрение. ⮚⮚⮚ Выполнены проекты по интеграции с SSO, выстроена расширенная ролевая модель с построчной фильтрацией данных на основе профиля (RLS). ⮚⮚⮚ Организована библиотека кастомных виджетов, мониторинг и поддержка. ⮚⮚⮚ Интеграция с AI. Как для предоставления пользователям селф-сервиса (упрощение написания ETL трансформаций), так и обработка данных (например AI дашборда обработки текстовых ответов). ⮚⮚⮚ Интеграция AI (LLM) в BI. ⮚⮚⮚⮚ Полная реализация на примере дашборда "AI фидбек по руководителям". Суммаризация свободных текстовых ответов, маппинг вручную введённых имён (NER). ⮚⮚⮚⮚ Полная реализация: от kubernates деплоя LLM (Gemma3, gpt-oss) до универсального DAG, с подсветкой вариантов для уточнения, оверрайдами, многопоточностью, статистикой обработки, обработкой отказов ⮚⮚⮚⮚ Выступал по ней с докладом в ноябре 2025 на конференции ViRush 2030. ⮚⮚⮚ Реализуется решение AI-manager, по универсальной обработке датасетов с помощью AI, для упрощения доступа пользователей к таким возможностям ⮚ Метаданные и Data Governance: Внедрили OpenMetadata как центральный дата каталог, автоматизируя родословную данных (lineage tracking), единое хранение схем. Заведено более 100 источников (SQL, NoSQL, Kafka...). ⮚⮚ Описаны инструкции работы с инструментом. Проведено обучение (вебинар) пользователей ⮚⮚⮚ Разработана ролевая модель, классификаторы. Описан процесс получения доступа и возможность стать владельцем домена данных ⮚⮚⮚⮚ Для владельцев данных описаны инструкции что и как делать, определены KPI по заполнению метаданных ⮚⮚⮚ Ведётся глоссарий ⮚⮚⮚ Согласован процесс по добавлению источников, взаимодействию со службами безопасности (ИБ) ⮚ Обеспечиваем качество данных (Data Quality). ⮚⮚ Сформировал техническое видение с фокусом на proactive monitoring ⮚⮚ По качеству данных реализованы автоматические инструменты: ⮚⮚⮚ Представления метрик DQ в ClickHouse datamarts ⮚⮚⮚ dq-exporter для экспорта метрик в VictoriMetrics (SodaSQL и GreatExpectations рассматривали, но отказались - сделали лучше) ⮚⮚⮚ Настроены дашборды мониторинга в Grafana и Re:Dash ⮚⮚⮚ Алерты по качеству данных на AlertManager ⮚⮚⮚⮚ Интеграция алертов с системами трекинга для реализации управления инцидентами (incident management): ⮚⮚⮚⮚⮚ Моя реализация сервиса интеграции alertmanager-jira. Выложен на гитхаб - https://github.com/Hubbitus/alertmanager-jira. По нему писал статью на хабре: https://habr.com/ru/articles/954792 ⮚⮚⮚⮚⮚ Аналогичный сервис по интеграции с EvaTeam (переходим на отечественное решение) также выложен https://github.com/Hubbitus/alertmanager-evateam. У нас находится в опытной эксплуатации. Статью на хабр планирую несколько позже по её результатам. ⮚⮚ Разработан процесс поддержки качества данных: ⮚⮚⮚ Алерты разбиты по приоритетам реагирования, с соответствующим SLA реагирования ⮚⮚⮚ Большинство алертов передано на реагирование в круглосуточную поддержку L2, с соответствующими инструкциями и регламентами ⮚⮚⮚ Обеспечиваем L3 реагирование ⮚ В процессе руководством AI/ML-отделом рекомендательных систем была разработана и защищена архитектура встраивания рекомендательных систем в асинхронном режиме в WEB и мобильное приложение. ⮚ Развитие инструментария: развёрнут JupyterLab-кластер, примеры ноутбуков, шаблоны, гайдлайны по ревью. ⮚ Разработка внутренних систем и сервисов: ⮚⮚ Cоздание трекинг-системы на Java (Quarkus, microservices architecture). ⮚⮚ Сервис интеграции интерактивных дашбордов в мобильное приложение. Разработал bi-proxy-service (OAuth/JWT, gravitee интеграция).

Проджект менеджер Дата-офиса (Data office PM) - 29 человек, 18 "полных". Основные стримы: ⮚ Data governance (полиси, процессы, управление развитием) ⮚ Метадата менеджмент. Управление описательной составляющей данных в дата-каталоге. Автоматический инджест, организация, описание и линковка. Участие в составлении требований в развитии дата каталога, составление полисей и гайдов. Каталогизация дата-продуктов. ⮚ Обеспечение качества данных. От составления технического видения проекта, до процессов обеспечения в распределённом энтерпрайзе (наша команда поддержки датахаб и даталейк плюс десятки смежных команд и проектов). ⮚ Поддержка данных. Консультации по поиску данных, по доступу, средствам доступа. Обеспечение консистенции, участие в планировании инфраструктуры и мониторинга. ⮚ Управление изменениями данных (data change management). Полностью разработана и привнесена процедура управления изменениями в компании "с нуля" чтобы изменения были видимы и контролируемы. ⮚ AI/ML center of enablement стрим. Прежде всего участие в технической составляющей развития платформы по построению удобной среды доступа к данным и получения к ним доступа со стороны data-science команд. ⮚ MDM/RDM трек по управлению справочникам и общей информацией. Выполнен обзор, обоснование и выбор решения. Осуществлено внедрение решения на базе PIMcore. ⮚ Развитие процессов и инструментария. Jupyter notebooks среда, инструменты анализа зависимости данных (impact management) и т.д.

1) Архитектор федерального ЕГАИС по учёту древесины и сделок с ней (http://lesegais.ru/) Роли: Architect, DBA, Java developer, DevOps team lead Технологии: Sencha ExtJS, ReactJS, Java 8, Web Services, Lombok, MyBatis, Gradle, REST, SOAP, Postgres (with replication), Docker, Ansible, ELK stack (Elasticsearch + Logstash + Kibana), Minio (S3 storage), Flink streaming for BI Достижения: Перевёл инфраструктуру на Docker, Gitlab-CI, Ansible. Автоматизация CI/CD. Делал доклады и перевёл всю компанию на GIT. Реализовал репликацию БД, балансировку запросов на несколько инстансов. Реализован стриминг изменений в OLAP БД для BI. Инициировал и автоматизировал тестирование продукта: Spock, GEB (Selenium) - тесты в основном интеграционные в чистом docker-окружении. 2) РосРеестр (https://rosreestr.ru/) - Аудит процедуры миграции из унаследованных систем Роли: Solution Architect, Auditor Технологии: PostgreSQL, Oracle, Python, Django, RabbitMQ 3) РосРеестр (https://rosreestr.ru/) - федеральная система учета объектов недвижимости и сделок с ними - архитектор двух подсистем: * ПСКО - Подсистема кадастровой оценки * ПОКД - Подсистема обеспечения качества данных Разработка платформы для моделирования и выполнения бизнесс-процессов (BPMN) с визуальным моделированием как переходов, так и отображения вводимых данных. Роли: Solution Architect Технологии: Java 8, Postgres, Kotlin, Kafka, Docker, Docker-compose, Kubernetes, Ansible, Camunda BPM, ReactJS, GraphQL, Redis, WebSockets, ELK (Elasticsearch, Logstash, Kibana), Unidata MDM, ESB, Spock, Kafka, Minio (S3 storage), Flink streaming. 4) Regulatory DataCorp (RDC). - Проект для компании из США по переходу множества микросервисов с MSSQL на Postgres. Реализована полуавтоматическая процедура миграции приложений (с почти 100% покрытием автотестами), поддержка процедуры синхронизации данных - Проект реализации стриминга между датацентрами. Миллиарды записей с достпуностю US + EU. Стек: AWS (EC2, EMR, MSK, S3, DMS), Kafka-connect, Hive (S3 + Hdfs). - AI/ML исследование возможностей по улучшению качества автоматической дедупликации входящих статей. Python (scikit-learn, pandas, numpy), Jupiter notebook, TF/IDF. Роли: Solution Architect, Java lead, DevOps lead Teхнологии: Java/Groovy, AWS (Amazon web services), Microsoft SQL Server, Postgres, Kafka-connect 5) Megafon Big Data проект по сбору и анализ метрик с базовых мобильных станций. Роли: Консультант, Big Data Java Developer Технологии: Java 8, Hadoop, HDFS, HBase, Hive, Parquet 6) Разработка прототипа по безопасному удалению данных в экземпляре PostgreSQL в составе MDM платформы для ФСТЭК сертификации Роли: Архитектор, инженер-исследователь Технологии: PostgreSQL, Astra Linux, LVM, sched, secdel 7) Модуль интеграции MDM платформы Unidata (http://unidata-platform.ru/) c 1C. Двусторонняя интеграция универсальная для конфигураций, с использованием Groovy кода как настройки Роли: Solution Architect, Java/Groovy developer, 1C developer Технологии: Java 8, Web Services (SOAP), Spring, 1C Enterprise, Groovy 8) SmartDigit (Проект для компании Роснефть). Пресэйл и прототипирование проекта для платформы машинного обучения и обработки больших данных (BigData). Роли: Архитектор, инженер-исследователь Технологии: Spark, PySpark, Python, http://predix.io cloud platform, ML scikit learn

Разработка ЕГАИС портала для федерального агентства лесного хозяйства http://lesegais.ru/portal: * Java бакенд разработка, интеграция со смежными проектами (SOAP, REST) * Оптимизация Java и SQL * Привнесение автотестов * Перевод команды и всей компании с SVN на GIT * DevOps, CI - Управление билдами - Автоматизация процесса - внедрение ansible * Построение полностью автоматического стека для нагрузочного тестирования (ansible, Jmeter, Elasticsearch, Logstash, Kibana) Участие в разработке MDM платформы http://unidata-platform.ru/

Руководитель группы (5 человек): - Программирование на Java/Groovy/Bash прикладное и вспомогательное (скрипты, утилиты); - Администрирование и разработка под Oracle, MSSQL, Postgres; - Организация процесса работы (Code review - git + gerrit + Jira); - Разработка и сопровождение автоматизации процессов, интеграции смежных систем (Jira, Zabbix, CMDBuild, Ansible, Elasticsearch, Logstash, Kibana). - Общий мониторинг работы комплекса (более 150 географически разнесённых серверов, Linux, Windows); - Решение проблем, поддержка пользователей 2,3 уровень; - Траблешутинг, оптимизация, мониторинг; - Конфигурация различных компонентов системы; - Участие в процессе тестирования (включая часть автоматических). Разработка адаптеров (java, groovy) для взаимодействия со внешними системами: Mule ESB, Apache Camel ESB, Spring, Hibernate, JAXB, maven, Groovy, Gradle. Полностью разработано решение по интеграции с 1С (SOAP). Реализация с обоих сторон, внутреннее и внешнее документирование, поддержка решения (http://ant-ais.ru/) .

Руководство группой IT. Поддержка работы колл-центра (основанного на Asterisk), организация работы удаленных подразделений (различные ВПН IPSec, OpenVPN, PPTP и т.д.). Организация разработки продуктов. Участие в написании как ВЕБ-интерфейсов, так и утилит автоматизации. Разработка перевода инфраструктуры на Линукс (Thin station, LTSP, работа над построением своего дистрибутива для бездисковой сетевой загрузки).

Основной проект - внедрение и активная разработка SugarCRM. Организация разработки как внутри компании так и на оутсорсинге. Реализована интеграция CRM системы SugarCRM с 1С предприятием (Web-сервисы, SOAP сервисы). Разработка и измененеие типовой конфигурации. Помимо управление проектами корпоративного сайта (Joomla) и интернет-магазин на PrestaShop. Завершен проект внедрения офисной телефонии на базе Asterisk. Использовалась виртуализация на базе CentOS и Citrix Xen server. Администрирование нескольких серверов (Linux, Windows, FreeBSD).

Запуск интернет-магазина http://stroydostavka.com практически "с нуля". С написания Бизнес-плана. Далее поиск и анализ подрядчиков, первичный юридический анализ договоров, юридические согласования и отстаивание интересов фирмы. Заключение договоров, контроль исполнения поставленных задач. Организация логистической структуры, техническое разворачивание интернет-магазина, руководство наполнением, организация и автоматизация оплаты современными онлайн-платёжными системами и банковскими картами. Сопряжение работы отделов, руководство эксплуатацией. Планирование и реализация улучшений. Юридически подкован - предметом гордости является опыт "бодания" с юристами Рамблер Медиа Груп для изменения подписываемого договора в интересах компании. Большая часть реализации моя: различные модули онлайн-расчета стоимости доставки (в момент заказа) 3мя способами, онлайн прием платежей (кредитные карты, Яндекс-деньги, WebMoney, терминалы и т.д.), процессинга, онлайн-поддержки и т.д. По моей инициативе арендован сервер в Англии, он же администрируется мною (по сей день), организация бакапов, бесперебойной работы, настройка, поддержка. Последний аптайм 349 дней, плановая перезагрузка для увеличения количества памяти с простоем менее получаса. Подджержка пользователей (как внутренних так и внешних), решение вопросов. Контроль функционирования. Был предложен проект интеграции магазина с 1С системой фирмы, но реализовать, к сожалению отказались по инициативе руководства. Осуществление планирования и работы над планом продвижения ресурса, работа с Google ADWords, в том числе оценка стоимости конверсии, оптимизация затрат. Организация множественных экспортов (от согласования, подписания договоров до технической реализации и поддержки) товаров на разные площадки ("потоварное продвижение"), всего свыше 20ти, организация акций, распродаж, спецпредложений, скидок, рассылок и многое другое.

Принят был на должность "Ведущий инженер группы разработки программного обеспечения", затем повышен до Тех. директора спустя год. Реализация подключения к GSM-операторам посредством SMPP протокола. Изначально для этого использовалось приложение (Windows, MFC) основанное на немецкой закрытой библиотеке derdack. При необходимости расширения и учета специфики, мною был предложен, и в последствии реализован переход на открытую реализацию SMPP протокола. Там же использовались другие открытые технологии - boost, планировался переход на Линукс платформу, для начала с миграцией на QT или wxWidgets интерфейс. Организация шифрованных IPSEC и OpenVPN туннелей для шифрования передачи трафика. Поддержка решения, разбор и устраниение проблем (начиная с TCP/IP уровня, до SMPP и уровня приложений). Разработка и реализация SMS-сервисов, разработка и обеспечение работоспособности. Разработка новых сервисов от концепции и согласования с заказчиком (пресейл и на поздних этапах формирования ТЗ), до реализации и контроля. Администрирование 2х серверов: Linux и Windows 2000 (сертифицированных в РосТехНадзор). Техническое сопровождение и согласование с GSM-операторами всех вопросов. Организация поддержки пользователей.

(Студент, работа по совместительству с обучением на дневном отделении) Создание, развитие, ведение, поддержка и улучшение сайтов, поддержка пользователей. Реклама, SEO, продвижение.

(Студент, работа по совместительству с обучением на дневном отделении) Настройка офисной техники, исправление неисправностей, настройка локальной сети.