1) Выгрузка данных из SAP HANA через JDBC для последующей обработки и анализа. 2) Интеграция с Kafka для получения данных и их разложения по соответствующим таблицам. 3) Загрузка и декодирование данных из XML-файлов для дальнейшей обработки и использования в аналитических процессах. 4) Репликация данных в ClickHouse, включая миграцию на новый кластер с несколькими нодами для повышения производительности и отказоустойчивости. 5) Создание и поддержка регулярных отчётов (светофор) для дашборда генерального директора, предоставляющего ключевые метрики и статус процессов. 6) Настройка и поддержка DataHub, включая создание глоссария, описание колонок и интеграцию с DBT для документирования и управления данными. 7) Работа с DBT процессами, настройка и автоматизация процессов преобразования и анализа данных. 8) Развертывание MinIO в Kubernetes с использованием Helm charts для создания хранилища данных, настраивала учетные записи подрядчиков для загрузки данных. 9) Интеграция данных по API (Анкетолог) и оптимизация загрузки витрин данных с полной ежедневной загрузки на инкрементальную.

1) Разработка и построение эффективных пайплайнов для обработки и интеграции данных из различных источников. 2) Оптимизация процессов для повышения производительности и эффективности. 3) Разработка и поддержка ETL 4) Решение проблем и поддержка в случае инцидентов, связанных с обработкой данных.

Работа с базами данных PostgreSQL, произведение расчетов, создание математических моделей, работа с документами, организация рабочих процессов. Также в рамках производственной практики были выполнены следующие задачи: 1) Реализовано решение уравнения Фредгольма второго рода (теплообмен излучением) на языке С++. 2) Реализовано решение систем линейных алгебраических уравнений методом сопряженных градиентов (С++). 3) Реализовано вычисление теплопроводности стержня с использованием разностных схем (С++). 4) Реализована многомерная оптимизация метода Ньютона-Рафсона с выбором оптимального шага (С++).