Алексей Н. — Data Engineer

Кратко о роли и задачах: Проектирование и разработка ETL/ELT-процессов, интеграционных pipelines и внутренних сервисов под высокие требования Минздрава. Автоматизация потоков данных, CI/CD, мониторинг, автотесты, документация. Работа с аналитиками, DevOps и системными командами. Ключевые достижения: - Реализовал критичный ETL-конвейер за 1 месяц вместо 3х, обеспечив стабильную и своевременную загрузку данных - Ускорил передачу данных в Минздрав с 8 часов до 15 минут, внедрив автоматизированный data-pipeline - Перевёл процесс загрузки CSV -> API в полностью автоматический режим (часы -> секунды) - Оптимизировал delivery-конвейер: CI/CD сократил время релиза до 1 минуты. - Снизил ежегодные затраты компании на 70+ млн ₽ благодаря автоматизации учёта инфраструктуры (NetBox, Django) - Создал инструменты авто-тестирования потоков данных на pytest, ускорив выпуск новых функций и улучшив качество ПО и потоков данных - Доработал практику безопасной разработки - теперь каждый репозиторий сканировался на наличие уязвимостей, наличие чувствительных данных в открытом явном виде и т.д. Стек технологий: Python, Java, Bash/Shell, PowerShell, PostgreSQL, ClickHouse, Redis, Apache NiFi, Docker, Harbor, Nginx, Ansible, Nexus, Jenkins CI/CD, REST/SOAP, GitLab/GitHub, Linux, мониторинг/логирование, DrawIO/PlantUML, Markdown, Jira/Confluence, ЕГИСЗ

Кратко о роли и задачах: Интеграции, обработка и трансформация данных, построение data-flows, BI-аналитика. Работа с файловыми и сервисными интеграциями, ETL-процессами, документацией и пользователями. Ключевые достижения: - Перенёс все интеграционные процессы с ArcESB на WSO2 (open source), обеспечив непрерывность data-потоков и независимость от коммерческих лицензий. Стек: MS SQL, SSAS (SQL Server Analysis Services, OLAP), SSIS (SQL Server Integration Services), WSO2, ArcESB, Power BI, REST/SOAP, SFTP/FTP, Jira/Confluence

Кратко о роли и задачах: Интеграция данных между 1С <-> SAP IBP, настройка pipelines для производственного планирования, работа с SAP HANA, обработка данных, документирование и обучение пользователей. Ключевые достижения: - Реализовал интеграцию 1С <-> SAP IBP почти в реальном времени — обеспечил точное планирование производства и улучшение стратегии, что дало экономический эффект > 1 млрд руб/год. Стек: SAP IBP, SAP HANA, SAP Basis, SAP Cloud Integration Services, SSIS, MS SQL, VBA, REST/SOAP

Кратко о роли и задачах: Поддержка и оптимизация обработки данных в системе управления парком вагонов. Доработки, интеграции, SQL-оптимизация, сопровождение, внедрение, документация. Oracle PL/SQL: Работа с пакетами, процедурами, функциями, триггерами, секвенсами (включая сброс/рестарт), синонимами, представлениями (view), материализованными view, курсорами, коллекциями, типами данных, динамическим SQL (EXECUTE IMMEDIATE), EXCEPTION-блоками, обработкой ошибок, mutating-table errors, планами выполнения, оптимизацией SQL, индексами, constraints (PK/FK/Unique/Check), нормализацией и денормализацией схем, транзакциями и уровнями изоляции, ролями/правами, сессиями, DB-линками, джобами, сложные конструкциями (окна, CTE, подзапросы), системными пакетами (DBMS_SCHEDULER, DBMS_JOB, DBMS_SQL, DBMS_STATS, DBMS_METADATA), шифрованием и скрытием кода (wrap), логами и их размером, ребилдом пакетов и объектов Ключевые достижения: - Оптимизировал тяжёлый SQL-запрос (10 сек -> 0,1 сек), ускорив отчёты и стабильность системы. - Настроил автоматическую систему оповещений (в т.ч. через звонок на мобильный телефон), повысив качество мониторинга. Стек: Oracle SQL, Oracle APEX, Docker, HTML/CSS, SVN, Nagios, Redmine, TOAD for Oracle, PL/SQL Developer

Кратко о роли и задачах: Сбор, анализ и преобразование данных о качестве мобильной связи; визуализация результатов; подготовка data-reporting для заказчиков. Ключевые достижения: - Создал VBA-скрипт, ускоривший аналитические операции с 20 минут до 1 минуты (x20, 2000%). Стек: NEMO, TEMS, Excel/VBA, геоданные, GPS/GNSS