Разработчик интеграционной платформы / ESB (Apache Camel / Kafka / NiFi)

Описание

1


Иванов Евгений
Инженер данных
Почта : ivanovea 2001@ yandex .ru
Телефон : +79601922026

Профиль Инженер данных с опытом работы 3 ,5 года .

Специализируюсь на построении отказоустойчивых ETL/ELT пайплайнов,
потоковой передаче данных, обеспечении безопасности интеграционных
решений и централизованном логировании. Имею опыт как потоковой
(streaming), так и пакетной (batch) обработки данных. Ключ евые
компетенции: проектирование архитектуры интеграционных решений,
оптимизация производительности и обеспечение observability (мониторинг
и алертинг) данных.


Основные
технические
навыки
 Оркестрация и ETL: Apache NiFi, Apache Airflow
 Стриминг и очереди: Apache Kafka
 Мониторинг и логирование: Graylog (GELF), Grafana, ELK
 Integration Platforms: SAP PI/PO
 Языки: Python, SQL, Groovy, Java
 Форматы и схемы: XSLT, XSD, AVRO, JSON
 СУБД: PostgreSQL
 Методологии: BPMN


Сертификации 2024 Язык запросов SQL

2


Опыт работы и проекты
07.2025 –н.в. Инженер данных
Мултон Партнерс
Apache NiFi,
Apache
Airflow,
Apache Kafka,
Postg reSQL ,
Graylog, Grafana,
BPMN

Задачи :
 Разработка и поддержка ETL/ELT пайплайнов в Apache NiFi для
интеграции корпоративных систем.
 Реализация системы авторизации для проверки отправителей данных
(Basic/Bearer) с использованием скриптов на Groovy.
 Разработка DAG’ов в Apache Airflow для выгрузки данных из
производственных БД (параметры веществ, температура, показатели
линий), их трансформации и загрузки в аналитическое хранилище.
 Реализация сервиса контроля качества данных для выявления
отклонений характеристик веществ от номинальных значений с
последующим алертингом (email -рассылка) ответственным лицам.
 Наст ройка потокового взаимодействия через Apache Kafka (интеграция
NiFi ↔ Kafka) для обеспечения гарантированной доставки и
буферизации данных.
 Интеграция всех пайплайнов с системой мониторинга Graylog/Grafana
для централизованного сбора логов и визуализации с татусов
обработки.
 Аудит и рефакторинг существующих процессов с целью повышения
производительности и снижения времени обработки.
 Разработка механизмов повторной отправки данных (retry) с
экспоненциальной задержкой (exponential backoff).
 Внедрение Dead Lett er Queue (DLQ) на базе Kafka для изоляции
сообщений, не прошедших обработку или валидацию, с последующим
анализом и ручным/автоматическим восстановлением.
 Обеспечение гарантированной доставки и минимизация потерь данных
при сбоях.
 Ведение технической докум ентации и описание процессов в нотации
BPMN.
12 .20 22 –07.202 5 Младший инженер по интеграции
Импортозамещение
Apache NiFi,
Graylog, SAP
PI /PO , BPMN

Задачи:
 Разработка и тестирование процессов обработки данных ;
 Разработка и внедрение централизованной системы логирования ;
 Оптимизация и рефакторинг процессов обработки данных ;
 Агрегация и визуализация данных ;
 Разработка бизнес -документации в нотации BPMN и технической
документации.

Образование 20 25 Нижегородский государственный университет имени
Н.И. Лобачевского

3

Радиофизический факультет , информационная безопасность
телекоммуникационных систем

Иностранные
языки
Английский – Элементарный уровень владения ( A2)