Data Engineer

Текущий статус/должность: Data Engineer.

Мои компетенции и опыт

Гражданство: Россия, есть разрешение на работу: Россия
Готов к релокации: Готов

Желаемая должность

Data Engineer
 

Опыт работы:

Data Engineer

Wildberries
Май нужен доступ к резюме По настоящее время

Работаю Data Engineer в крупнейшем e-commerce маркетплейсе России, ежедневно обрабатываю огромные объёмы данных и обеспечиваю поддержку бизнес-аналитики.

 Основные задачи:

• Разработка и поддержка ETL-процессов на базе Apache Airflow

• Оптимизация запросов в ClickHouse для высоконагруженной аналитики

• Создание REST API с помощью FastAPI для доступа и интеграции данных

• Управление базами данных PostgreSQL, обеспечение качества данных

• Взаимодействие с аналитическими и бизнес-командами для реализации data-решений

 Ключевые технологии:

ClickHouse | PostgreSQL | Apache Airflow | Python | FastAPI | Docker | Git

Основные задачи:

• Обеспечиваю ежедневную обработку миллионов записей с высокой надёжностью

• Поддерживаю аналитику в реальном времени для принятия бизнес-решений

• Повышаю производительность и мониторинг data pipeline’ов

Data Engineer

Иннотех, Группа компаний
Сентябрь нужен доступ к резюме Май 2025
Москва

• Участвую в проекте миграции данных, обеспечивая 
  бесперебойный перенос и интеграцию данных 
  между системами.
• Работаю с современными технологиями, такими как 
  Apache NiFi, Postgres, Python и Groovy, для создания 
  эффективных ETL-процессов.
• Оптимизирую процессы обработки данных, что 
  позволяет сократить время выполнения задач на 
  20%.
• Активно взаимодействую с командой для решения сложных технических задач и улучшения архитектуры данных.

Data Engineer

УРАЛХИМ
Январь 2024 — Сентябрь нужен доступ к резюме месяцев)

Работал на проекте маркета данных. 

• Разрабатывал и поддерживал ETL-процессы с 
  использованием Apache Airflow, Apache NiFi, MsSql, 
  Postgres, MongoDB и Python.
• Автоматизировал процессы сбора и обработки 
  данных, что позволило сократить ручной труд на 
  30%.
• Работал с большими объемами данных, 
  обеспечивая их качество и доступность для 
  аналитиков.
• Использовал Selenium для автоматизации сбора 
  данных из веб-источников.

Инженер данных

Лига Цифровой Экономики
Июль 2022 — Январь нужен доступ к резюме год 7 месяцев)

• Участвовал в проектах интеграции данных для ситуационных центров, работая с различными протоколами (SOAP, REST, XML).
• Разрабатывал и поддерживал ETL-процессы с использованием Pentaho DI, PostgreSQL, MongoDB и Clickhouse.
• Автоматизировал загрузку и трансформацию данных, что позволило сократить время обработки на 25%.
• Работал с BI-системами, интегрируя данные из различных источников для анализа и отчетности.
• Анализировал и улучшал существующие процессы, что повысило эффективность работы команды.

Образование

Магистр
2022
Волгоградский государственный университет, Волгоград
Институт математики и информационных технологий, Прикладная информатика

Бакалавр
2020
Волгоградский государственный университет, Волгоград
Институт математики и информационных технологий, Прикладная математика и информатика

Навыки

• Языки программирования: Python, JavaScript, Groovy
• Базы данных: Clickhouse, PostgreSQL, MsSql, MongoDB, Greenplum
• Инструменты: Apache NiFi, Apache Airflow, Pandas, Pentaho DI, Selenium, Git, Jira, Confluence
• Технологии: ETL, REST API, SOAP, XML, JSON, PowerBI
• Языки: Русский (родной)

Готовность к релокации

Я открыт для новых возможностей и готов рассмотреть предложения из других регионов, если они будут соответствовать моим профессиональным амбициям и ожиданиям по заработной плате.