ETL разработчик

Прямой работодатель  Леруа Мерлен
Москва, Россия
Джуниор • Миддл • Сеньор
Аналитика, Data Science, Big Data • Инженер • Разработчик • Python • SQL • Greenplum • Торговля и общепит • Data Analysis • Ecommerce • ML/AI
15 января в 13:20
Работа в офисе
Опыт работы любой
Работодатель  Леруа Мерлен
Описание вакансии

Наша команда развивает Data-driven подход, собранные данные применяем для машинного обучения и аналитики. Меняем классический ритейл в digital. Мы гибкие. У нас высокая скорость принятия решений и полностью горизонтальная структура. Мы не говорим Big Data - говорим Data Value; не Batch, а Streaming. Не Legacy, а Open Source. Не OnPremise, а Cloud. Стек технологий: Nifi, Spark, Kafka, Greenplum, S3.

Обязанности:

∙ Создавать и улучшать процессы обработки данных
∙ Разрабатывать схемы подключения новых источников в DataLake
∙ Принимать участие в архитектурных решениях
∙ Разрабатывать процедуры формирования детального слоя данных и слоя витрин DataLake
∙ Реализовывать процессы CI/CD и мониторинга разработанных процессов обработки данных (Grafana, Graphite)
∙ Писать manual и automated DQ тесты
∙ Документировать свою работу в Confluence

В работе Вам пригодятся:

∙ Знания принципов работы БД, построения ХД
∙ Опыты работы разработки ETL процессов (SSIS, NiFi, Pentaho, Informatica)
∙ Опыт работы с высоконагруженными распределенными системами хранения и обработки данных (Hadoop, MPP)
∙ Отличное знание SQL, опыт оптимизации запросов
∙ Опыт разработки на Python/Scala или Java

Мы предлагаем:

  • работу в стабильной компании-лидере DIY рынка с уникальной корпоративной культурой;
  • участие в конференциях вместе с нашей международной командой (Россия, Франция, Испания, Бразилия);
  • возможности для профессионального развития и изучения иностранных языков;
  • белую заработную плату и систему премирования;
  • ДМС и социальный пакет;
  • компенсацию питания и мобильной связи.