Middle Data Engineer

Прямой работодатель  Profi.ru
Москва, Россия
Миддл
Информационные технологии • Разработка • Python • Backend • SQL • Ecommerce
8 октября
Работа в офисе
Опыт работы от 1 года до 3х лет
от 140 000 до 200 000 ₽
Работодатель  Profi.ru
Описание вакансии

Привет! Я Паша, тимлид команды BI. Сейчас нас трое: Вика, Саша и я. Мы «наводим красоту» в данных. То есть раскладываем и визуализируем данные так, чтобы аналитики могли строить дашборды, а бизнес — делать выводы и принимать решения на их основе.

Сейчас мы открываем направление «Аналитика в реальном времени», но для полноценного погружения нам не хватает data-инженера, который подхватит запросы от аналитиков и бизнеса, поддержит текущее развитие хранилища данных и поможет построить хранилище для маркетинговых данных.

ЗАЧЕМ ТЕБЕ К НАМ

  • Развиваться без ограничений. Мы знаем, как быстро пройти путь от middle до expert и какие сложности могут возникнуть — сами через это проходили. Твой рост будет основан на практике, «набивании шишек» и постепенном усложнении заданий. У тебя будет пипл-менеджер, с которым можно обсудить любые идеи и пожелания по задачам. Он позаботится о твоём комфорте и подскажет решение, если что-то пойдёт не так.
  • Делать нетипичные задачи. У тебя всегда будет время для несрочных, но интересных задач. Например, Вика сейчас автоматизирует прогноз нагрузки на наш колл-центр.

ЧЕМ ТЫ БУДЕШЬ ЗАНИМАТЬСЯ

  • Развивать ETL-платформу, чтобы наша отчётность помогала бизнесу вовремя принимать правильные решения. Ты сможешь добавлять новые фичи, оптимизировать производительность, рефакторить и писать тесты.
  • Помогать с построением аналитического хранилища на ClickHouse, чтобы наши данные обрабатывались быстро и удобным способом.
  • Развивать DWH на Vertica. По запросам от аналитиков и бизнес-пользователей нужно будет добавлять прогрузки и обновлять существующие витрины.
  • Делать дашборды на Metabase, чтобы всё было «по красоте».

ЧТО НУЖНО, ЧТОБЫ К НАМ ПРИСОЕДИНИТЬСЯ

  • Умение уверенно писать SQL-запросы. Ты знаешь, как работают индексы, можешь написать вложенный запрос, владеешь JOIN, агрегирующими и оконными функциями.
  • Владение Python на уровне представления об ООП и написания one-liners.
  • Опыт работы с системами контроля версий. Мы используем Git, но периодически залезаем в SVN.
  • Опыт работы с консолью. Можешь зайти по SSH на удалённый сервер, прочитать/отфильтровать/ содержимое файла, заменить часть строки в файле через консоль, вытащить определённый столбец.
  • Знание основ хранилищ данных. Ты легко поддержишь разговор о dimensional modeling.
  • Опыт работы с Docker. Ты можешь собрать docker-образ, знаешь про публикацию портов и задание volume.
  • Опыт построения ETL-процессов на Apache Airflow.
  • Знание английского языка на уровне чтения технической литературы.
  • Завершённое высшее техническое образование.

У НАС БУДЕТ БОЛЬШЕ ТЕМ ДЛЯ РАЗГОВОРА, ЕСЛИ:

  • ты уже что-то знаешь про ClickHouse и можешь поделиться этим на собеседовании;
  • у тебя есть собственный проект на GitHub. Когда будешь откликаться, обязательно присылай ссылку — мы заценим :-)
  • ты умеешь работать с очередями сообщений с помощью RabbitMQ или Kafka;
  • у тебя есть опыт работы с движками стриминговой аналитики Apache Flink, Spark.

ЧТО МЫ ЗА ЭТО ПРЕДЛАГАЕМ:

  • Высокую белую зарплату.
  • Опционы компании эффективным сотрудникам.
  • Оплату половины стоимости ДМС, включая стоматологию, с первого дня работы.
  • Комфортный офис на Ходынском поле (10 мин. от ст. м. «ЦСКА» и 5 мин. транспортом от ст. м. «Аэропорт»).
  • Доступ к электронной библиотеке МИФа и профессиональной литературе.
  • Оплату профильных курсов, участия в российских и международных конференциях.
  • Корпоративные выезды, хакатоны, митапы, тематические вечеринки и тренинги.

Специализация
Информационные технологииРазработкаPythonBackendSQL
Отрасль и сфера применения
Ecommerce
Уровень должности
Миддл