Senior Big Data Engineer

Агентство  Код Подбора
Санкт-Петербург, Россия
Сеньор
Аналитика, Data Science, Big Data • Data scientist • Инженер • Machine Learning • Data Science • Python • Java • Bash • Apache Spark • Hadoop • MapReduce • Data Analysis
22 апреля в 13:19
Релокация • Работа в офисе
Опыт работы более 5 лет
Агентство  Код Подбора
Описание вакансии

Сфера деятельности компании - retailing

 

Глобальная задача:

- Совместно с командой Data Scientists и Data engineer внедрить платформу управления продуктивными решениями Machine Learning с мониторингом производительности, качества моделирования и непрерывностью работы.

 

Пример задачи: Прогнозирование клиентского поведения с помощью Machine Learning, управление логистикой на основе Big Data, персонализация покупательского опыта, используя Machine Learning.

 

Текущие задачи:

  • Проработать совместно с партнерами архитектуру хранения данных.
  • Выбрать технологии для организации и заполнения хранилищ данных.
  • Настраивать, запускать и поддерживать ETL-процессы. Создавать, поддерживать, оптимизировать модели хранения данных.
  • Осуществлять поддержку пользователей, консультантов и аналитиков по вопросам выборки данных из хранилища. Поддерживать проекты по машинному обучению и ad-hoc.

 

Нам интересен опыт по продуктивизации ML моделей в продуктивные бизнес процессы. Это означает, что у кандидата должен быть был практический опыт по выводу моделей в продуктивный ландшафт, построение процесса внесения изменений в эти модели, мониторинг работы этих моделей с последующим их дообучением.

 

ЭТА ДОЛЖНОСТЬ ДЛЯ ВАС, ЕСЛИ У ВАС ПРИСУТСТВУЕТ:

  • Опыт от 3-х лет работы с большими данными, разработки архитектуры хранилищ и автоматизации ETL процессов
  • Понимание основных элементов экосистемы Hadoop: MapReduce, HDFS, Spark, Kafka, YARN;
  • Знание Linux (основные команды на уровне пользователя)
  • Проактивность, готовность напрямую коммуницировать с бизнесом, готовность работать без четкого ТЗ
  • Опыт с ML, управлением контейнерами данных

Будет большим плюсом:

  • Знания языков программирования Java, Python, bash
  • Понимание принципов и умение конфигурировать компоненты экосистемы Hadoop
  • Опыт проектирования и документирования информационных систем

 

МЫ ГАРАНТИРУЕМ:

  • Компания уделяет особое внимание обучению персонала, помогает на пути профессионального роста. Помимо стандартных программ обучения, которые проходят сотрудники при вступлении в должность, компания предлагает индивидуальные программы развития с учетом сильных сторон сотрудников.
  • Незаменимым принципом компании является работа в полном соответствии с законодательством РФ. Компания предоставляет сотрудникам конкурентоспособную и достойную заработную плату, которая регулярно пересматривается, социальный пакет, включающий ДМС, льготное питание, возможность изучения иностранных языков. В компании действует справедливая и прозрачная система премирования.
  • Заработная плата: фиксированный оклад + годовой бонус от совокупного дохода за год