Senior Big Data Engineer

Сфера деятельности компании - retailing

Глобальная задача:

- Совместно с командой Data Scientists и Data engineer внедрить платформу управления продуктивными решениями Machine Learning с мониторингом производительности, качества моделирования и непрерывностью работы.

Пример задачи: Прогнозирование клиентского поведения с помощью Machine Learning, управление логистикой на основе Big Data, персонализация покупательского опыта, используя Machine Learning.

Текущие задачи:

• Проработать совместно с партнерами архитектуру хранения данных.
• Выбрать технологии для организации и заполнения хранилищ данных.
• Настраивать, запускать и поддерживать ETL-процессы. Создавать, поддерживать, оптимизировать модели хранения данных.
• Осуществлять поддержку пользователей, консультантов и аналитиков по вопросам выборки данных из хранилища. Поддерживать проекты по машинному обучению и ad-hoc.

Нам интересен опыт по продуктивизации ML моделей в продуктивные бизнес процессы. Это означает, что у кандидата должен быть был практический опыт по выводу моделей в продуктивный ландшафт, построение процесса внесения изменений в эти модели, мониторинг работы этих моделей с последующим их дообучением.

ЭТА ДОЛЖНОСТЬ ДЛЯ ВАС, ЕСЛИ У ВАС ПРИСУТСТВУЕТ:

• Опыт от 3-х лет работы с большими данными, разработки архитектуры хранилищ и автоматизации ETL процессов
• Понимание основных элементов экосистемы Hadoop: MapReduce, HDFS, Spark, Kafka, YARN;
• Знание Linux (основные команды на уровне пользователя)
• Проактивность, готовность напрямую коммуницировать с бизнесом, готовность работать без четкого ТЗ
• Опыт с ML, управлением контейнерами данных

Будет большим плюсом:

• Знания языков программирования Java, Python, bash
• Понимание принципов и умение конфигурировать компоненты экосистемы Hadoop
• Опыт проектирования и документирования информационных систем

МЫ ГАРАНТИРУЕМ:

• Компания уделяет особое внимание обучению персонала, помогает на пути профессионального роста. Помимо стандартных программ обучения, которые проходят сотрудники при вступлении в должность, компания предлагает индивидуальные программы развития с учетом сильных сторон сотрудников.
• Незаменимым принципом компании является работа в полном соответствии с законодательством РФ. Компания предоставляет сотрудникам конкурентоспособную и достойную заработную плату, которая регулярно пересматривается, социальный пакет, включающий ДМС, льготное питание, возможность изучения иностранных языков. В компании действует справедливая и прозрачная система премирования.
• Заработная плата: фиксированный оклад + годовой бонус от совокупного дохода за год