Data Engineer

Вам предстоит работа в команде, где будут методологи, аналитики, разработчики, инженеры. Команда занимается анализом транзакционных данных, гео-данных, финансовых и разнообразных внешних данных.

Задачи:
• Оценка исходных данных для подготовки хранилищ/витрин данных;
• Разработка и оптимизация внутренних сервисов обработки больших объемов данных;
• Участие в проектировании и архитектуре высоконагруженных ETL/ELT-процессов, интеграция и предоставление данных внутренним потребителям;
• Мониторинг и оптимизация процессов загрузки и преобразования данных;
• Подготовка данных для моделей машинного обучения;
• Участие в workshop с заказчиками с целью определения технических потребностей проекта;
• Внедрение и поддержка промышленных решений.

Требования:
• Высшее образование в сфере информационных технологий, прикладной математики
• Уверенное знание SQL.
• Уверенное знание Bash/Linux
• Знание и практический опыт работы с одним из JVM-языков: Java Scala, Kotlin, Groovy .
• Знание и практический опыт работы с системами сборки: sbt, maven.
• Знание и практический опыт работы с одной распределенных систем: Hadoop, MongoDB, Cassandra.
• Понимание принципов работы Spark/MapReduce
• Желателен опыт работы с различными СУБД.

Будет плюсом:
• Понимание принципов работы Hadoop (HDFS, MapReduce, YARN)
• Spark(Core, optimization, MLlib)
• Опыт работы по принципам Agile с использованием SCRUM
• Опыт работы с автотестами JUNIT, ScalaTest приветствуется
• Понимание принципов NoSQL хранилищ данных
• Понимание принципов алгоритмов и структур данных.

Условия:
• Официальное трудоустройство, согласно ТК РФ;
• Возможность профессионального и карьерного развития;
• Премирование (квартальное, годовое);
• Социальный пакет (ДМС; санаторно-курортный отдых и т.д.);
• Корпоративное обучение;
• Активная корпоративная жизнь Банка (спортивные мероприятия, внутренние конкурсы и пр.);
• Место работы: г. Санкт-Петербург.