Data Engineer (Spark)

PrideInBrains – российская IT компания, оказывающая полный спектр услуг по разработке программного обеспечения. 

Наш отраслевой фокус – банковский сектор

Требуемый опыт работы: от 3 лет. Полная занятость, полный день. Удаленная работа (при желании можно офис)

Проекты одного из крупнейших Российских Банков

Проект:

• Разработка ALM (asset-liability management) системы, решающей задачи управления балансом, в которые входит: факторный анализ и прогнозирование финансового результата Банка, управление нормативами ликвидности, достаточности капитала, задачи ценообразования и внутреннего фондирования. 

Обязанности:

• Решение задач Казначейства по автоматизации управления активами и пассивами:
   - Полный цикл разработки всех слоёв хранилища данных, начиная с ядра;
  - Участие в составлении плана проекта, детализации, оценка проектных сроков и рисков;
  - Участие в проектировании системы, решение исследовательских задач по реализации функционала;
  - Разработка и проектирование потоков данных, алгоритмов загрузки и обработки данных в Hadoop с использование Apache Spark;
  - Разработка и оптимизация ETL процессов, обеспечение производительности и стабильности, при необходимости участие в анализе инцидентов;
  - Организация оптимального процесса разработки;
  - Участие в процессе передачи системы (пром).

Требования:

• Высшее ИТ-образование;
• Знания принципов построения систем хранения и обработки данных;
• Наличие опыта работы с экосистемой Hadoop (Hive, Spark, Parquet);
• Опыт работы с реляционными СУБД (Oracle, MS SQL);
• Опыт програмирования на Python;
• Опыт работы с аналитическими хранилищами, знание теории БД, хорошее знание SQL;
• Опыт промышленной разработки ETL Apache AirFlow;
• Опыт работы в Jira и Confluence;
• Понимание методологий Agile и DevOps;
• Опыт работы с ALM-системами будет большим плюсом.

Работа у нас:

• Возможность участвовать в масштабном и долгосрочном проекте;
• Все, что нужно для успешной работы: мощное железо, компенсация расходов на мобильную связь;
• Полностью официальная конкурентная зар. плата;
• Оформление по ТК РФ (бессрочный трудовой договор)
• ДМС для сотрудников и родственников
• Программа рекомендаций