Senior Data Engineer (удалённо, из любой точки мира)

В компании DBS Technologies открыта позиция Senior Data-инженер.

Немного о нас: обеспечиваем обработку данных и информационно-технологическое взаимодействие между участниками расчетов при оплате банковскими картами и иными источниками денежных средств, настраиваем комплаенс и антифрод мониторинг, анализируем Big Data. У нас много партнеров: Aliexpress Russia, МегаФон, Yota, фасилитаторы/агрегаторы в России и Узбекистане.

О проекте: разрабатываем хранилище данных.

Наш технологический стек: Greenplum, MinIO, Debezium, Kafka, Kafka connect, Airflow, Python, Data Vault 2.0, DBT.

Чем предстоит заниматься:

• создавать и оптимизировать пайплайны для сбора и обработки данных в Apache NiFi;
• осуществлять строительство DWH (проектирование, оптимизация, мониторинг) на базе Greenplum;
• проектирование схем для хранения данных;
• оптимизировать производительность SQL-запросов с целью ускорения работы ETL-пайплайнов;
• создавать витрины данных;
• осуществлять ad-hoc запросы.

Что мы ожидаем:

• опыт от 2 лет с Big Data стеком - Kafka, NiFi;
• опыт от 2 лет на задачах построения или управления DWH;
• уверенное владение SQL (умение оптимизировать запросы, читать планы выполнения, оконные функции, индексы, join);
• опыт работы с Greenplum или с другой MPP базой;
• понимание концепции аналитических хранилищ данных (принципы построения, слои, витрины данных, агрегаты, полная и инкрементальная загрузка данных, data quality);
• понимание моделей данных и умение их строить (звезда, снежинка, Data Vault, Anchor model, activity schema);
• опыт работы с DBT приветствуется.

Что мы предлагаем:

• Все наши сотрудники профессионалы высокого уровня, что дает вам возможность развиваться в компетентной среде;
• Высокотехнологичный стек и интересные задачи позволят вам ощутить свободу для творчества и развить профессиональные навыки;
• Возможность поработать в дружественной атмосфере небольшой уютной компании, где все решается быстро и без бюрократии;
• Трудоустройство в соответствии с ТК РФ;
• ДМС, корпоративные скидки с первого рабочего дня;
• Удаленная работа. Но если вы в Москве и вам захотелось в офис, то у нас их два. Также, снимаем коворкинг в Нижнем Новгороде и Санкт-Петербурге;
• Предоставляем технику для работы (Macbook, мониторы, и все что вам нужно для комфортной работы);
• У нас можно работать из любой точки мира;
• Если ты все еще читаешь, значит пора откликаться 😉