Senior / Principal Data Platform Engineer
Прямой работодатель Positive Technologies ( www.ptsecurity.com )
Опыт работы более 5 лет
О проекте
Платформа данных — продукт для консолидации, долговременного хранения и последующей обработки больших объемов данных (более 1.5TB в сутки)
Платформа сейчас находится в начальной стадии разработки и это — отличная возможность участвовать в создании лучшего на рынке продукта подобного рода и создать легаси имени себя :)
Что надо делать
- Разрабатывать и развивать компоненты платформы данных;
- Предлагать, отстаивать и реализовывать архитектурные решения;
- Разрабатывать инструменты для хранения и обработки данных на java / golang;
- Оптимизировать/настраивать/дорабатывать различные компоненты: kafka/spark/flink/trino.
Что надо уметь
- 5+ лет в роли Data Engineer и Опыт 3+ года в роли Software Engineer (разработчик Java/Scala, Golang или Python); - Или 7+ лет Software Engineer (разработчик Java/Scala или Golang);
- Уверенно уметь в Java (Scala, Python, Go в качестве большого плюса);
- Практический опыт с докером и K8s;
- Опыт разработки высоконагруженных распределенных систем.
Желательно
- Apache Spark / Flink / Kafka;
- Trino / Presto;
- Airflow или аналогичные решения;
- Много практики и понимания чего-то из Greenplum / Clickhouse / Vertica / любая другая MPP БД;
- Уверенный SQL;
Условия:
- Удаленный или гибридный формат работы (удаленка+офис), гибкое начало рабочего дня;
- Расширенный ДМС со стоматологией после первого месяца работы;
- 6 недель оплачиваемого отпуска в год;
- Дресс-кода нет — мы за свободу в выборе стиля;
- Частичная компенсация спорта;
- Умные, интересные, клёвые коллеги;
- Внутренние клубы по интересам (outdoors, шахматный, книжный, винный, мафия и др.)
- Участие в форумах, семинарах, конференциях; обучение за счёт компании;
- Возможность присоединиться к футбольной и волейбольным сборным, для которых мы арендуем спортивные площадки.