Data Engineer (Middle)

Всем привет! Меня зовут Полина, HR-менеджер Twinby ❣️

🦋 TWINBY — сервис для проверки совместимости и поиска новых знакомств. Наша цель – стать дейтинг-приложением №1 в России, заменив сам-знаешь-что. У нас это отлично получается: сейчас Twinby скачали уже более 14 миллионов пользователей.

Мы строим надёжную платформу: ingestion → DWH/витрины → BI/аналитика → продуктовые решения. Сейчас мы в поиске Data Engineer'а, который усилит пайплайны, качество данных и производительность хранилища.

Наш стек: Python, ClickHouse, CockroachDB, DataLens, JupyterLab / DataSphere, GitLab, Airflow, AppMetrica / Метрика / GA.

Функции в команде:

- Разрабатывать и поддерживать ETL/ELT-пайплайны в Airflow;

- Проектировать слой данных в ClickHouse: схемы, партиционирование, сортировка, движки (MergeTree-семейство), дедупликация, оптимизация запросов;

- Строить витрины/слои для BI (DataLens) и аналитиков;

- Обеспечивать качество данных: проверки, алерты, контроль свежести/полноты, разбор инцидентов.
 

От вас ждём:

- Опыт в data engineering от 2–4 лет;

- Уверенный Python для ETL: работа с API, обработка данных, аккуратная архитектура кода;

- Практический опыт работы с оркестраторами (у нас Airflow): планирование, мониторинг, инциденты, backfill;

- Опыт работы с аналитическими хранилищами (у нас ClickHouse) и понимание его особенностей (partitions/order key, merges, TTL, FINAL, dictionaries/матвью);

- Опыт построения DWH/мартов и слоёв (stg/core/mart), data catalog/lineage;

- Отличный SQL и опыт оптимизации запросов/моделей.

Будет плюсом:

- Углублённое понимание реляционных СУБД и внутренностей: индексы, планы выполнения, нормализация/денормализация, оптимизация запросов;

- Опыт диагностики и решения performance-проблем (у нас есть CockroachDB).

Мы предлагаем:

- Full-time работа с полностью удаленным форматом;

- Официальное оформление по трудовому договору в РФ;

- Конкурентную заработную плату;

- Корпоративные скидки для сотрудников;

- Возможность профессионального развития и карьерного роста.