⚠︎ Архивная вакансия
Эта вакансия была перемещена в архив. Возможно она уже не актуальна и рекрутер больше не принимает отклики
на эту вакансию. Вы можете
найти актуальные похожие вакансии
Data-инженер
Прямой работодатель Bell Integrator ( bellintegrator.com )
Москва, Россия
Джуниор • Миддл
6 декабря 2021
Удаленная работа
Опыт работы от 1 года до 3х лет
Опыт работы от 1 года до 3х лет
Короткая ссылка: geekjob.ru/hWPT
Описание вакансии
Проект: Х5 Group.
Описание задачи
- Разработка и поддержка аналитического хранилища данных (ADW / DWH)
- Построение и доработка витрин данных;
- Разработка и интеграция потоков данных (конвейеров ETL) из различных источников
- Обслуживание и поддержка действующих потоков (конвейеров)
- Контроль качества данных, создание инструментов мониторинга ETL-процессов и контроля качества данных в них;
- Интеграция новых источников данных;
- Оптимизация работы хранилища: эффективное хранение данных, скорость работы потоков.
Обязательные требования
- Практический опыт работы с аналитическими хранилищами данных
- Разработка, ETL / ELT pipeline, моделирование данных, предоставление данных
- Отличное знание SQL
- Умение оптимизировать запросы SQL (анализ планов выполнения запросов, индексирование, поиск узких мест)
- Опыт разработки на любом языке (Python, Java и др.)
- Опыт работы c PostgreSQL
- Опыт оркестрации в Apache Airflow,
- Опыт выполнения проектов в Git;
- Опыт работы с инструментами CDC (Изменение данных, напр. Debezium)
Желательно
- Визуализация данных при помощи Tableau
- Опыт работы с Greenplum и другими аналитическими СУБД
- Опыт работы с инструментами BI
- Опыт работы с инструментами трансформации DBT, Apache Spark
- Опыт работы с Docker / Kubernetes