Data engineer (удаленно)

Обязанности:

· Преобразование данных из различных форматов (xml, json) к табличному виду с помощью Python;
· Автоматизация загрузок с помощью Python и не только;
· Загрузка/загрузка информации в базы данных;
· Поиск ошибок и аномалий в данных (SQL, Python), автоматизация проверок качества данных;
· Подготовка агрегированных витрин данных (SQL, Python);
· Подготовка требований к формату и составу файлов для поставщиков данных;
· Подготовка и поддержание в актуальном состоянии описания загружаемых данных.
· Загрузка данных из различных источников (FTP, API, сайты);

Требования:

· Релевантный опыт от 2 лет
· Знание SQL;
· Знание Python
- библиотеки для работы с данными – pandas, lxml, json
- библиотеки для работы с API - requests
· Понимание базовых концепций CS: Сети, веб, виртуализация
· Интерес к работе с данными
· Знание английского языка для чтения технической литературы;

Будет плюсом:
· Знание Azure
· Databricks
· SnowFlake
· PySpark/Spark
· Docker
· Английский язык
· Высшее физико-математическое/техническое образование;

Условия:

· Молодой талантливый коллектив

· Отсутствие жесткой иерархии по должностям

· Командировки по России и международные (США, Европа и др.)

· Комфортный современный офис м. Таганская
· Возможен удаленный график
· Возможность карьерного и профессионального роста в широком диапазоне.
· ДМС
· Курсы английского языка