Python Developer (AI Driving Data)

У команды SberAutoTech есть цель, и это – революция в мире автопрома в самом ближайшем будущем. Нам срочно нужны единомышленники!

Мы осознаем, что прорыв всегда делает меньшинство, потому что не все готовы рискнуть творить историю и двигать вперед целую индустрию. Общающиеся между собой автомобили, сервисы и приложения, беспилотный транспорт и электрокары – это даже не будущее, а настоящее! Следующий шаг – сделать такие автомобили обычным явлением в нашей жизни.

Если интересны технологии на стыке автопрома и интернета, если мечтаешь быть причастным к созданию чего-то нового и масштабного – присоединяйся к нашей команде.

Мы ищем Python developer~a (Python && Hadoop), который поможет нам разрабатывать новые инструменты и подходы для обработки гигантского массива данных. Результаты твоей работы будут напрямую влиять на скорость развития беспилотников.

Наш стек:

Python, Airflow, Spark, Hadoop.

Проект:

AI Driving Data.

Тебе предстоит организовать обработку данных, которые генерируют наши беспилотники, а также участвовать в создании хранилища для этих данных.

Классы задач, которые необходимо будет выполнять:

• Участвовать в разработке ETL пайплайнов на Dagster + Spark/Spark Structured Streaming;
• Разрабатывать недостающие и совершенствовать имеющиеся инструменты и фреймворки;
• Оптимизировать архитектуру системы, исследовать новые варианты ее развития.

Необходимый минимум:

• Опыт работы на Python (веб, production ml пайплайны);
• Умение выбирать абстракции и писать понятный и поддерживаемый код;
• Понимание классических алгоритмов и структур данных;
• Опыт организации параллельных вычислений;
• Опыт работы с Docker;
• Опыт работы со Spark, S3, HDFS.

Будет плюсом++

• Опыт разработки на с++, scala;
• Опыт работы с ETL-фреймворками (Airflow, Dagster, etc.);
• Опыт работы с Kubernetes;
• Опыт написания компонентов для Spark;
• Опыт работы с экосистемой Hadoop;
• Опыт проектирования и разработки распределенных отказоустойчивых систем.

Мы ценим своих сотрудников и предлагаем:

• Конкурентные условия труда (белая заработная плата, оклад, премии);
• Курсы повышения квалификации несколько раз в год;
• Возможность посещения (как в качестве слушателя, так и в качестве выступающего) всероссийских и международных IT-конференций (когда снова станет можно);
• ДМС для сотрудников и скидки на медицинскую страховку для родственников;
• Работа в команде профессионалов, возможность разрабатывать уникальные и крупные проекты масштаба нашей страны;
• Большой и комфортный офис со спортзалом, кинозалом, библиотекой, столами для пинг-понга, кафе для сотрудников;
• Льготное кредитование в Сбербанке – возможность пользоваться премиальными продуктами Банка на специальных условиях.