Разработчик парсера социальных сетей и информационных ресурсов
Прямой работодатель Evolwe ( evolwe.ai )
Опыт работы любой
🌟 Evolwe - стартап, создающий технологию эмпатичного искусственного интеллекта, расширяет команду и ищет опытного специалиста по парсингу данных.
Мы создаем виртуального личного помощника, который будет помогать людям в разных жизненных ситуациях.
Компания постоянно занята исследовательской работой и развитием передовых решений в области AI. У нас не бывает скучно. Вам предстоит разработка и внедрение современного технически сложного продукта AI.
Мы ищем опытного разработчика парсера, способного извлекать информацию из информационных сайтов, специализированных каталогов и социальных сетей, чтобы интегрировать эту функциональность в наше приложение. Кандидат должен иметь опыт работы с социальными сетями, такими как Vkontakte, LinkedIn, Facebook и другими, и обладать знаниями взаимодействия с ними через API или с использованием авторизации по логину / паролю. Требуется навык работы с прокси-серверами для доступа к социальным сетям. Кроме того, кандидат должен быть знаком с обходом Captcha и аналогичными сервисами, такими как Cloudflare, на информационных ресурсах. Основная задача разработчика - предоставление структурированной информации через REST API на основе запросов, полученных по REST API.
Требования:
- Опыт работы с разработкой парсеров
- Умение работать с Docker-контейнерами
- Опыт работы с социальными сетями (Vk, LinkedIn, Facebook, Одноклассники и т.д.)
- Умение работать с прокси-серверами для обращения к ресурсам
- Знание методов обхода Captcha и аналогичных сервисов, таких как Cloudflare
- Опыт работы с специализированными каталогами (ИФНС, Росстат, база Судебных приставов, база Судебных решений, hh.ru, upwork и т.д.)
- Опыт работы с REST API
Преимущества:
- Опыт авторегистрации в социальных сетях
- Знание методов обхода блокировок при парсинге данных из LinkedIn, Facebook и других ресурсов
- Знание лучших практик для создания и управления серверами с контейнеризованными парсерами
- Опыт работы с прокси-сервисами
Мы предлагаем возможность работать с интересными задачами и использовать самые передовые технологии. Если вы способны справиться с сложностями и обновлять свои навыки в процессе работы, мы рады пригласить вас присоединиться к нашей команде.
Если Вас заинтересовала вакансия, пожалуйста, свяжитесь с нами