компания "группа компаний с7" s7 techlab – it компания, реализующая инновационные it продукты для подразделений группы компаний s7. nlp чат-боты для поддержки пользователей, компьютерное зрение для бортов самолетов, прогнозирование загрузки самолета – это лишь некоторые примеры типовых задач, которые реализуются силами команды s7 techlab и помогают авиакомпании занимать лидирующее место на рынке авиаперевозок россии. в команду dynamic pricing ищем data engineer уровня middle. наш продукт занимается тем, что подбирает цены на авиабилеты и транслирует их в каналы продаж через собственное api. для того, чтобы правильно рассчитать цены, нам необходимо регулярно готовить, обрабатывать и следить за качеством большого количества разнообразных данных, которые в разном виде поступают к нам в продукт для расчета цен. поэтому мы ищем опытного дата инжинера, который хорошо разбирается в данных, умеет настраивать пайпланы обработки данных, мониторинги качества данных, умеет оптимизировать скрипты загрузки и т.д. ✈задачи: развитие пайплайнов данных в продукте: работа с различными источниками и типами данных s3, kafka, mysql, postgres, hdfs, parquet, avro оптимизация пайплайнов; разработка мониторингов на качество данных; настройка интеграции с новыми источниками данных; ✈пожелания к кандидату: уверенное знание sql (умение написать сложный запрос и его оптимизировать) уверенное знание python; пайплайны и стримы со spark, kafka, kafka connect, airflow понимание, как работает parquet, avro опыт работы с kubernetes понимание, зачем нужен dq если вы кроме дата инженерных задач не чужды devops, продукт поможет развиться в этой области. также можно рассмотреть смежные области и попробовать себя в задачах аналитики и bi. условия: приветственный мерч новичкам; дмс; корпоративную жизнь, насыщенную разнообразными коллективными событиями; подарки для детей к первому классу и на новый год; профессиональное развитие: проходить обучение в компаниях-партнерах, участие и выступление в конференциях. и да! у нас есть партнёр, который готовит к выступлениям (поможет определиться с тематикой, посылом, составить доклад и подготовит к выступлению); онлайн трансляции в режиме вопрос-ответ с приглашенными интересными гостями, например алексей водовозов, главы ит-подразделений nvidia, dodo pizza, ученые. у нас в компании agile практика. если интересно данное направление вместе с нашим экспертом готовы помочь нарастить эти скиллы; возможность путешествовать по специальным корпоративным тарифам для вас и вашей семьи. например, туда-обратно: сочи - 3 200 рублей. корпоративные скидки в primezone: скидки в рестораны, на обучающие курсы, товары и тд.; самостоятельность и широкий диапазон влияния на продукт. возможность существенно улучшать и изменять, предлагать идеи — всё это можно и нужно; команда распределенная, работаем удаленно, либо у нас есть 2 уютных офиса: г. москва петровка 7 или г. иннополис :) полное соблюдение законодательства российской федерации.
Адрес
Москва