Data engineer в Продвижение Финансовых Сервисов МТС Банка (Big Data)

компания "мтс" big data в мтс место, где телеком данные превращаются в реально работающие it-продукты. мы создали и протестировали несколько десятков сервисов. самые успешные из них уже стали частью экосистемы мтс. например, мтс маркетолог, рекомендации в kion (мтс тв), услуга “кто звонит?” или спам blacklist. кого мы ищем? опыт работы с данными в одной из отраслей: телеком, интернет-компании, банки, страхование, ритейл понимание моделей данных и принципов устройства хранилищ данных хорошее знание sql опыт работы хотя бы с одной промышленной бд знание стека hadoop/hive/spark и опыт работы с большими объемами данных знание одного из языков программирования: python, scala навыки загрузки данных из неструктурированных источников (data exploration, data wrangling, data cleansing) умение работать в unix консоли, базовое понимание (как минимум умение читать) shell scripts хорошее знание технического английского, навыки поиска информации что предстоит делать? автоматизация сбора витрин (hive) автоматизация передачи сегментов (etl в другие бд) сбор регламентных процессов с помощью airflow автоматизация переобучения ml моделей автоматизация a/b тестирования + необходимо настраивать dq и мониторинга для реализованных решений необходимо настраивать dq и мониторинга для реализованных решений сейчас мы ищем data engineer в продвижение финансовых сервисов мтс банка продукт состоит из трех составляющих: единая система рекомендаций - генерирует регулярные сегменты для устоявшихся направлений. r&d лидогенерация - проверяет продуктовые гипотезы. персонализация - дифференцирует клиентов для выбора наиболее подходящего подхода к каждому из них, управляет сегментами промо-кампаний для клиентов daily banking. что вы найдете в команде big data? стек технологий: hdfs, hive, apache spark (pyspark), airflow, python, teradata, linux команда: в команде data engineer сейчас 30 человек (во всей big data мтс более 300 человек). все data инженеры разработчики поделены на группы со своими лидами. каждую неделю мы обмениваемся опытом на совместных синках. data инженеры работают в продуктах со своей автономной командой, в которой есть все роли: аналитики, ds, разработчики, девопсы, менеджеры продукта. условия: каждый месяц - аванс и зарплата, дважды в год - премия. дмс + стоматология, корпоративная связь, специальные предложения от партнеров и друзей мтс, отпуск 31 день в год. выдаем 16” macbook pro или dell на выбор. есть ли обучение? локальные и международные конференции, митапы. корпоративный университет мтс и масштабная виртуальная библиотека. а ещё мы регулярно обмениваемся опытом на совместных синках с лидами экспертизы какой график? гибкое начало рабочего дня в промежутке с 8 до 11. есть возможность работать несколько дней вне офиса по договоренности с командой. сколько этапов при отборе? не более двух: hr + первое тех. интервью с лидом направления; собеседование с po и командой, выбор кандидатом проекта