Вместе с нами ты будешь: Разрабатывать загрузки витрин на Spark on Scala; Разрабатывать DAGs на AirFlow; Строить витрины на основе S2T маппингов, SQL прототипов и постановки; Проводить тестирования загрузки витрин; Осуществлять сопровождение 3-й линии загрузки витрин переданных в ОПЭ. Какие знания и навыки для нас важны: Опыт разработки приложений с использованием инструментария экосистемы Hadoop (Hbase, Spark SQL, Hive, Impala, Hue и т.д.); Опыт промышленной разработки на Scala; Понимание принципов модели распределенных вычислений; Понимание принципов организации Data Lake/DWH; Наличие профильного высшего технического образования; Опыт работы в роли разработчика на стеке Hadoop не менее 1 года; Суммарный стаж работы с момента получения первого высшего образования не менее 3х лет; Опыт работы с инструментариями автоматической сборки и хранения кода; Опыт создание DAGs на Airflow; Понимание подходов к организации разработки (CI/CD, DevOps).
Адрес
Москва