Senior Data Engineer в команду аналитической платформы данных

компания "райффайзенбанк" обязанности: наша команда занимается развитием централизованной аналитической платформы данных. analytical data platform включает в себя data lake (hadoop) и аналитическое dwh (green plum). в рамках data lake мы решаем вопрос стандартизации и автоматизации разработки загрузки/обработки «сырых» данных. в рамках dwh — помогаем в консолидации и структурировании «сырых» данных в единую корпоративную модель. мы отвечаем за логику загрузки данных в бизнес-слой dwh и качество данных в нем, а также предоставляем удобные инструменты для работы с платформой. у нас также реализуется проект по миграции данных и расчетов из sas на аналитическое dwh. чем предстоит заниматься: участвовать в стратегическом проекте по миграции данных и расчетов на новое аналитическое dwh; разрабатывать etl-процессы и фреймворки по загрузке данных в data lake, перегружать данные в greenplum и формировать витрины данных; разрабатывать сервисы управления процессами загрузки; исследовать и анализировать информационные потоки и данные; участвовать в проектировании моделей данных (витрин); заниматься поддержкой 3-й линии, разбирать инциденты и исправлять ошибки; заниматься менторингом, обучением, выстраиванием процессов внутри команды. требования: наши ожидания: опыт работы с любой из «классических» рсубд в качестве разработчика; экспертиза в работе с greenplum не меньше 2 лет, понимание особенностей mpp-систем и их учет при разработке; опыт разработки/внедрения систем класса dwh, понимание концепции хранилищ данных; опыт в разработке сложных etl процессов, знакомство с путями автоматизации данных процессов; опыт работы с airflow или любым другим оркестратором; способность писать код на python или любом другом языке программирования общего назначения; способность писать прозрачный читающийся код, разделять его на классы, применять паттерны; знание sql на продвинутом уровне; опыт оптимизации запросов; знание dbt (будет плюсом); знание технологий big data: hadoop, hive, и т.п. (будет плюсом); интерес к работе с хранилищами и желание быть частью крутого проекта; готовность взаимодействовать со множеством команд и воплощать agile-подход в крупной организации; системное мышление; умение быстро внедрять оптимальные решения; желание развиваться сам и развивать экосистему вокруг себя. условия: agile-подход на всех уровнях организации (разработка и развитие сервисов происходит в парадигме scrum); кросс-функциональные команды: владелец сервиса является неотъемлемым членом команды, непосредственно участвующим во всех процессах создания вверенного ему сервиса и жизни команды; комфортную культуру открытости и отзывчивости; команду it, состоящую из настоящих профессионалов, которые выступают даже на международных конференциях; сильные профессиональные it-сообщества; отсутствие бюрократии и дресс-кода; гибридный формат работы (дом/офис); возможность проходить внутреннее и внешнее обучение; понятную структуру дохода и удобную выплату зарплаты двумя равными долями каждые две недели; дмс со второй недели работы со стоматологией и массажем; страхование жизни и выезжающих за рубеж, страхование в направлении онкологии; специальные предложения по вкладам, кредитам и ипотеке; скидки от компаний-партнеров по программе prime zone; доплату за 14 дней в году по больничному листу до оклада (после испытательного срока); доплату к отпускам, оформленным в январе и мае; 10 оплачиваемых отгулов в год.