14.12.2022 07:23
Head Data Engineer (ETL)
14.12.2022 07:23
Ключевые задачи: Управление командой разработчиков интеграционного ядра DWH; Развитие инструментов ETL\ELT для батчевых загрузок и потоковой обработки; Анализ и оценка требований заказчиков, формирование и приоритезация бэклога; Постановка подключения новых источников и загрузки данных на промышленные рельсы; Разработка и внедрение стандартов и руководств для команды разработки; Участие в принятии решений по развитию платформы и смежных сервисов; Повышение устойчивости платформы путём выстраивания эффективного взаимодействия с другими командами (например, с администраторами), оптимизации процессов, настройки и развития инструментов мониторинга; Оказание экспертной поддержки продуктовым командам; Проведение код-ревью; Менторинг сотрудников. Что важно для нас: Участие в проектах по созданию хранилищ данных/ЕХД/КХД/КИХ/data lake от 3 лет; Понимание принципов построения корпоративных хранилищ данных; Понимание принципов работы MPP СУБД; Опыт руководства командой разработки не менее 2 лет; Опыт работы по направлению инженер данных / разработчик ETL (Python) не менее 3 лет; Уверенное знание Python (обязательно); Умение применять алгоритмы и шаблоны проектирования на практике; Опыт работы и настройки Apache Airflow (обязательно); Опыт работы с БД Postgresql, Greenplum, Hive, Clickhouse, Oracle, MS SQL; Умение оптимизировать SQL-запросы; Умение настраивать CI/CD; Опыт настройки БД Greenplum будет большим плюсом; Опыт использования эко-системы Hadoop: HDFS, Hive, Spark будет плюсом; Опыт работы с брокером сообщений Apache Kafka будет плюсом; Опыт работы с ETL-решением Apache NiFi, Pentaho будет плюсом; Опыт работы с Docker будет плюсом; Знание ООП, алгоритмов и шаблонов проектирования; Знание командной строки и стандартных утилит Linux; Уверенное знание Python; Понимание SOAP и REST; Понимание особенностей работы MPP систем; Уверенное знание SQL; Знание системы контроля версий Git; Понимание DevOps. Что предлагаем: Гибкое начало и окончание рабочего дня, свободный дресс-код; Релокационный пакет (компенсация расходов на покупку билетов и аренду жилья в течение первых трех месяцев); Официальное оформление в соответствии с ТК РФ; Конкурентный уровень дохода: оклад + премии; Медицинская страховка, страховка для выезжающих за границу; Доплата к отпускному и больничному листу; Дополнительные льготы при заключении брака и рождении детей; Социальная поддержка при сложных жизненных ситуациях; Льготное кредитование для сотрудников; Обучение в корпоративном университете банка; Корпоративная библиотека.
Адрес
Москва
Похожие вакансии
По договоренности
21.12.2022 01:47
компания "промсвязьбанк" ключевые задачи: управление командой разработчиков интеграционного ядра dwh; развитие инструментов etl\elt для батчевых загрузок и потоковой обработки; анализ ...
Партнерские Вакансии
Москва
По договоренности
14.12.2022 07:23
Ключевые задачи: Управление командой разработчиков интеграционного ядра DWH; Развитие инструментов ETL\ELT для батчевых загрузок и потоковой обработки; Анализ и оценка ...