Data Engineer (ETL)

Транснефть-Технологии оказывает IT-услуги организациям системы «Транснефть» в области внедрения, технической эксплуатации и сопровождения корпоративных информационных систем и IT-инфраструктуры. В связи с расширением и запуском нового проекта, мы в поисках в нашу дружную команду опытного Data Engineer (ETL). СТЕК ТЕХНОЛОГИЙ: Hadoop HDFS Hive Apache Spark Apache AirFlow SQL и NoSQL ВАШИ ЗАДАЧИ: Выстраивание ETL-процесса на Hadoop c нуля; Извлечение данных из различных источников; Проектирование логической модели преобразования данных; Разработка методик контроля качества данных; Анализ требований по получению новых данных, оценка наличия и качества данных; Подготовка витрин для анализа и визуализации (Hive + Spark + SQL); МЫ ОЖИДАЕМ ОТ ВАС: Уверенное владение Python; Опыт разработки и документирования ETL-процессов; Опыт работы с базами данных SQL и NoSQL (моделирование и хранение данных); Опыт работы c Hadoop: HDFS, Hive, Apache Spark, Apache AirFlow; Опыт работы с инструментами визуализации; МЫ ПРЕДЛАГАЕМ: Возможность поучаствовать в масштабном, интересном проекте в команде профессионалов; Работа в стабильной, развивающейся компании, высокий уровень дохода (оклад +ежемесячные и годовые премии) Широкий социальный пакет: ДМС (+стоматология), доплата к отпуску, частичная компенсация санаторно-курортного лечения и отдыха; скидки на фитнесс и др. График работы: 5/2 с 09:00 до 18.00; сб и вс - выходные; Дистанционный режим работы; Уютный и комфортный офис в 15 минутах от м.Зорге, м. Полежаевская, м. ЦСКА Возможности карьерного и профессионального роста;