Разработчик Hadoop Big Data (стрим Витрины ПИК)( Иннотехнум, Группа компаний )

компания "иннотехнум, группа компаний" вместе с нами ты будешь: проектирование и разработка sql-процедур, обработчиков данных на spark (scala) и etl-процессов (в т.ч. airflow) оптимизация производительности кода разработка и ведение схемы данных участие в проведении тестирований взаимодействие с аналитиками, командами развития платформ, devops инженерами развитие wiki в confluence ожидания от кандидата: опыт работы с инструментарием hadoop (hdfs, yarn, spark, hive) опыт работы с промышленными dwh на основе mpp субд (teradata, exadata, greenplum), от 2-х лет знание теории построения dwh etl - практический опыт проектирования и разработки регламентных потоков данных при помощи airflow sql - уверенные знания (dml,ddl), опыт разработки хранимых процедур какие знания и навыки для нас важны: опыт работы с библиотекой pandas опыт работы с impala понимание принципов и инструментария ci/cd (git/bitbucket, teamcity)