Чем будем заниматься: Построение хранилищ; Разработка и поддержка витрин БД; Разработка механизмов интеграций. Проектирование и разработка SQL-процедур, обработчиков данных на Spark (Scala) и ETL-процессов (в т.ч. AirFlow) Оптимизация производительности кода Разработка и ведение схемы данных Участие в проведении тестирований Какие знания и навыки для нас важны: Знание стека Hadoop; Опыт с Git; Опыт работы с инструментарием Hadoop (HDFS, Yarn, Spark, Hive) Опыт работы с промышленными DWH на основе MPP СУБД (Teradata, Exadata, Greenplum) Знание теории построения DWH ETL - практический опыт проектирования и разработки регламентных потоков данных при помощи Airflow SQL - уверенные знания (DML,DDL), опыт разработки хранимых процедур
Адрес
Москва