компания "дом.рф" немного о проекте: мы разрабатываем витрины данных для аналитического центра ао «дом.рф». данные мы берем из различных внешних источников, как в целом по стране, так и по конкретным субъектам федерации. на основе наших витрин аналитический центр готовит дэшборды, отчетность, тезисы и пояснительные записки для публичных выступлений первых лиц государства и лидеров строительной отрасли. основная задача – развитие хранилища данных. ты будешь отвечать за разработку etl процессов, проектирование и разработку витрин. чем необходимо заниматься: анализом и разработкой etl-процедур в контуре систем по управлению данными; участием в проектировании архитектуры dwh и витрин данных; автоматизацией скриптов дата-аналитиков и обработкой сырых данных; разработкой подключения новых источников в greenplum и postgresql; подготовкой, очисткой и предобработкой данных из внешних источников, построение агрегатов. что для нас важно: опыт разработки etl/elt процессов и организации их оркестрации (желательно pentahodi); опыт разработки и использования python и airflow; экспертные знания принципов работы субд, sql, pl/pgsql, опыт оптимизации запросов postgresql; опыт работы с git (gitlab). будет плюсом: основы администрирования postgresql; опыт работы с airflow; опыт работы с mssql; опыт работы с pentahodi.
Адрес
Москва