Data Engineer( Газпром-медиа Развлекательное телевидение (ГПМ РТВ) )

компания "газпром-медиа развлекательное телевидение (гпм ртв)" о проекте: основная часть многих терабайт, с которыми мы работаем, это данные веб-счетчиков (собственная разработка гпм дата), поступающих от приложений, сайтов и видеоплееров активов холдинга гпм (premier, матч тв \ спортбокс, тнт, пятница, супер, тв3, нтв+, rutube, гпм радио и др.). нужны специалисты по обработке данных и извлечения из них максимальной пользы для компании и пользователей. вам предстоит заниматься: разработка и сопровождение etl / elt пайплайнов загрузки из различных источников (батчи и стриминг) мониторинг и оптимизация процессов сборки витрин участие в проектировании и разработки аналитических витрин данных в clickhouse участие в аналитических исследованиях предоставлять экспертную поддержку внутренним потребителям (data analysts, data scientists) поддержка и развитие базы знаний вы нам подходите, если есть: опыт работы над аналогичными задачами от 2 лет знание sql (clickhouse\postgresql\mysql) опыт разработки на python от 1 года уверенная работа с linux, docker и git понимание основных концепций dwh аккуратность, работа на качественный результат качественная и доскональная отладка кроме того, приветствуется: clickhouse, понимание его особенностей и ограничений работа с прочими субд в роли разработчика/аналитика написание пайплайнов в airflow / nifi / etc redash / grafana / superset / etc. django, drf, celery наш стек технологий clickhouse, postgresql, mysql, python, django, drf, zookeeper, nginx, celery, rabbitmq, redis, docker, git, gitlab ci/cd, airflow, ansible, kubernetes, spark, kafka мы предлагаем: оформление по тк рф knowledge sharing! healthy команда :) дмс после испытательного срока работаем удаленно (предпочтительно) или в офисе м. киевская (раевского, 4)