Junior Data Engineer (сопровождение, эксплуатация)

компания "mediascope" mediascope – ведущая российская компания в области исследований и мониторинга средств массовой информации и рекламы. наша работа – постоянное изучение объема и характеристик аудитории телевидения, интернета, радио и прессы, исчисляемой миллионами в россии. за годы существования нашей компании мы разработали и внедрили множество уникальных решений и проектов и продолжаем развиваться. наш продукт – это данные по аудитории российских сми, которые мы предоставляем нашим клиентам, а это большинство рекламных агентств, телевизионных каналов, радиостанций, издательских домов, интернет-компаний, а также компаний-производителей товаров и услуг. мы разработали и внедрили множество уникальных решений и проектов, базирующихся на применении широкого спектра ит-технологий. сейчас мы ищем дата-инженера в команду эксплуатации и сопровождения big data platform. стек технологий: в части big data platform основной стек это hadoop (hdfs/yarn/spark/hive/hbase), kafka, nifi, airflow, postgresql, ряд вспомогательного по. чем вы будете заниматься: контроль работы big data платформы; обнаружение ошибок в обработке данных, диагностика ошибок и участие в их устранении; участие в развитии мониторинга систем; автоматизация задач анализа данных и операционных процессов; управление задачами обработки данных в airflow; анализ входных и выходных данных; выполнение задач по расчету данных на платформе big data. мы ожидаем, что вы обладаете: навыками написания sql-запросов на извлечение данных; базовыми знаниями работы в командной строке linux; способностью вникать в логику работы сложных систем; аналитическим складом ума; хорошей общей и технической грамотностью; пониманием назначения bigdata-систем. будет плюсом: опыт работы с любым etl инструментом; знание pandas; общее понимание экосистемы hadoop; опыт работы с gitlab; знание python/scala на базовом уровне; понимание работы apache spark; что мы ценим в людях: умение работать в команде; инициативность в постоянном улучшении работы; готовность учиться и помогать коллегам в решении задач; ответственность за результат. что мы предлагаем: возможность работать из дома и гибкий подход к рабочему графику; при необходимости - современный и комфортный офис класса а в пешей доступности от м. савеловская и м. марьина роща; конкурентную заработную плату; официальное оформление: все процессы согласно тк; заботу о вашем здоровье – хорошую страховку дмс, включающую обслуживание в ведущих центрах москвы; соблюдение необходимых мер по обеспечению безопасности здоровья в офисном пространстве; дружелюбную корпоративную культуру, приятных коллег и отсутствие дресс-кода; корпоративные скидки у различных партнеров компании.