компания "а2 консалтинг" стек: airflow, hdfs, postgres, kafka, docker, jira, confluence, gitlab; azure stack (data factory, databricks, azure sql database, azure sql data warehouse) языки: python, pyspark, sql обязанности: разработка и поддержка etl/elt пайплайнов для сбора и обработки данных из новых источников с мониторингом и логированием; оптимизация/изменение существующих пайплайнов; обеспечение sla, контроля качества и полноты данных (ручные и автоматические dq тесты); формулирование требований к новым источникам данных и интегрирование их в существующие модели данных; построение, оптимизация/автоматизация подготовки витрин данных для отчетности ; быть ключевой точкой контакта между аналитиком данных / дата стюардом / архитектором решений и владельцами продуктов данных; предоставление экспертной поддержки; документирование разработанных решений; требования: от 3-х лет лет профессионального опыта в качестве инженера данных / инженера хранилища данных; опыт работы с облачными платформами microsoft azure / yandex cloud platform больше 2ух лет опыт и понимание устройства big data технологий (hadoop, spark, kafka и т. д.); уверенное знание python (включая библиотеки для парсинга и обработки данных) и sql; подтвержденный опыт работы с airflow в реальных проектах; опыт обработки объемных файлов (json, csv); понимание основных концепций dwh; понимание основных принципов работы с git; чтение технической документации на английском языке способность писать чистый, оптимальный код, который легко поддерживать и тестировать; стремление к саморазвитию и изучению новых технологий и инструментов; готовность принимать решения и брать на себя ответственность; сильные устные и письменные коммуникативные навыки; будет плюсом: опыт работы дата инженером в fmcg компаниях опыт работы с данными на scala построение предметно ориентированного хранилища по методологии data mesh что можем предложить: заработная плата обсуждается по итогам тех. собеседования. знаем рынок, готовы обсуждать индивидуально. оформляем официально в штат компании. гибкое начало рабочего дня. удаленный формат работы. очные встречи командами или работа в офисе по желанию. командировки для сотрудников из других городов по желанию. индивидуальный план развития: подбираем задачи для роста экспертизы, выделяем бюджет на обучение, предоставляем курсы и программы обучения (в т.ч. английскому языку), предоставляем обратную связь, регулярно обсуждаем развитие. постоянный профессиональный и личный рост, самостоятельность в работе. как одно из направлений развития мы предлагаем рост от разработчика до ведущего разработчика, далее тим-лид /архитектор; открытая корпоративная культура, минимум бюрократии и отчётов, а совещания только по необходимости и с чёткой программой.
Адрес
Белоруссия Минск