15.11.2022 14:51
Data engineer/дата инженер
15.11.2022 14:51
В команду Data отдела мы ищем опытного Дата Инженера, кто прошел путь от проектирования (или принимал активное участие) реляционных баз данных до выстраивания и оптимизации ETL/ELT процессов. Совместно с командой Аналитиков проектировать и реализовать бизнес логику витрин данных, добиваться высокой скорости обработки данных и оптимизировать существующие ETL/ELT процессы. Наша команда состоит из опытных и талантливых Дата Инженеров и DB разработчиков. Мы нацелены на развитие и усовершенствование нашей инфраструктуры, поэтому мы уделяем особое внимание на собственное развитие и R&D. В нашей команде мы активно работаем, а точнее сказать завершаем первый большой блок работ по формированию новой data платформы на базе PostgreSQL и ClickHouse. Наш key tech-stack- это dbt, Airflow, Kafka, Kubernetes. Основные scripting языки- Python, SQL и bash. Все это мы подкрепляем устойчивой и прогрессивной DevOps практиками (CI/CD). Что предстоит делать: Активно участвовать в проектировании и разработки миграции OLAP Cube на PostgreSQL и формировать вместе с командой дизайн нового слоя данных на PostgreSQL Работать с данными с момента их появления в источнике данных, всего цикла трансформации и реализации бизнес логики в виде витрин данных Поддерживать и оптимизировать рабочие решения и процессы ETL/ELT Совместно с командой формировать новые подходы работы с данными, а именно - реализация MDM решения, практика re-usbable data sets (витрины данных) и формирование data domains (домены данных). Активно участвовать в формировании архитектуры и каталога данных Что мы ожидаем: Уверенный и прогрессивный опыт работы на уровне разработчика с такими БД как, MS SQL, PostgreSQL и ClickHouse Опыт формирования сложных SQL запросов с учетом специфики БД и их оптимизации и отладки Уверенное владение Python и основными библиотеками, такими как - Pandas, NumPy и др. Обширный опыт работы с инструментами Airflow, Kafka и dbt (будет большим плюсом) Опыт использования практик и инструментов CI/CD Сильные коммуникативные навыки, командная работа и желание расти, изучать новые технологии и развиваться вместе с командой Мы предлагаем: «белую» заработную плату; удаленный или гибридный формат работы (на ваш выбор), гибкое время начала и окончания рабочего дня. работу в комфортном офисе в шаговой доступности от м. Ботанический сад (при гибридном формате работы); оформление согласно ТК РФ с первого рабочего дня; возможность обучения и развития.
Адрес
Москва
Похожие вакансии
По договоренности
17.11.2022 06:05
компания "асна, сеть аптек" в команду data отдела мы ищем опытного дата инженера, кто прошел путь от проектирования (или принимал ...
Партнерские Вакансии
Москва
По договоренности
15.11.2022 14:51
В команду Data отдела мы ищем опытного Дата Инженера, кто прошел путь от проектирования (или принимал активное участие) реляционных баз ...
По договоренности
07.05.2022 00:59
компания "газпром-медиа развлекательное телевидение (гпм ртв)" о проекте мы развиваем свою экосистему, которая состоит из большого количества банковских, финансовых, медиа ...
Партнерские Вакансии
Москва