14.12.2022 11:41
Data engineer (middlle)
14.12.2022 11:41
Основные задачи: Разработка и поддержка хранилища данных (Data Lake + Data Warehouse) Инджестинг данных из разных сервисов (REST API, Email) и файлов Создание и оптимизация моделей dbt для трансформации данных в DL/DWH Что мы ждем от тебя: Отличные знания SQL: оптимизация запросов, понимание планов запроса, внутренней работы SQL (оптимизация запросов, hash join, nested loop, типы индексов и т.п.) Уверенное знание Python: написание API, телеграмм-ботов, небольших скриптов и сервисов Понимание ETL-оркестраторов: Airflow, Dagster (dbt) Понимание концепции хранилищ данных (DWH, Data Lake): слои, витрины, агрегаты, Data Quality, полная-инкрементальная загрузки Инфраструктурные инструменты: Docker, bash, git, CI/CD, kubernetes (нужен только на базовом уровне) Приветствуется опыт с сервисами AWS Amazon: Lambda, DynamoDB, Kinesis, API Gateway и др. Что предлагаем мы: Трудоустройство согласно ТК РФ Решение сложных и интересных задач, перспективный проект Адекватное профессиональное руководство Возможность профессионального и карьерного роста с развитием проекта Конкурентная заработная плата (отталкиваемся от Ваших пожеланий) ДМС Годовой бонус Аккредитацию ИТ-компании
Адрес
Москва
Похожие вакансии
По договоренности
14.12.2022 11:41
Основные задачи: Разработка и поддержка хранилища данных (Data Lake + Data Warehouse) Инджестинг данных из разных сервисов (REST API, Email) ...