22.12.2022 05:48
Data engineer( СРМ Солюшнс )
22.12.2022 05:48
компания "срм солюшнс" cdp- saas платформа по управлению данными и взаимодействию с потребителями. konnektu собирает все доступные данные о потребителях из различных источников и объединяет их в единый профиль для автоматизации маркетинга, сегментации, персонализации коммуникации и роста продаж. с 2016 года нам доверяют крупнейшие лидеры рынков в сферах: fmcg, retail, недвижимость, автомобильные дилеры и девелопмент.среди наших клиентов — unilever, балтика, оби и другие. компания имеет государственную аккредитацию в области ит, а также является участником проекта инновационного центра «сколково»). задачи, за которые отвечает данный сотрудник - администрирование и развитие хранилища данных ежедневный функционал: поддержка аналитиков данных:-деплой jupyterhub кластера- деплой кода аналитиков данных (jenkins)- умение пользоваться docker, docker-compose (понимание концепции контейнирезации)формирование сложных etl/elt пайплайнов:- умение писать сложные airflow dags- умение писать собственные хуки, операторы, сенсоры airflow- подключение внешних данных (api, парсинг интернет-ресурсов, xml, json, xlsx, txt, parquet, csv)- подключение внутренних источников(clickhouse, postgresql)- использование spark для больших данных (pyspark)нормализация и денормализация данных:- понимание 1нф-4нф (нормальные формы)- понимание scd2-scd4 (slowly changing dimensions)- понимание основных подходов к проектированию хранилищ данных, отличия, плюсы и минусы требования: высшее образование языки программирования: python- функциональное программирование, ооп, sql - сложные подзапросы, оконные функции, bash- основы оркестрация: airflow обработка больших массивов данных: spark (pyspark) условия: оклад – по итогам технического собеседования первый этап - собеседование с hr + выполнение тестового задания официальное трудоустройство по тк работа в гибридном формате в офисе (москва, метро 1905 года); пятидневная рабочая неделя, пн-пт, с 9 до 18 предоставим все необходимое оборудование грамотный онбординг и погружение в компанию с инновационным продуктом
Адрес
Москва
Похожие вакансии
По договоренности
22.12.2022 05:48
компания "срм солюшнс" cdp- saas платформа по управлению данными и взаимодействию с потребителями. konnektu собирает все доступные данные о потребителях ...
Партнерские Вакансии
Москва