компания "diasoft" сейчас мы в поисках системного аналитика в команду разработки платформы «digital q.dataflows». вас ждут интересные проекты по исследованию и созданию продуктов на микросервисном стеке для работы с потоками данных, хранилищами, etl процессами. описание платформы:технологическая платформа для работы с данными digital q.dataflows от «диасофт» создана в микросервисной архитектуре и предоставляет широкий перечень инструментов для полного цикла работы с данными. компонент datacatalog, входящий в состав платформы, позволяет автоматизировать сбор метаинформации, обработку и хранение данных, отслеживать их взаимосвязи и потоки. datastreamer обеспечивает сбор, обработку и загрузку информации (etl) и позволяет интегрировать между собой различные информационные системы, поддерживает сценарии потоковой или пакетной обработки данных. решение dataquality обеспечивает анализ качества данных, мониторинг метрик качества и устранение ошибок в информации, поступающей из различных источников. обязанности: проектирование инструментов для аналитики и инжиниринга данных (data catalog, etl, bi) исследование новых технологий и возможности их применения в технологической платформе; формализация требований и трансляция их в виде требований команде разработки продукта; совместная проработка текущего и будущего решения с архитекторами; работа в географически распределенной команде по scrum. требования: понимание составных элементов архитектуры аналитических систем (dwh, data lake, data mart и пр.); опыт проектирования или разработки с использованием etl-инструментов, оркестровщиков, каталогов данных, bi-инструментов, в т.ч. open source решений, знание sql; опыт постановки задач разработчикам; опыт разработки требований, спецификаций, технической документации. будет плюсом: опыт работы со стеком hadoop; понимание процессов devops; опыт работы по методологии scrum. условия: оформление по бессрочному трудовому договору; график 5/2, гибкое начало рабочего дня; возможность работать дистанционно/гибридно, использовать рабочие места в наших офисах (москва, санкт-петербург, ярославль, пермь, чебоксары).
Адрес
Москва