Solution Архитектор в DataOps платформу (Big Data)

Big Data в МТС – место, где телеком данные превращаются в реально работающие IT-продукты. Мы создали и протестировали несколько десятков сервисов. Самые успешные из них уже стали частью экосистемы МТС. Например, МТС Маркетолог, рекомендации в KION (МТС ТВ), услуга “Кто звонит?” или Спам blacklist. Кого мы ищем? Высшее техническое образование в сфере IT; Понимание архитектуры компонентов Big Data их сильных и слабых сторон, технологий стека Hadoop (HDFS, YARN, Spark, Hive, HBase, Kafka), NoSQL СУБД, S3-совместимых объектных хранилищ; Понимание особенностей работы и практический опыт использования batch и streaming обработки данных; Опыт проектирования API интерфейсов и интеграционного взаимодействия (знание паттернов); Понимание и умение применять архитектурные паттерны; Знание и понимание принципов реализации систем мониторинга IT-инфраструктуры (Prometheus, Grafana, ELK); Понимание технологий виртуализации, контейнеризации (k8s, docker и др.); Знание основных принципов и методологий по управлению IT разработкой – в том числе DevOps, DevSecOPS, Agile. Процессов непрерывной интеграции и развертывания (CI/CD); Практический опыт планирования нагрузки, организации отказоустойчивых схем работы сложных информационных систем (в т.ч. гео-распределенных систем). Будет плюсом: Знание языков программирования Python/Java/Scala; Опыт применения одной из технологий Spark Streaming/Flink/Apache Beam и др.; Знание стека построения data-платформ на облачных провайдерах (AWS, GCP, Azure); Знание Modern Data Stack (Prefect / dbt / databricks / datahub и т.д.). Что предстоит делать? Формировать концепцию построения и развития ландшафта DataOPS Платформы (необходимые компоненты и требования к ним) в соответствии с функциональными и нефункциональными требованиями к Платформе; Проектировать общую архитектуру Платформы, архитектуру компонентов (или обосновать выбор Open-Source технологий), интеграционное взаимодействие компонентов и внешних систем и платформ компании; Определять стек технологий по каждому из компонентов Платформы с учетом Технологической стратегии компании (предоставление компонентов по модели PaaS в режиме самообслуживания/подписки на маркетплейсах, zero-trust architecture, zero-downtime и др.); Проектировать распределение компонентов по инфраструктуре (bare metal, IaaS, PaaS); Планировать развитие инфраструктуры под органический рост/изменение ландшафта; Вырабатывать лучшие практики применения (use cases) компонентов Платформы с учетом требований информационной безопасности; Участвовать в PoC по установке, настройке, нагрузочного тестирования, доработки компонентов; Разрабатывать и сопровождать Roadmap ввода / вывода из эксплуатации компонентов, процессы миграции; Поддерживать в актуальном состоянии архитектурную документацию Платформы; Проводить мониторинг технологий и подходов к решению задач, выбирать перспективные направления развития с отражением в технологическом радаре. Условия: каждый месяц - аванс и зарплата, дважды в год - премия. ДМС + стоматология, корпоративная связь, специальные предложения от партнеров и друзей МТС, отпуск 31 день в год. Выдаем 16 MacBook Pro или Dell на выбор. Есть ли обучение? Локальные конференции, митапы. Корпоративный университет МТС и масштабная виртуальная библиотека. А ещё мы регулярно обмениваемся опытом на совместных синках с лидами экспертизы. Какой график? Гибкое начало рабочего дня в промежутке с 8 до 11. Есть возможность работать несколько дней вне офиса по договоренности с командой.