компания "маркетплейс-технологии" ищем dataops инженера (или devops инженера с опытом работы с большими данными) в самый быстрорастущий маркетплейс с доставкой на следующий день. с каждым годом мы растём на 800%, у нас появляются новые задачи и ответственности, поэтому мы ищем к себе в команду классных людей! сердце отдела анализа данных - решения и продукты, созданные на основе данных. чтобы создавать много качественных data driven продуктов сотрудники дата офиса постоянно адаптируются к новым требованиям и используют гибкую платформу данных, позволяющую решать их задачи. платформа данных - набор проектов, которые совместно образуют общий инструментарий по обработке, сохранению, чтения и изучению данных. сейчас, платформа данных состоит из следующих частей: airflow - для оркестрации etl задач наш внутренний фреймворк для airflow с шаблонными операциями clickhouse - для хранения и изучения кликстрима, а также один из слоев dwh кликстрим на основе java микросервисов в k8s kafka - для потоковой передачи данных и kafka-streams для потоковой обработки данных kafka connect и debezium - для cdc postgresql как основной источник мастер данных cubejs - для предоставления olap кубов в другие продукты feature store - для интеграции ml решений и доставки ml ценности быстрее odd как платформа метаданных и dq и другое что предполагается делать: улучшать процессы ci/cd, чтобы продукт развивался быстрее и качественнее e.g. хорошо продуманные релизные циклы для inner source библиотек e.g. поддержка feature контуров на основе helm чартов интеграция инструментов платформы данных с keycloak и vault для снижения оверхеда на администрирование пользователей работа с ролевой моделью доступов к данным вместе с аналитиками, для обеспечения безопасности данных поддержка и улучшение чартов компонентов платформы данных - расширение функционала, поддержка зависимостей и обновление версий улучшение и поддержка observability и мониторинга компонентов платформы с помощью сбора метрик и алертов что мы от вас ожидаем: helm k8s vault keycloak prometheus / grafana / alertmanager опыт администрирования бд / нагруженных сервисов было бы круто, если бы был опыт с airflow, clickhouse, kafka, kafka connect, debezium, schema registry что можем предложить мы: дружный молодой коллектив. вместе бегаем гонки героев, катаемся на сноубордах и мотоциклах, играем в офисе playstation/switch и весело проводим время. также для любителей кофе есть отдельная секта, которая проводит церемонии в обед каждый день. работу с сильной технической и продуктовой командой (у нас работают ребята из ex google / skyеng / ozon / yandex); удобный формат работы. никакой бюрократии и трека времени. ожидаем, что ты сможешь адекватно оценивать свои задачи и работать в спокойном для себя темпе. главное — твори крутые вещи. курсы и обучение. если это поможет делать работу лучше или быстрее, то мы только "за". свобода действий. каждый имеет возможность настраивать процессы, включаться в разнообразные проекты, запускать и развивать свои идеи, которые нужны людям; официальное трудоустройство. платим вовремя частями два раза в месяц. раз в полгода проводим пересмотр зарплаты. классические плюшки в виде дмс, стоматолога и психолога прилагаются. рабочая техника. тут вроде всё понятно :)
Адрес
Казань