компания "admitad" описание продукта компания admitad не монолитна, она оперирует несколькими бизнесами, а также запускает или покупает новые. эти бизнесы значимые продуктовые и финансовые данные хранят не единообразно, а в сыром виде и в ряде случаев не долго. задача – собрать, агрегировать и дать аналитикам компании данные, а также предоставить инструменты для создания регулярных и adhoc отчётов, требующихся для поддержки управленческих решений. технически – data warehouse собственного изготовления. ингредиентами являются clickhouse как хранилище и kafka+logstash как транспорт и обработка. наши ближайшие цели: на базе kafka сделать шину данных для всей компании с реестром схем сущностей для более надёжных контрактов между поставщиками и получателями, где хранилище лишь один из получателей. оптимизировать само хранилище, чтобы стоило меньше или вмещало больше. добавить нашему хранилищу «ума» с помощью машинного обучения, чтобы смотреть не только на факты, но выявлять тренды и строить прогнозы. задачи: проектирование архитектуры, разработка и поддержка инфраструктуры для хранения и обработки больших объёмов данных на основе clickhouse и kafka; разработка, тестирование и оптимизация etl-процессов обработки и анализа данных (сейчас на python и logstash); отслеживание качества данных и своевременное решение связанных проблем; тестирование и внедрение новых business intelligence продуктов; разработка решений для машинного обучения на основе данных из хранилища; помощь и консультирование разработчиков, аналитиков и data scientist’ов; ведение документации по разрабатываемым и внедряемым решениям; разработка внутренних и публичных api для взаимодействия между сервисами; формирование команды, способной быстро и качественно решать поставленные задачи; взаимодействие со смежными подразделениями, заказчиками; внедрение и поддержка практик качественной разработки (код-ревью, тестирование, менторинг, обмен знаниями и прочее). требования: отличные знания и опыт работы с системами хранения и обработки больших объёмов данных; практический опыт работы реляционными и нереляционными базами данных; 5+ лет опыта на python3; отличные знания python в области нагруженных приложений: потоки, процессы, асинхронность. хорошие знания asyncio; понимание принципов построения масштабируемых систем, основные проблемы, пути решения; умение работать с системой контроля версий git; умение разбираться в чужом коде и документировать свой; опыт проведения кодревью, понимание принципов хорошего кода; понимания как устроен деплой сервисов: что происходит в gitlab ci/cd, ansible, docker. опыт работы по гибким методологиями (scrum, kanban). будет плюсом: опыт системного администрирования linux; знания облачных платформ (aws, google cloud, azure); опыт работы с kubernetes, helm charts. мы предлагаем: работа в международной компании; все по тк и даже больше - дополнительные отгулы и доплата за больничный лист, а также программы помощи сотрудникам; гибридный формат работы (офис/удаленка); ноутбуки, предоставленные компанией, для комфортной работы из дома; современный офис с игровой зоной; у нас всегда есть свежие фрукты, овощи и напитки; мы за здоровый образ жизни и поощряем наших сотрудников заниматься спортом; корпоративное обучение - курсы и тренинги, митапы и конференции; скидка на изучение английского языка для сотрудников; дмс после прохождения испытательного срока; buddy program и english speaking club - для эффективного онбординга, знакомства и общения; незабываемые корпоративы и тимбилдинги для команд.
Адрес
Москва