компания "црпт (центр развития перспективных технологий)" о компании мы создаем единую распределенную систему масштаба страны, которая преобразит опыт совершения покупок, а именно позволит "оцифровать" каждую единицу товара уже к 2025 году. это позволить каждому покупателю быть уверенным в качестве и происхождении товара, а производителям и продавцам - не только уменьшить долю неоригинальной продукции на рынке, но и оптимизировать производственно-логистические процессы и сократить издержки за счет возможностей аналитической подсистемы. уже сейчас система обрабатывает миллиарды транзакций ежедневно и оперирует петабайтами данных на скоростях десятки тысяч запросов в секунду. о команде команда занимается построением и развитием высоконагруженных аналитических сервисов для уникальной глобальной всероссийской информационной системы. аналитическая bigdata -платформа в цифрах: 240 млрд фактов по кодам маркировки 3пб объем данных в hdfs 8 кластеров, больше 6000 ядер текущий стек аналитической команды: hadoop: yarn/hdfs/hbase/phoenix clickhouse spark/spark streaming/spark sql/scala hive airflow parquet/hudi zeppelin/jupyter notebook чем предстоит заниматься: развитие, тюнинг и поддержка различных сред аналитической платформы – разработки/тестирования/пре-продуктивной/продуктивной; поддержка процесса непрерывной интеграции/развертывания сервисов в области аналитики больших данных (сборка/тестирование/развертывание); поддержка инструментов / фреймворков для автоматизации тестирования и ci/cd; ведение коммуникаций с подразделениями разработки, devops, эксплуатации инфраструктурных платформ; участие в создании документации и инструкций по установке, настройки и эксплуатации платформы, обучении коллег. пожелания к опыту: навыки администрирования ос семейства linux; понимание основ построения масштабируемых отказоустойчивых систем и приложений; опыт работы с технологиями hadoop (hdfs/hbase/phoenix), spark, kafka; опыт эксплуатации субд на базе postgres; опыт работы с планировщиком airflow или др.; знание sh/bash; базовые знания sql; умение работать в команде (agile). приветствуется: опыт эксплуатации субд/хранилищ на базе postgres, clickhouse, elasticsearch; опыт работы со средами контейнеризации (docker, kubernetes), сборки docker; опыт построения pipeline ci/cd (gitlab); владение инструментами автоматизации (ansible, chef и др.); опыт работы с системами автоматической сборки (make, maven, gradle, npm); базовые знание скриптовых языков программирования (python). что вам точно понравится: сложные и интересные задачи, работа с реально большими объемами данных и современным востребованным стеком. возможность "пощупать" новые технологии и прокачать скиллы, постоянно развиваться молодая, экспертная, увлеченная и талантливая команда, у которой можно многому научиться, культура открытости и взаимопомощи конкурентная зп, оформление по тк рф дмс со стоматологией после испытательного срока, дмс для семьи с корпоративными скидками страхование жизни и здоровья. мобильное рабочее место на базе последних macbook / windows оплачиваемые митапы, конференции гибкое начало рабочего дня, работа по agile возможность работать удаленно/частично удаленно/в офисе в санкт-петербурге или москве “кафетерий” льгот (возмещение расходов на любое самообразование, спорт, дмс для членов семьи, доступ к ит сервисам и т.д)
Адрес
Санкт-Петербург