компания "mail.ru group" мы занимаемся развитием и поддержкой платформы big data на vk.com. она построена как на проверенных решениях с открытым исходным кодом (hadoop, kafka, spark, zeppelin), так и на собственных разработках, заточенных под работу 24/7 в условиях высоких нагрузок. самая большая социальная сеть россии — самая большая big datа! kafka: ~1pbhdfs: ~50pbclickhouse: ~3pb (nvme) для нас важно отлично разбираться в любом из этих инструментов. любим spark. пишем на любых языках, но особенно на java/scala и python. вам предстоит: развивать платформу хранения и обработки больших данных; внедрять новые инструменты для анализа данных и машинного обучения; решать задачи производительности и отказоустойчивости инфраструктуры big data; строить новые и оптимизировать существующие etl-процессы. мы ожидаем, что у вас есть: хорошее знание java/scala, python; знание принципов работы баз данных, распределенных систем хранения и обработки данных; опыт работы и понимание внутреннего устройства: hadoop, hdfs, kafka, spark, zeppelin, airflow, zookeeper, clickhouse. мы предлагаем: сложные и интересные задачи: высоконагруженные быстрорастущие сервисы, которые задают уровень для конкурентов качеством и технологиями; выбор: удаленка или уютный офис — в историческом центре санкт-петербурга или в небоскребе с шикарным видом на москву; дополнительное обучение за счет компании, занятия английским языком, участие в профессиональных конференциях и форумах по всему миру; новый опыт: лучшие сотрудники преподают в наших образовательных проектах, выступают на российских и международных конференциях; минимум бюрократии; полный социальный пакет (спорт, дмс, английский) и комфортные условия для работы и творчества.
Адрес
Санкт-Петербург