компания "сибур, группа компаний" чем вам предстоит заниматься: развитием платформы данных, созданием инструментов обработки данных. участие в проектах с реальной ценностью для бизнеса компании. загрузкой данных из систем источников в узел данных и обеспечением их доступности. автоматизацией аналитических задач. разработкой и оптимизацией алгоритмов операционного анализа данных. развитием практик devsecops, автомтизацией миграций и разработческих пайплайнов. взаимодействием с аналитиками данных (data scientists), производственными и функциональными экспертами для определения требований к выгрузке, конвертации и представления данных. эта вакансия для вас, если вы: самое важное – вы должны хотеть развиваться и развивать платформу данных, как продукт. нам хотелось бы, чтобы кандидат сам умел искать решение задач, пытливо изучать техническую и технологическую сторону вопроса, прототипировать и собирать обратную связь. совершенно точно необходимы эти навыки: знание хотя бы 1 языка программирования (желательно что-то из scala, java, python, c++/c#) на хорошем уровне: опыт разработки более года, есть примеры проектов или продуктов. знание sql, опыт работы с реляционными субд (oracle, mysql, postgresql и пр.); навыки проектирования и реализации системы сбора и обработки данных; опыт работы с *nix системами и хотя бы пару пунктов из нижеперечисленного: опыт работы хотя бы с одной mpp субд, понимание архитектуры и оптимизацией запросов. знание vertica будет дополнительным плюсом. знания алгоритмов в сфере высоконагруженной обработки данных при помощи распределённых вычислений (mr). умение работать с avro, parquet форматом данных (типы, сжатие, выбор сортировок). умение работать с распределенным хранилищем hdfs. знание и умение работать с etl/elt инструментами, apache nifi будет дополнительным плюсом. знание и умение работать с amqp (kafka, rabbitmq). понимание как работать со стеком продуктов на платформе hadoop. желательно spark, spark streaming, hbase, impala, hive; другие технологии тоже пойдут в зачёт. умение разрабатывать udf для различных сред анализа данных, контейнеры и оркестрация контейнеров. управление кластером hadoop (развёртывание, мониторинг, оптимизация). знание интерфейсов, методов управления разработкой и конфигурациями. мы отдельно готовы учесть вашу способность открыто мыслить, сильную мотивацию на результат или просто хорошую теоретическую основу, полученную вами во время учёбы. что мы вам предлагаем: возможность удаленной работы (график обсуждается индивидуально в зависимости от роли). заработную плату по результатам собеседования, премии за эффективную работу и результат; нестандартные задачи, которые требуют креативного подхода; команду, с которой приятно работать, и поэтому мы любим собираться в офисе для командных встреч, а также интересно проводить время после; современный стек и гибкие методологии разработки, работа в команде высококлассных профессионалов из разных технологических областей; возможность обучения и участия в жизни it-сообщества: большой выбор курсов в нашем корпоративном университете, посещение митапов и конференций; корпоративные льготы: дмс, льготное страхование родственников, большой выбор внутренних спортивных секций, скидки на абонементы сети world class.
Адрес
Москва