DevOps Engineer (BIP)( Лаборатория Касперского )

компания "лаборатория касперского" о нас:business intelligence platform - мы команда разработки системы обработки больших данных, круглосуточно и в реальном времени обрабатывающей терабайты данных из различных источников. вычислительный кластер обработки данных состоит из следующих компонентов: hadoop собственной сборки, spark, hive, kafka, cassandra, jupyterhub, docker, kubernetes и множество сервисов, написанных на скале и развернутых в этой инфраструктуре.нашей главной задчей является построение распределенного и отказоустойчивого бэкенда обработки данных. основные задачи, которым предстоит заниматься: развертывание сервисов под linux и windows; поддержка и развитие кластера хранения и обработки данных на hadoop стеке (apache spark, hdfs и т.д.); автоматизация задач администрирования процессов разработки и тестирования; проектирование и оптимизация инфраструктуры для развертывания сервисов; создание технической документации по развертыванию и поддержке сервисов; развитие инструментов развертывания сервисов и конфигурирования серверов в различных окружениях; мониторинг состояния сервисов и оперативное решение возникающих проблем; согласование со смежными командами требований в части развертывания приложений. что мы ждем от вас: опыт администрирования linux или windows окружений, глубокое понимание принципов работы операционных систем; опыт использования ansible либо других систем управления конфигурациями; опыт работы c системами виртуализации и контейнеризации (docker, kubernetes, vmware, hyper-v и т.д.); умение писать административные скрипты (bash, python, powershell и т.д.); базовые знания сетевых технологий (tcp/ip, http, tls и т.д.); понимание принципов, протоколов и технологий обеспечения сетевой безопасности; опыт настройки и конфигурирования систем сборки и развертывания приложений (teamcity и т.д.); навыки диагностирования проблем работоспособности по. дополнительным плюсом будет: опыт развертывания и администрирования решений на базе стека hadoop (apache spark, apache hive, hdfs и т.д.); опыт использования и настройки систем мониторинга; опыт администрирования nosql хранилищ данных cassandra, kafka, elasticsearch; опыт работы с kubernetes; опыт развертывания облачных приложений (ms azure, aws и др.).