Медиалогия занимается разработкой продуктов по сбору и анализу данных из СМИ и соцмедиа. Это высоконагруженные системы, которые в режиме реального времени сканируют весь текстовый сегмент Интернета (100+ млн. сообщений в сутки, 1.7 млрд. метрик) и, используя уникальные лингвистические технологии, позволяют осуществлять мгновенный анализ упоминаний наших клиентов в соц.сетях, блогах, форумах и управлять их репутацией.Проект: Система по анализу данных Её составляющие: etl-процессы на spark + scala 2.11, хранилища: postgres, clickhouse, приложения: java. На позиции Старший инженер DevOps Вам предстоит: Заниматься эксплуатацией DWH-инфраструктуры на базе Arenadata (Hadoop/Spark/Hbase/Hive/Kafka/Zeppelin/Airflow); Заниматься эксплуатацией баз данных SQL/NoSQL (ElasticSearch, HBase, PostgreSQL, Clickhouse); Обеспечивать устойчивость инфраструктуры к отказам и катастрофам (HA & DR); Написание/обслуживание процессов CI/CD (GitLab, Ansible, Nexus); Мониторинг систем (Prometheus-Loki-Grafana, Zabbix). Наши пожелания к будущему коллеге: ОС семейства Linux (основные знания и инструменты администратора); Git-Процессы (Gitlab или другой); CI/CD/CM (GitLab-CI, Ansible); Платформа мониторинга (PLG, Zabbix или другая аналогичная платформа); NoSQL (ElasticSearch, ClickHouse или другая) и БД SQL (PostgreSQL); Unix Shell, Python или Golang (для задач системного администратора); Желателен опыт в HADOOP (HDFS, YARN, HBase, HIVE, SPARK, Zeppelin, Kafka, AirFlow, ...) и обязательно желание в него погрузиться:) Вы получите: Оформление по ТК РФ, полностью белая ЗП; График работы - 5/2 с 9.00/10.00 - 18.00/19.00; Возможен удаленный формат после полного овладения спецификой работы; ДМС с хорошим выбором клиник и международной страховкой; Сильная команда и обмен опытом; Возможность посещения профильных мероприятий; Внутренние тренинги и База знаний; Комфортный офис в 10 мин. пешком от м. Дмитровская (БЦ «Савеловский Сити» с массажным кабинетом, кикером, спорт-зоной, PlayStation и пр.), рядом дизайн-завод Флакон, кафе и магазины, фитнес-центр.Какие технологии используем:Nginx, haproxy, IIS, MSSQL, PostgreSQL, Kafka, RabbitMQ, docker, Kubernetes, Zabbix, Grafana, ElasticSearch, Hadoop и многое другое.
Адрес
Москва