В SberData мы создаем централизованное хранилище данных всего Сбера. Это более 350 источников данных и 100+ Пб информации, заказ и получение данных за 15 минут и современный технологический стек работы с данными, включая собственные сборки СУБД на базе Hadoop и Greenplum. Про проект: ЕСС (Единый Семантический Слой) - это хранилище данных предметных областей Банка, интегрированные в единую модель, имеющие сквозную идентификацию объектов и размеченные единой нормативно-справочной информацией, построенные на основе метаданных. Про команду: Команда занимается построением Единого Семантического Слоя (Хранилища) на новейших технологиях: стек Hadoop (HDFS, Parquet, Spark, Hive, HBase и т.д.) Java, OpenShift MPP-БД (Teradata, Greenplum) Обязанности Развитие архитектуры Единого Семантического Слоя (Хранилища) и стандартов разработки на платформе Spark: изучение механизмов Spark, выработка и включение best practice их применения в solution-архитектуру и технологию ЕСС (Хранилища) стандарты Банка практическая реализация proof of concept и пилотов предлагаемых решений консультирование смежных команд по вопросам применения стандартов. Обеспечение внедрения этих стандартов в процессы построения ЕСС взаимодействие с корпоративными архитекторами, внешними консультантами, вендором. Требования Обязательно: широкий технический кругозор (Model-driven engineering, Metadata-Driven Architecture, ОС, СХД, DevOps, распределенные и параллельные вычисления и т.д.) детальное знание методологии проектирования и технологии реализации тракта данных ЕСС/ХД на всех его участках (включая интеграцию данных и унификацию НСИ) глубокое понимание принципов организации хранения и обработки данных опыт программирования, экспертный уровень в системной аналитике знание принципов и методик гибкой разработки Agile английский язык – на уровне чтения технической документации, ведения деловой переписки Желательно: SQL – уровень эксперт знание подходов, методологий и фреймворков управления архитектурой опыт создания хранилищ данных опыт разработки Java опыт использования инструментов гибкой разработки: Jira, Confluence, Jenkins, BitBucket опыт работы с экосистемой Hadoop (HDFS, Hive, Impala, Spark, HBase, Kafka) или ETL инструментами такими как Informatica Опыт работы: От 5 лет Личностные качества: аналитический склад ума развитые коммуникативные навыки инициативность, ответственность Условия интересные масштабные задачи оклад + годовая премия работа в гибридном формате офис: г. Москва, м. Верхние котлы / Тульская / Нагатинская, бизнес центр "Чайка плаза 10" график работы: 5\2 с 9:00 до 18:00 с возможностью корректировать начало-окончание рабочего дня расширенный ДМС с первого дня и льготное страхование для близких бесплатный фитнес-зал в офисе бесплатную подписку СберПрайм+ и скидки на продукты компаний-партнеров корпоративное обучение за счет компании корпоративную пенсионную программу.
Адрес
Москва