08.11.2022 09:00
Hadoop Разработчик
08.11.2022 09:00
компания "лига цифровой экономики" проект по оптимизация существующих функционалов, и улучшению значений показателей назначения.на проекте работает несколько agile команд, каждая из которых ответственна за свой набор функционалов и реализацию дополнительных мероприятий по приведению системы в соответствие дополнительным требованиям.команды проходят весь цикл разработки показателей, от сбора требований и прототипирования до разработки и внедрения в продуктив. твои задачи: анализ текущей реализации разработка/актуализация архитектуры совместно с архитектором и аналитиком формирование комплекта проектной документации (release info, admin guide, release notes и пр.) разработка etl-процессов на spark и scala написание функционала взаимодействия с kafka и kubernates проведение тестирования разработанного функционала совместно с аналитиком мы ждем от тебя: отличное знание sql и hql (агрегирующие функции, оконные функции, оптимизация запросов) понимание принципов работы реляционных субд и hdfs опыт работы с hadoop и hive от 1,5 лет знание архитектуры hdfs (партиционирование данных, форматы файлов, особенности хранение и т.д.) знание scala умение работать с git опыт работы с postgresql или любой другой промышленной субд знание python (на уровне написания сложных dag-ов в apache airflow) опыт работы с детальными слоями хранилищ данных опыт внедрения промышленного функционала плюсом будет: опыт работы с apache kafka (batch, streaming)мы предлагаем: тренинги за счет компании, внутренние семинары, внутренние митапы, мы очень любим учиться новому корпоративная культура со своими ценностями и традициями, в которой каждый чувствует себя частью команды сообщества по интересам: лига спорта, лигаmusic, лига интеллекта, лига шахмат, а также возможность организовать свое сообщество и получить поддержку от компании профессиональная сессия развития персонала дважды в год, результатом которой является план индивидуального развития каждого сотрудника
Адрес
Москва
Похожие вакансии
По договоренности
08.11.2022 09:00
компания "лига цифровой экономики" проект по оптимизация существующих функционалов, и улучшению значений показателей назначения.на проекте работает несколько agile команд, каждая ...
Партнерские Вакансии
Москва
По договоренности
03.05.2022 02:14
компания "лига цифровой экономики" ищем разработчика hadoop на проект по оптимизации существующих функционалов единого информационного хранилища. твои задачи: анализ текущей ...
Партнерские Вакансии
Москва