09.12.2022 06:22
Data engineer( Актион Технологии )
09.12.2022 06:22
компания "актион технологии" не будем повторять то, что написано о нас на страничке «о компании». там ты найдешь ответы на вопросы "кто мы?", "почему сейчас ищем людей?" и "что стратегически нами задумано?", букв немного, вся суть передана, цифры говорят сами за себя! какой человек нам нужен? самостоятельный, убедительный, амбициозный, с лидерскими качествами (или умением сделать так, чтобы управлять не приходилось:) стремящийся к построению качественных процессов и, как следствие, качественному сбору, хранению и поставке данных. что мы предлагаем: занимается созданием централизованной системы сбора и обработки данных работать в компании, где тебя слышат и ценят твой вклад влиять на технические решения и планомерно повышать качество сбора, хранения и поставки данных работать с командой людей, умеющих принимать решения, амбициозных, увлеченных своим делом и проектом разрабатывать востребованный продукт и получать четкий фидбэк от пользователей решать амбициозные задачи получить профессиональный рост (у нас есть тренинги, конференции, сильная команда, которая готова делиться знаниями и в которой можно быстро расти) немного о том, что уже сделали и что нам еще предстоит :) на текущий момент мы подготовили инфраструктуру на базе hadoop и greenplum для загрузки, обработки и построения витрин данных. описали и загрузили данные ряда продуктов нашего холдинга и приступили к описанию и загрузке следующих. дальше планируем развивать и масштабировать инфраструктуру, запускать потоковое получение данных и увеличивать количество подключенных источников и доверие к данным. что планируем сделать: загрузим все источники данных приведем data-flow между продуктами к целевому состоянию устраним расхождение данных между продуктами опишем все ключевые данные, как результат: есть data-каталог, описан flow данных на практике это значит, что мы будем решать следующие задачи: контроль всех ключевых данных в холдинге за счет правильно выстроенной системы мониторинга и алертинга создание хранилища, из которого каждый новый отчет будет рождаться за “один день” настройка автоматического подключения событий загрузка данных из различных источников в hadoop, как batch, так и stream обработка полученных данных - создание централизованной и прозрачной обработки данных структурирование и мониторинг потоков данных подготовка витрин данных для конечных пользователей что для нас важно в тебе: уверенные знания sql и баз данных знание одного из яп: python, scala, java знание основ ооп опыт работы с системами контроля версий (git) умение организовать процесс загрузки, обработки и доставки обработанных данных конечным потребителям высокий уровень самообучения не обязательно, но будет очень здорово, если: знаешь open source фреймворки big data: (hadoop, mapreduce, spark & spark streaming, hive, kafka) знаком с apache nifi и apache airflow что есть у нас и чем готовы делиться: белая, своевременная и конкурентоспособная заработная плата дмс (включая стоматологию) удобное место для работы и современное “железо” гибкий график. начало работы с 8 до 11 у нас не нужно приходить 5 дней в неделю в офис. мы внутри команд сами определяем, когда туда приехать p.s.: а если ты совсем не хочешь посещать офис, то удалённый формат работы у нас тоже есть) профессиональный рост (у нас есть внутреннее обучение, возможность посещать конференции и митапы, мы спонсируем)) корпоративная библиотека (огромное количество профессиональной литературы - бери, читай, наслаждайся)
Адрес
Москва
Похожие вакансии
По договоренности
09.12.2022 06:22
компания "актион технологии" не будем повторять то, что написано о нас на страничке «о компании». там ты найдешь ответы на ...
Партнерские Вакансии
Москва