Инженер данных

ГК Центр Финансовых технологий в поиске Дата-инженера в команду машинного обучения О нас: Мы команда машинного обучения ЦФТ, наша основная задача – внедрение машинного обучения в технологические и бизнес-процессы компании для повышения их эффективности. Количество задач и процессов растет, поэтому сейчас мы расширяем нашу команду и ищем новых дата-инженеров У вас будут все возможности для развития в BigData и Machine Learning. В нашей команде дата-инженеры занимаются организацией данных и витрин для их получения. Главные потребители наших данных: data scientist’ы, которые занимаются поиском закономерностей, значимых признаков в данных и тренировкой моделей машинного обучения. Стек: Java/Scala, инструменты Big Data и NoSql, для кода - IntelliJ Idea, Git, Maven/Gradle, JUnit. Задачи: проектирование и построение Data warehouse компании подготовка витрин данных для отчетности, бизнеса и дата аналитики организация пайплайнов сбора данных от бекендов и других хранилищ организация пайплайна подготовки датасетов для обучения ML моделей организация сбора метрик с инфраструктуры поддержка текущих ETL пайплайнов На минималках потребуется: Java 8+, Scala или Python на хорошем уровне; Знание алгоритмов и структур данных; Знание SQL и принципов работы классических БД; Желание развиваться в BigData и ML. Какие еще навыки вам будут полезны в работе: Hadoop, Spark, YARN, Hive, Impala; noSQL базы: Cassandra, Elastic; Анализ данных при помощи Python-ноутбуков Jupiter, Zeppelin; Работа с очередями сообщений: Kafka, Rabbit, JMS. Задачи: проектирование и построение Data warehouse компании подготовка витрин данных для отчетности, бизнеса и дата аналитики организация пайплайнов сбора данных от бекендов и других хранилищ организация пайплайна подготовки датасетов для обучения ML моделей организация сбора метрик с инфраструктуры поддержка текущих ETL пайплайнов Формат работы: удаленно, и есть возможность работать из офиса (в РФ наши офисы есть в 11 городах) В ЦФТ вы найдете: Команду, которая поддержит твои идеи, поможет воплотить их в жизнь и решить даже самые сложные задачи. Рост и профессиональное развитие: у нас есть возможность T, V - шейпинг роста, а еще мы организуем митапы и конференции, мастер-классы и тренинги, а также компенсируем внешнее обучение (участие в конференциях, курсы и т.п.). Белую, конкурентоспособную заработную плату и понятную систему финансового роста. Социальный пакет: официальное трудоустройство, ДМС с первого рабочего дня, well-being программы, скидки на перелеты S7, скидки на обучение английского в Skyeng, бесплатная электронная библиотека.