29.04.2022 23:58

ETL разработчик

По договоренности

29.04.2022 23:58

компания "beeline, тм" обязанности: устанавливать, настраивать и поддерживать в рабочем состоянии распределенное по для обработки данных; настраивать потоки данных в распределенное хранилище данных hadoop с различных источников (бд, файлы, web-сервисы и т.д.); оптимизировать существующие потоки данных; автоматизировать промежуточные процессы начиная от забора данных заканчивая оптимизацией хранения; тестировать новое opensource по появляющееся на рынке (необходимое для улучшения процессов); требования: linux (red hat, centos) - уверенное знание linux, опыт установки os, настройки различных параметров, тюнинг, написание bash-скриптов; apachenifi - опыт работы с данным инструментом (установка, конфигурирование, организации etl процесса); apachekafka - опыт работы с данным инструментом (установка, конфигурирование, создание/удаление/изменение топиков, настройка прав, чтение и запись данных); apachehadoop - опыт работы с распределенным хранилищем hdfs(чтение/запись); databases- опыт работы с различными типами баз данных как реляционными (oracle, mssql, mysql, postgresql и т.д.) так и nosql (cassandra, hbase и т.д.); java/scala/groovy/python- хороший опыт программирования на одном из языков (знание нескольких языков будет плюсом); знание/понимание того, как работают распределенные системы; знание принципов работы etl инструментов (nifi,informatica, pentaho и пр.); навыки проектирования и реализации системы сбора и обработки данных; умение работать с большими объемами данных; способность быстро разбираться в незнакомых типах данных; способность быстро разбираться в незнакомомopensource программном обеспечении ; условия: удаленный график работы; покрытие мобильной связи; возможности для саморазвития и роста (coursera, alpina, linkedin learning, и др.); медицинская страховка или конструктор льгот; отпуск 28 календарных дней; годовой бонус (при выполнении kpi);

Адрес

Казахстан Алматы

ETL разработчик

Адрес

Похожие вакансии

Новости

Схожие направления

ТОП компаний

Всего вакансий компании: 2448414

ТОП вакансий из категории

Смотрите также вакансии