компания "неофлекс" неофлекс - ведущий поставщик программного обеспечения и профессиональных услуг в области информационных технологий. более 17 лет компания фокусируется на выполнении ит-проектов федерального масштаба в интересах крупнейших российских и зарубежных банков. мы ищем кандидата без привязки к локации. офисы компании находятся в городах: москва, санкт-петербург, нижний новгород, саратов, воронеж, пенза. рассматриваем кандидатов из любых других городов россии в том числе на удаленный формат работы. обязанности: реализация процессов обработки данных в гетерогенной среде с помощью python/spark. etl. работа с airflow, написание кастомных операторов, формирование дагов. оптимизация существующего кода. spark/scala api (spark streaming/batch). базовые знания pandas, koalas, pyarrow. базовые знание hadoop(hdfs, yarn, impala). базовые знание форматов хранения данных (parquet, avro, orc). опционально знание концепции data lake(delta lake, iceberg). требования: понимание и опыт работы со средствами экосистемы технологий hadoop. знание python/scala (spark), apache airflow, apache kafka, docker. опыт решения etl/data engineering задач. опыт развертывания linux серверов/ контейнеров, скриптовых языков (bash). приветствуется знание java. приветствуется опыт работы с rest сервисами. опыт работы с kafka, elk. опыт работы с grafana, разработка мониторинга на grafana. знание и опыт администрирования linux-систем. опыт работы с openshift\kubernetes. понимание концепций построения ci/cd, опыт проектирования и построения ci/cd pipeline, управление процессом сборки и развертывания по. опыт построения фреймворков с нуля. условия: официальное трудоустройство по тк рф. график работы 5/2. day off (4 дня в год). амбициозные задачи и проекты. работа в команде профессионалов в доброжелательной атмосфере. дмс (с 3-го месяца работы, которое включает в себя стоматологию). корпоративное обучение и развитие (портал обучения и развития удаленным доступом 24/7; собственный центр развития компетенций). насыщенная корпоративная жизнь: яркие корпоративы, праздники для детей сотрудников, корпоративные спортивные мероприятия; мотивационные награждения. социальная ответственность: адресная помощь детским домам; возможность сделать окружающую природу чище (являемся активными участниками экологического движения «добрые крышечки»).
Адрес
Санкт-Петербург