компания "ит1" описание проекта: мы набираем it специалистов в большую команду для работы на проектах для одного из крупнейших банков рф. наша команда строит единую платформу для обработки bigdata. многое уже сделано, но впереди еще много интересных задач. мы уже набрали некоторый опыт и готовы им поделиться с тобой. если мы близки тебе по духу, если хочешь набираться знаний и расти вместе с нами, присоединяйся к нашей команде. процесс не стоит на месте. требуется участие опытного разработчика по загрузке внутренних и внешних источников, которая предполагает различные интеграционные решения, обработку разнотипных форматов данных, преобразования полученных данных и т.д. обязанности: разработка на python 3 импортов данных в среде apache airflow (у нас 2.3.2 и регулярно обновляем); взаимодействие с командой аналитиков, эксплуатации, иб и немного с бизнесом; разработка загрузок данных в impala через hadoop. обязательные требования: опыт разработки на python; опыт работы с apache airflow; опыт работы с библиотеками apache arrow, pandas, numpy; опыт анализа, систематизации, классификации; опыт интеграции с rest, ftp, exchange-email, smb-папками, разными бд; самостоятельность в принятии решений; базовые знания сетевого взаимодействия. будет плюсом: опыт работы с hadoop (hdfs); организаторские способности и умение вести переговоры; опыт проектирования api(сейчас мы таких не возводим, но всё может поменяться); знание принципов devops и практик ci/cd.
Адрес
Москва