компания "wildberries" мы - wildberries. мы - это крупнейший маркетплейс европы, 30 млн пользователей ежедневно и технологические задачи, у которых нет аналогов. наша компания стабильно развивается и работает в усиленном режиме: использует современный стек и новейшие технологии, разрабатывает множество новых hi-tech продуктов. проект: it финансы чем предстоит заниматься:- выработка новых архитектурных решений, обсуждение и защита предлагаемых вариантов архитектурных решений с ключевыми участниками процесса;- развитие хранилища данных ядром которого является greenplum интегрированный с s3(data lake) и postgres(потоковые загрузки);- обеспечение непрерывной работы кластера greenplum, мониторинг состояния кластера и нагрузки;- написание dag airflow, основные источники бд\kafka\nats streaming\rest.- обеспечение полноты и актуальности данных, покрытие тестами критических для бизнеса данных требования:- опыт работы от 3 лет на аналогичной должности;- понимание основных концепций из области data warehouse (инмон, data vault, anchor);- знание python (class, asyncio, threading, aiohttp, boto3);- знание sql на продвинутом уровне, умение читать планы запросов и оптимизировать запросы;- понимание внутреннего устройства бд postgres (mvcc, index, join hash\merge\nested);- понимание внутреннего устройства бд greenplum (ao\heap, distributed, partition), опыт установки, конфигурирования и поддержка (зеркалирование, ресурсные группы, gprecovery, gpbackup, gpexpand, gprecoverseg, pxf, gpload);- владение linux на базовом уровне;- опыт работы с docker, airflow, s3;
Адрес
Москва