12.11.2022 07:14

Python разработчик системы A/B-экспериментов

По договоренности
12.11.2022 07:14
компания "headhunter" почти все продуктовые изменения в hh.ru проходят через строгую систему экспериментов: ни одно не выходит на пользователей, если оно просто кажется нам классным. эксперименты проводятся через нашу внутреннюю систему а/б-тестов, где разработчики, аналитики и дизайнеры определяют выборку среди пользователей, добавляют метрики и смотрят на результаты. наша главная задача – улучшение сервиса с помощью контролируемых экспериментов, и с каждым днем их становится всё больше: в этом году больше 30 команд провели 550+ экспериментов. в связи со стремительным ростом количества экспериментов требования к платформе а/б-тестов также возросли, и мы ищем специалиста, который сделает её проще, удобнее и стабильнее. чем предстоит заниматься: на первых порах – рефакторингом системы, чтобы добавлять новые метрики, тесты и типы экспериментов стало легко и удобно развитием внутреннего фреймворка и оптимизацией расчетов добавлением новых функций, связанных с проверкой качества продуктовых метрик интерактивной визуализацией данных — у нас есть список желанных графиков, которые помогли бы принимать решения лучше сделать так, чтобы любой аналитик мог добавить новый вид статистического теста в систему. некоторые тесты требуют разного подхода к агрегации данных для последующего быстрого расчета — надо будет помочь аналитикам оптимизировать эти расчёты. ux оптимизацией системы в целом — сделать так, чтобы каждому, кто связан с продуктом, было приятно и понятно работать с abt-системой кандидат мечты: знает python, flask и sql (presto, postgres), а также умеет разбирать и улучшать чужой код умеет в фронтенд фреймворки (стандарт в компании — react). опыт внедрения js визуализаций (d3, plotly, vega) будет особенно полезен (сейчас у нас jinja темплейты для графиков в plotly и таблиц datatable) имеет представление о том, что такое а/б-тесты и для чего они нужны. не обязательно знать формулы из математической статистики, но важно быть знакомым с процессом проверки продуктовых гипотез через а/б-тест. обладает опытом рефакторинга существующей кодовой базы. 30% времени разработчика мы выделяем на возврат технического долга будет полезен опыт работы в команде с аналитиками, поскольку многие задачи требуют совместной работы и погружения в контекст, связанный с математической статистикой. что мы предлагаем: ​​​возможность выбора места работы: удаленно или из офиса гибкий график рабочего дня оформление в соответствии с тк рф, «белая» заработная плата в установленные даты корпоративное дмс после завершения испытательного срока. решаем вопросы со здоровьем быстро и удобно возможность профессионального развития, обучение за счет компании, участие в специализированных конференциях

Адрес

Москва

Похожие вакансии

компания "headhunter" почти все продуктовые изменения в hh.ru проходят через строгую систему экспериментов: ни одно не выходит на пользователей, если ...
Партнерские Вакансии
Москва

Новости

Смотрите также вакансии