Аналитик-разработчик систем оценки качества поиска

Чтобы обучать AI-модели, нужно собирать обучающие выборки, проводить бенчмарки и измерять качество данных. Наша команда помогает распределять исполнителей по проектам, оценивает их работу и качество разметки. Направление новое — так что вы сможете серьёзно повлиять на наши процессы и инструменты.
Какие задачи вас ждут:
Оценка качества разметки
Измерять качество финальной разметки и работы AI-тренеров, строить метрики, бенчмарки и системы оценки, которые влияют на обучение моделей и релевантность поисковой выдачи.
Аналитика качества исполнителей
Строить системы оценки и рейтинги исполнителей, анализировать их сильные стороны, зоны риска и динамику качества. Разрабатывать более точные подходы к распределению задач, чтобы повышать качество данных и эффективность разметки.
Развитие процессов и инструментов
Помогать развивать систему разметки и воронки обучения исполнителей. Находить возможности для автоматизации, делать процессы масштабируемыми и создавать аналитические инструменты, чтобы лучше управлять качеством данных.
Мы ждём, что вы:
Уверенно работаете с Python и SQL
Знаете матстат и тервер
Умеете структурировать требования и ожидания заказчиков
Готовы браться за новые задачи, для которых нет готового решения
Почему у нас хорошо:
С нами легко развиваться. Если для рабочих задач вам нужно подтянуть язык — организуем обучение и оплатим 50% стоимости. Это не все бонусы — полный список тут.
Откликайтесь на вакансию на нашем сайте