Менеджер контроля качества разметки данных

Обязанности:

• Контроль качества и методология – разработка стандартов, чек-листов, инструкций;
• Проведение выборочных и полных проверок;
• Расчёт метрик качества (accuracy, inter-annotator agreement);
• Анализ корневых причин ошибок;
• Управление работой асессоров – распределение задач, контроль сроков, мониторинг производительности;
• Онбординг, обучение, фидбек;
• Создание системы наставничества;
• Сбор требований для разработки инструментов автоматизации качества;
• Коммуникация с командами – взаимодействие с ML-разработчиками по уточнению требований;
• Передача обратной связи от асессоров и QC в продукт/техническую команду

Требования:

• Опыт: Опыт в разметке данных / модерации / контроле качества от 2 лет, из них минимум 1 год в роли КК-менеджера или старшего разметчика с функциями контроля.

• Понимание устройства ботов: Интенты/намерения, сущности, контекст, лингвистический анализ текста (тональность, эмоциональная окраска).

• Умение создавать инструкции: Чек-листы, стандарты с нуля и адаптировать их под изменяющиеся требования ML.

• Инструменты: Excel / Google Таблицы (сводные, формулы, фильтрация)
  Уверенное владение ПК, офисными пакетами
  Опыт работы с платформами разметки (Label Studio, Toloka)
  Знание систем логирования (Kibana, Grafana)
  Баг-трекинг (Jira / YouTrack).

• Личные качества: Высокая внимательность к деталям, аналитический и системный подход, критическое мышление, письменная грамотность (без ошибок), ответственность, инициативность, гибкость.

• Технические условия для удалённой работы: ПК/ноутбук: 8 логических потоков (или 4–8 ядер), RAM 16 ГБ+ (лучше 32), SSD 512 ГБ+.
  ОС: Windows 10/11.
  Интернет: стабильный 50 Мбит/с+, предпочтительно проводное подключение.
  2 монитора (или ультраширокий) – для эффективной работы с дашбордами и разметкой.
  Гарнитура, веб-камера, возможность созвонов без фоновых помех.

Условия:

• Полностью удаленный формат работы;
• График 2/2 (с 09:00 до 21:00) по МСК (возможно рассмотрение графика 5/2);
• Официальное оформление по ТК с первого дня;

• «Белая» заработная плата;

• Карьерный рост и профессиональное обучение.