Настройки задачи

Вы можете регламентировать выполнение задачи разметчиками на вкладке Настройки.

Отображение и доступность

  • Название задачи — не отображается разметчикам.

  • Описание задачи — отображается разметчикам.

  • Приоритет задачи от 0 до 100 — настройте порядок отображения задач разметчикам. Задачи с высоким приоритетом отображаются раньше. Значение по умолчанию — 0.

Настройка заданий

  • Перекрытие — укажите, сколько разметчиков должны разметить каждое задание. По умолчанию — 1.

  • Время на разметку одного задания — установите лимит времени на выполнение одного задания. По умолчанию — 900 секунд.

  • Кнопка «Пропустить» — настройте возможность для разметчика пропускать задание, если он сомневается в ответе.

  • Стоимость задания — укажите стоимость задания в условных единицах, используя систему расчета оплаты разметки, принятую в вашей компании.

Контроль качества

  • Фильтрация разметчиков по навыку — добавьте фильтр с навыками, без которых разметчик не сможет приступить к задаче. Для этого нажмите Добавить фильтр. Далее выберите один или несколько навыков, а также укажите требуемый уровень, например, «Генерация видео ≤ 80» или «Блюда экзамен ≥ 14». Подробнее о навыках читайте в разделе Навыки.

  • Выдача контрольных и обучающих заданий — включите переключатель, чтобы разметчику иногда попадались контрольные и обучающие задания, которые влияют на уровень навыка.

  • Вероятность выдачи – укажите, с какой вероятностью разметчику попадется контрольное или обучающее задание вместо основного.

  • Навык, на который влияет качество ответов — выберите или создайте навык, значение которого будет меняться по результатам контрольных и обучающих заданий.

  • Отложенная приемка — включите переключатель, чтобы настроить ручную приемку результатов разметки.

  • Автоматическое принятие ответов — укажите, в течение скольких дней после отправки ответа нужно его проверить.

  • Порог качества для контрольных заданий — укажите минимальный показатель качества, при котором ответ на контрольное задание не отклоняется автоматически.

Дополнительно

  • Дедлайн — выберите дату, до которой вы планируете завершить разметку.

  • Бюджет — укажите количество условных единиц, которые вы планируете потратить на выполнение задачи.

  • Качество разметки — укажите, какой процент правильных ответов на контрольные и обучающие задания вы планируете получить. Формат — число от 0 до 1. Подробнее о расчете качества — в разделе Качество и согласованность.

  • Согласованность ответов — укажите, какую согласованность ответов разметчиков вы планируете получить. Формат — число от 0 до 1.