Проект 1. Содержит ли изображение определенный объект
В этом Customizable-проекте вы опросите исполнителей на наличие дорожных знаков на фотографии.
Создайте проект
- В интерфейсе:
-
Выберите шаблон:
Откройте Толоку для заказчика.
Нажмите кнопку + Создать проект.
В открывшемся окне найдите шаблон Классификация изображений и нажмите кнопку Выбрать.
Заполните общую информацию:
В поле Название для исполнителей введите
Есть ли на фотографии дорожные знаки?
.В поле Описание для исполнителей введите
Посмотрите на картинку и скажите, есть ли на ней дорожные знаки.
Сохраните изменения.
Отредактируйте интерфейс задания в выбранном редакторе:
Интерфейс задания описывает, как будут расположены элементы задания.
В шаблоне уже настроена проверка. Исполнитель не сможет отправить задание, если не выберет вариант ответа.
Подробнее в Справке конструктора:
- шаблон Классификация изображений.
На панели Конфигурация замените строки кода с 19 по 28:
"label": "Какое у кота настроение?", "options": [ { "label": "Хорошее", "value": "ok" }, { "label": "Плохое", "value": "bad" },
Скопированона:
"label": "Есть ли на картинке дорожные знаки?", "options": [ { "label": "Да", "value": "ok" }, { "label": "Нет", "value": "bad" },
СкопированоЧтобы увидеть поля входных и выходных данных, нажмите Показать спецификации.
Поля входных данных создаются из кода на вкладке Пример входных данных.
Поля выходных данных создаются на основе того, в каких компонентах используются
data.output
, а также какие значения в нем разрешены.Подробнее о полях входных и выходных данных в Справке конструктора шаблона.Поле входных данных:
image
— ссылка для загрузки картинки.Измените тип данных на строку, чтобы использовать ссылки на свои файлы или загружать картинки, хранящиеся на Яндекс Диске.
- Поле выходных данных:
result
— строка, в которую будет записан ответ исполнителя.
Что такое входные и выходные данные?Входные данные — типы объектов, которые будут подаваться исполнителю для выполнения задания. Например, текст, картинка, географические координаты.
Выходные данные — типы объектов, которые будут получены после выполнения задания. Например, один из нескольких вариантов ответа, введенный текст или загруженный файл.
Если вы добавили в шаблон задания элементы интерфейса, поля в Спецификации данных создадутся для них автоматически.
В блоке Интерфейс задания отредактируйте блок HTML:
После строки с изображением введите вопрос:
<div>Есть ли на картинке <b>дорожные знаки</b>?<div>
Измените надписи на вариантах ответа: Хорошее → Да, Плохое → Нет:
{{img src=image width="100%" height="400px"}} <div>Есть ли на картинке <b>дорожные знаки</b>?<div> {{field type="radio" name="result" value="OK" label="Да" hotkey="1"}} {{field type="radio" name="result" value="BAD" label="Нет" hotkey="2"}} {{field type="radio" name="result" value="404" label="Ошибка загрузки" hotkey="3"}}
Скопировано
Блоки JS, CSS и Спецификация данных оставьте без изменений.
Подробнее о параметрах Спецификации читайте в разделе Входные и выходные данные.
Нажмите кнопку
, чтобы увидеть получившееся задание.
Примечание. В предварительном просмотре проекта отображается одно задание со стандартными данными. Количество заданий на странице вы сможете настроить далее.В открывшемся окне проверьте работу опций задания. И в правом нижнем углу нажмите кнопку Отправить.
Выйдите из режима предпросмотра. В нижнем левом углу нажмите кнопку Выйти → Выйти . Если при тестировании задания были ошибки — проверьте блоки кода, которые вы вводили.
Сохраните изменения.
В блоке Инструкция для исполнителей введите инструкцию и добавьте изображение.
- Текст инструкции:
Посмотрите на изображение и определите, есть ли на нем дорожные знаки? Если да, нажмите Да. Если нет, нажмите Нет. Например, на изображении есть дорожные знаки, поэтому правильный ответ Да.
Скопировано - Чтобы добавить изображение, нажмите кнопку
и укажите ссылку на изображение, которое вы хотите использовать в качестве примера.
Сохраните изменения.
- В правом верхнем углу нажмите кнопку Завершить
Подробнее о работе с проектом читайте в разделе Customizable-проект.
Создайте пул
Откройте страницу проекта с именем Есть ли на фотографии дорожные знаки?.
Нажмите кнопку Добавить пул.
Укажите Название пула.
(опционально) Добавьте Приватный комментарий. Эта информация доступна только вам.
В блоке Аудитория в разделе Исполнители отфильтруйте исполнителей по языку:
Нажмите Добавить фильтр.
Добавьте фильтры Регион по номеру телефона и Языки: выберите исполнителей из России, Украины, Казахстана и Беларуси, которые в своем профиле отметили знание русского языка.
Задания в пулах по умолчанию будут доступны для веб-версии Толоки и мобильного приложения. Если вы хотите изменить настройки по умолчанию и ограничить видимость задачи для любой из версий, добавьте фильтр Клиент и выберите нужное значение: Веб-версия Толоки или Мобильная Толока.
(опционально) В разделе Соотношение скорости и качества укажите желаемый уровень качества. Повышение уровня качества может снизить скорость выполнения заданий, так как пул будет доступен меньшему числу исполнителей. Подробнее об этом читайте в разделе Соотношение скорости и качества.
В блоке Цена в поле Цена за страницу заданий укажите цену. Например,
0.01
.В блоке Контроль качества задайте настройки контроля качества для пула:
Нажмите Добавить правило контроля качества.
Найдите в списке блок Правила и выберите пункт Контрольные задания.
Задайте правило для контрольного задания: если количество ответов на контрольные вопросы ≥ 3 и процент правильных ответов на контрольные вопросы < 60, то заблокировать исполнителя на проекте на 10 дней. В качестве причины укажите Контрольное задание.
Подробнее о контроле качества читайте в разделе Контроль качества.
В разделе Перекрытие задания в поле Количество исполнителей, которые должны выполнить каждое задание укажите
3
.В блоке Дополнительные настройки в поле Время на страницу заданий укажите
600
.Нажмите кнопку Создать пул.
Загрузите TSV-файл с заданиями
Подготовьте собственный файл с заданиями. Ознакомьтесь с примером в демонстрационном TSV-файле. В интерфейсе Толоки под названием пула есть ссылки на шаблоны TSV-файлов с обычными, контрольными и обучающими заданиями.
На странице пула нажмите кнопку Загрузить. В открывшемся окне также можно скачать пример TSV-файла по ссылке Пример загрузочного файла.
В открывшемся окне настройте параметры загрузки файла:
Выберите Умное смешивание.
В поле Основных заданий укажите
9
.В поле Обучающих заданий укажите
0
.В поле Контрольных заданий укажите
1
.Нажмите кнопку Загрузить.
В открывшемся окне выберите TSV-файл с заданиями для загрузки и нажмите кнопку Открыть.
В открывшемся окне проверьте количество заданий и нажмите кнопку Добавить.
Создайте контрольное задание:
Нажмите кнопку Разметить.
Примечание. Если вместо умного смешивания было выбрано другое, необходимо нажать кнопку Разметить. Если этой кнопки нет, удалите файл и загрузите заново.В открывшемся окне нажмите кнопку Создать контрольные.
В открывшемся окне в разделе Создать контрольное задание слева включите опцию result.
Выберите правильный ответ на вопрос.
Нажмите кнопку Сохранить и перейти к следующему.
Нажмите Есть ли на фотографии дорожные знаки?, чтобы выйти из режима разметки заданий.
Примечание.В небольших пулах контрольные задания должны составлять 10-20% от всех заданий. Включайте разные варианты правильных ответов в равных количествах. Посмотрите распределение ответов на странице Разметить задания на вкладке Контрольные.
Нажмите кнопку
, чтобы запустить пул.
Внимание.Поставленные задачи выполнят настоящие исполнители Толоки. Перепроверьте конфигурацию вашего проекта перед запуском пула.
Получите результаты
Рядом с кнопкой Скачать результаты нажмите кнопку
.
Выберите пункт списка Агрегация результатов по методу Дэвида — Скина. Подробнее об Агрегации результатов по методу Дэвида — Скина.
В открывшемся окне нажмите Да.
Наверху страницы нажмите Перейти к списку операций.
Примечание.Отслеживайте прогресс операции, периодически обновляя страницу. Агрегация занимает от 5 до 20 минут, в это время вы можете приступить к оформлению другого проекта.
Когда операция завершится, скачайте TSV-файл с результатами. Для этого в столбцеc Файлы нажмите Скачать.
Используйте TSV-файл с результатами во втором проекте.
Что дальше
- Создайте Проект 2 для выделения объектов.