Документация Толоки

Первый проект

Обратите внимание

Документация на русском языке может быть устаревшей. Самые последние изменения доступны в документации на английском языке.

Начните знакомство с Толокой со следующих шагов:

  1. Создайте проект.
  2. Создайте пул.
  3. Загрузите задания в пул.
  4. Запустите пул и получите результаты.

Перед началом

Вы должны быть зарегистрированы в качестве заказчика.

Используйте Песочницу, чтобы создать и бесплатно протестировать ваш проект. Так вы сможете избежать ошибок и потраченных средств, если окажется, что ваше задание не работает.

Шаг 1. Создайте проект

В проекте вы определяете, как будет выглядеть задание у исполнителя.

  1. На вкладке Проекты выберите пресет проекта, который подходит для вашей задачи. Он уже содержит первоначальные настройки, шаблон интерфейса заданий и пример инструкции для исполнителей. При необходимости адаптируйте его для ваших задач.

    Чтобы настроить проект с нуля, выберите вариант Пустой шаблон.

  2. В разделе Общая информация укажите название проекта и краткое описание для исполнителей.

    Пресеты для наиболее популярных задач
    • Классификация изображений

      Используется, чтобы определить, к какой категории принадлежит изображение.

    • Релевантность поиска товаров

      Подходит для оценки соответствия товаров конкретным поисковым запросам.

    • Распознавание объектов и выделение областей

      Предназначен для выделения объектов на изображениях с целью обучения компьютерного зрения.

    • Опрос потребителей

      Позволяет собирать информацию для исследований.

    Выберите Пустой пресет, если вы не нашли подходящего варианта или хотите настроить проект с нуля. Инструкции см. в разделе Начальные настройки проекта.

  3. В разделе Общая информация укажите название проекта и краткое описание для исполнителей.

  4. В разделе Интерфейс задания:

    1. Выберите опцию Конструктор шаблонов.

    2. Отредактируйте интерфейс, чтобы настроить внешний вид заданий у исполнителей.

    3. Нажмите Показать спецификации, чтобы посмотреть сгенерированные поля входных и выходных данных.

    Подробнее см. в Справке конструктора шаблонов.

  5. В разделе Инструкция для исполнителей отредактируйте инструкцию, если необходимо.

  6. Нажмите кнопку Создать проект.

Проект создан. Подробнее о работе с ним см. в разделе Настройка проекта.

Шаг 2. Создайте пул

Пул — это набор заданий, которые будут выданы исполнителям одновременно.

  1. На странице проекта нажмите Создать новый пул.

  2. Укажите настройки пула:

    • Установите цену за страницу заданий и задайте перекрытие. Минимальная цена — 0,005 $.

    • Используйте фильтры, чтобы отобрать исполнителей, которые получат доступ к вашим заданиям.

    • Добавьте и настройте правила контроля качества, чтобы получать более точные ответы. Вы можете использовать готовый набор защиты с настройками по умолчанию. В разделе Контроль качества нажмите Добавить правило контроля качества и выберите подходящий набор.

  3. Нажмите кнопку Создать пул.

Шаг 3. Загрузите файл с заданиями

Задания — это данные, которые вы хотите отправить исполнителям для разметки. Каждое изображение или комментарий — это отдельное задание.

Чтобы загрузить файл с заданиями:

  1. Нажмите кнопку Загрузить данные.

  2. Скачайте шаблон, который подходит вашему типу задания:

    • Обычные — задания, ответы на которые вы не знаете и хотите получить их от исполнителей.

    • Контрольные — задания, на которые вы знаете правильные ответы. Используются, чтобы следить за качеством ответов исполнителей.

    • Обучающие — задания с правильными ответами и подсказками. Используются, чтобы научить исполнителей выполнять задания.

  3. Добавьте задания в шаблон. Для пробного пула достаточно 10–100 заданий.

  4. Прикрепите файл с заданиями.

    Нажмите кнопку Продолжить.

    Выберите способ распределения заданий по страницам: Умное смешивание, Указать вручную. Подробнее о них читайте на странице Способы распределения заданий.

    Нажмите кнопку Разделить задания на страницы.

  5. Нажмите кнопку Предпросмотр, чтобы убедиться, что ваши задания отображаются правильно.

  6. Используйте контрольные задания, чтобы повысить качество выполнения заданий исполнителями.

    Примечание

    Чтобы сэкономить время, вы можете воспользоваться опцией разметки контрольных заданий с помощью экспертов Толоки.

Шаг 4. Запустите пул и получите результаты

  1. Нажмите кнопку Запустить разметку. Пул станет доступным для исполнителей.

  2. Выполните ваши задания в качестве исполнителя.

  3. Отслеживайте статистику на страницах пула и проекта по мере выполнения заданий.

  4. Когда задания будут выполнены, получите результаты:

    • Скачайте TSV-файл с ответами исполнителей.

    • Если вы использовали перекрытие, запустите агрегацию, чтобы получить итоговые результаты.

    • Скачайте файлы, отправленные исполнителями при выполнении заданий.

Что дальше

  • После тестирования проекта в Песочнице, перенесите его в основную версию Толоки и запустите пул для разметки реальными исполнителями.

  • Посмотрите наши туториалы. Возможно, среди них уже есть тот, который подойдет для вашей задачи, и вам останется только подставить свои данные.

  • Если вам не подходит конструктор шаблонов, попробуйте редактор HTML/JS/CSS.

  • Ознакомьтесь с документацией API Толоки, чтобы узнать, как управлять проектами с помощью API.

  • Если у вас возникли вопросы или проблемы, см. раздел Решение проблем и поддержка.

См. также