Тестовое задание для сертификации
После заполнения Заявки на сертификацию вы получите на почту, указанную в анкете, подтверждение участия и два файла в формате TSV: список товаров (100 шт.) и список адресов и координат магазинов (1000 шт.).
Чтобы выполнить тестовое задание:
- Войдите в аккаунт заказчика. Используйте логин, который ранее вы указали в Заявке на сертификацию.
- Запустите несколько Customizable-проектов. Используйте данные из TSV-файлов.
- В качестве ответов получите не менее 30 уникальных фотографий с выделенными ценниками и текстовыми значениями стоимости товаров.Пример фото товара с выделенным ценником
- Отправьте результаты заданий в ответном письме на partners-toloka@yandex-team.ru. Приложите файл в формате TSV.
- Предоставьте доступ к вашим данным:
- Настройте общий доступ к папке на Яндекс Диске, в которой хранятся фотографии. Укажите
toloka-req-sup@yandex.ru
; - Разрешите доступ к своему аккаунту в Толоке. В поле Логин пользователя на Яндексе введите
toloka-req-sup
.
- Как оформить TSV-файл с результатами задания
-
TSV-файл должен содержать ссылки на фотографии товаров, координаты ценников товаров и цены товаров.
Пример TSV-файла
- Правила выполнения тестового задания
-
- Выполните задание за 48 часов. Отсчет времени начинается с момента подтверждения вашей анкеты и отправки вам исходных данных.
- Для обработки и хранения фотографий от исполнителей вы можете использовать подключенный к вашему аккаунту в Толоке Яндекс Диск.
- Расходы на тестовое задание (стоимость выполненных заданий в Толоке, комиссия и бонусы исполнителям) компенсируются: заказчики освобождаются от уплаты комиссии за использование Толоки в течение последующих 6 месяцев с момента получения сертификата и до момента, когда сумма комиссии, от уплаты которой заказчик освобожден, станет равна сумме, израсходованной на выполнение тестового задания.
Максимальная сумма компенсации — 20 долларов США. Компенсация расходов предназначена только тем заказчикам, которые успешно прошли сертификацию.
- Декомпозируйте тестовое задание с помощью краудсорсинга.
- Чтобы проверить задания, попросите других исполнителей оценить правильность полученных результатов или обработайте данные ответов с помощью скрипта.
- Используйте динамическое перекрытие (incremental relabeling, IRL).
- Отбирайте исполнителей с помощью цикла Обучение — экзамен — реабилитация.
- Общайтесь с исполнителями уважительно и конструктивно.
- Составляйте простые и понятные инструкции.
Критерии оценки тестового задания
- Задания оцениваются исходя из соблюдения требований к заданиям и рекомендаций.
- Данные должны быть собраны в нужном объеме (не менее 30 уникальных фотографий) и качественно обработаны: ценники на фотографиях выделены с максимальной точностью, указанная цена соответствует реальной.
- Оценивается техническая реализация проекта в Толоке: удобство шаблона, валидация и отсутствие технических ошибок.
- Необходимо соответствие показателям качества по основным типам заданий.
- Важно, чтобы задание было выполнено за 48 часов.
- Стоимость получения и обработки одной фотографии должна быть низкой.