Яндекс отдал народу тестирование выдачи и намерен платить онлайн-добровольцам (+ разъяснение Яндекса)

Развитие событий: Яндекс опроверг увольнение сотен турок ассесоров — они не числились в штате (26 мая 2015)

Яндекс отдал пользователям проверку качества поиска — в бета-версии начал работать сервис «Толока» (по словарю это форма деревенской взаимопомощи в России, Украине, Белоруссии, Латвии и Литве).

Обновлено: разъяснение Яндекса >>

Каждый зарегистрированный пользователь Яндекса получил доступ к почти судебному инструменту. При помощи «мудрости толпы» поисковик проверяет предположения алгоритма о соответствии тех или иных страниц запросу. Тест проходит с учётом текста запроса и географии — но другие виды тюнинга SERP добровольцы не проверяют.

Желающие могут поиграть в «Лигу безопасного интернета» и промаркировать порнографию.

Перед началом работы (или развлечения, чередование страниц и клики затягивают не хуже, чем любой другой time killer) пользователь соглашается на условия обслуживания американской дочки Яндекса в Пало-Альто и получает предложение, если что, коммуницировать офисом в Сан-Хосе, штат Калифорния.

Затем открываются списки заданий — они формируются динамически, какой-то работы может быть много, какая-то уже почти выполнена.

Roem-у предложили промаркировать «взрослый» контент или оценить качество поиска. Другим очевидцам попадались задания иных типов — например параллельная оценка: «какой объект лучше?». За каждый единичный тест, ответ на вопрос, Яндекс платит от 1 цента — максимальная ставка во время написания этого материала была 3 цента. Очевидцы утверждают, что за некоторые действия поисковик давал 5 центов.

Вознаграждение выплачивается на PayPal или Яндекс.Деньги в суммах от 10 долларов и выше — чтобы получить заработанные средства доброволец должен на латинице заполнить заявление в американское Налоговое управление (IRS). Сами американцы на данный момент лишены удовольствия работать с Толокой.

Обновлено 15:10 26.11.2014: Разъяснение Яндекса:

Яндекс.Толока — это бета-версия краудсорсинговой платформы для сбора пользовательских оценок, которую мы запустили около двух недель назад.

Большинство сервисов Яндекса построено на машинном обучении алгоритмов. Но чтобы алгоритмы обучались, им периодически нужны массивы человеческих оценок. Иногда оценки реальных пользователей важны и для принятия тех или иных решений по развитию продуктов Яндекса. Чтобы получать такие данные, у нас есть асессоры — специальные люди, которые помогают делать выборку для наших алгоритмов.

В последнее время количество запросов от сервисов Яндекса к асессорам растет, и мы решили опробовать краудсорсинговую модель — когда за денежное вознаграждение задания разного формата и содержания выполняют все желающие.

Яндекс — международная компания. Сервис был разработан в сотрудничестве специалистов из нескольких стран, и нам понадобится оценка качества поиска не только в России, но и в других странах присутствия. Поэтому решено было сделать проект на базе давно работающего юридического лица Яндекса в США.

Ассортимент доступных для выполнения заданий зависит от наших потребностей в текущий момент, поэтому изменяется с течением времени. Разные команды внутри Яндекса подключаются к использованию сервиса со своими задачами, созданными по одному из существующих шаблонов. Те типы заданий, которые вы упоминаете — это шаблоны, содержание которых может разниться. На запуске сервиса и было пять, с течением времени их количество может измениться.
Одновременно с тем, доступные типы заданий зависят от пользователя — не все задания доступны всем. Это зависит от таких факторов, как владение языками, качество выполнения предыдущих заданий и их типы и т. д.

Добавить 33 комментария

  • Ответить
    Skarui Skarui interactive agency

    Идея то хорошая, но тем не менее она частично украдена у Мэйл.Ру, где сами вебмастера выступают в роли асессоров и помечают релевантность. По моему на Сеоконференции 2014 такая информация проскачивала, не помню точно, но запомнилось.

  • Ответить

    Это яндекс придумал mturk или только частный случай? И даже я со своей русофобией не смог до конца осознать зачем заполнять W8-BEN (декларация нерезидента) для вывода денег. Если это американский сервис, то причем тут яндекс и почему нельзя пользоваться американцам, а если сервис русский — то причем тут IRS?

  • Ответить
    Альтер Эго

    > И даже я со своей русофобией не смог до конца осознать зачем заполнять W8-BEN (декларация нерезидента) для вывода денег. Чтобы IRS не удержал американский подоходный с платежа физлицу, очевидно. > Если это американский сервис, то причем тут яндекс и почему нельзя пользоваться американцам, а если сервис русский — то причем тут IRS? Есть мнение, что организовать в российском правовом поле сервис, предусматривающий микроплатежи физическим лицам, невозможно: придется либо их брать на работу, либо им становиться ИП и заключать договор подряда или что-то еще такое неподъемно-бумажно-оффлайновое делать. Поэтому контора американская и работает по их законам и «обычаям делового оборота», благо американские юрлица (и юристы) у яндекса уже давно есть. А пользователям нужно быть русскими потому, что для разметки релевантности нужно быть в культурном контексте хоть как-то. Почему амерканцам и вообще кому угодно другие задания не дают, в частности порно/непорно размечать нельзя — черт знает, думаю, что просто не подумали или интерфейс переводить поленились.

  • Ответить

    Старый добрый Google Human Evaluation Project. Только гугл сам приглашал людей и сам выгонял. Ещё у него были задания «отметить спам», «оценить качество перевода», «выбрать, какой перевод лучше», «расставить ответы по релевантности». Ну кстати, заработок в американских центах может стать очень привлекательным.

  • Ответить

    > Чтобы IRS не удержал американский подоходный с платежа физлицу, очевидно. Да зачем было изначально использовать американский доллар? Есть десятки различных валют, криптовалют, готовых систем микроплатежей и сотни вариантов провести это по документам. В российском правовом пространстве проблемы — используйте другие страны СНГ, Китай, Европу. Но нет — вам подавай доллар. Включаешь телевизор — США плохо, США фашисты. А какого черта вы сами их кормите?

  • Ответить
    Альтер Эго

    > В российском правовом пространстве проблемы — используйте другие страны СНГ, Китай, Европу. Подозреваю, там тоже почти везде будут такого же рода проблемы, как в России, не говоря уже о том, что пришлось бы откуда-то доставать местную юридическую экспертизу и т. д.; а в Штатах Яндекс давно присутствует. Ну и соответствующую формочку от местной налоговой заполнять пришлось бы в любом случае; подозреваю, что людей, способных сделать это с английской формочкой больше, чем с китайской или голландской. > Но нет — вам подавай доллар. Включаешь телевизор — США плохо, США фашисты. А какого черта вы сами их кормите? Вы меньше телевизор смотрите.

  • Ответить
    Альтер Эго

    кто сказал, что в США фашисты? фашисты в Израиле или на Украине, в США во власти их не наблюдается

  • Ответить

    >Подозреваю, там тоже почти везде будут такого же рода проблемы, как в России, не говоря уже о том, что пришлось бы откуда-то доставать местную юридическую экспертизу и т. д.; а в Штатах Яндекс давно присутствует. Ну и соответствующую формочку от местной налоговой заполнять пришлось бы в любом случае; подозреваю, что людей, способных сделать это с английской формочкой больше, чем с китайской или голландской. Яндекс присутствует во всех странах СНГ и в Европе. Какая разница чья формочка если в ней написано одно и тоже на английском? Кто сказал, что эта формочка вообще будет? Существуют десятки готовых сервисов микроплатежей, в которых можно использовать любую валюту, в том числе криптовалюту. С законодательством у них все уже давно утрясено. Почему яндекс не может заключить сделку с одним из таких сервисов: юношеский максимализм или просто руководство без мозгов? > Яндекс — международная компания. Но платить мы вам будем только в долларах США, в то время как настоящие международные компании платят вам в той валюте, которая вам больше нравится.

  • Ответить
    Альтер Эго

    >>Но платить мы вам будем только в долларах США, в то время как настоящие международные компании платят вам в той валюте, которая вам больше нравится. Не бойтесь, paypal вам сконвертирует по своему курсу.

  • Ответить

    > Не бойтесь, paypal вам сконвертирует по своему курсу. Для этого пользователю надо привязать карточку в рублях к paypal, подписать бумаги, что он не является резидентом США, зарегистрироваться в налоговой для оплаты налога 13% с полученных средств. Для «народного» сервиса «Толока» для стран СНГ это даже не смешно — это пздц. Вы думаете к вам толпой повалят пользователи — не смешите. Я здесь оказался по причине того, что один из моих знакомых у вас работает и скинул мне эту ерунду.

  • Ответить
    Альтер Эго

    > Яндекс присутствует во всех странах СНГ и в Европе. Какая разница чья формочка если в ней написано одно и тоже на английском? Кто сказал, что эта формочка вообще будет? Существуют десятки готовых сервисов микроплатежей, в которых можно использовать любую валюту, в том числе криптовалюту. С законодательством у них все уже давно утрясено. Почему яндекс не может заключить сделку с одним из таких сервисов: юношеский максимализм или просто руководство без мозгов? Простите, но вы идиот. Как вы представляете себе насквозь проаудированную, торгующуюся на насдаке компанию, которая платит криптовалютами каким угодно физлицам непонятно за что? Технических проблем доставить бабки нет, вопрос в том, как их по бухгалтерии провести. В РФ и СНГ это невозможно, в Европе — хз, но скорее проблематично, в Штатах — понятно как. В Китае Яндекса юридически нет.

  • Ответить

    А вот интересно…С точки зрения отечественной налоговой — платёжки от американского Яндекса — это же доход, правильно? Соответственно надо платить НДФЛ и т. д.Или я что-то упустил, не так понял?

  • Ответить

    > Чтобы IRS не удержал американский подоходный с платежа физлицу, очевидно. Какой-то промежуточный ответ по уровню троллинга. Я б ответил «чтобы форма была заполнена, очевидно!» Если вдруг вы случайно не поняли что я спрашивал, то представьте себе что адалт вебмастер из Boomfuck, OH решил на свой порносайт повесить Google Ads. И заработал на этом аж сто долларов. И тут гугл такой: а ну-ка, заполни-ка нам русскую форму NDFL-2! А вебмастер такой: WTF?!? А гугл такой: Ибо duhovnost, сын мой! > Есть мнение, что организовать в российском правовом поле сервис, предусматривающий микроплатежи физическим лицам, невозможно Постойте, я не очень в курсе товарных предложений Яндекса, но вроде бы он предлагает ровно то же самое что и Гугл, плюс-минус. У Яндекса нету аналога Google Ads for Domains или как их там? А если есть, то выплаты за клики тоже идут через IRS, W8-BEN и вот это всё?

  • Ответить

    > Как вы представляете себе насквозь проаудированную, торгующуюся на насдаке компанию, которая платит криптовалютами каким угодно физлицам непонятно за что? А какие проблемы? Я вот работаю в торгующейся (с недавних пор) на насдаке компании, и например в моей системе компенсации расходов, куда я заношу там всякие поездки по работе и прочее бухалово в ресторанах с «бизнес-партнерами» есть галочка «Pay with bitcoins». Я ее ни разу не ставил, это правда, у меня даже кошелька для этих койнов нет, но наверное ее бы не было, если бы какой-нибудь Сокс комплаенс нам бы это запрещал.

  • Ответить

    A «pay with Webmoney» есть? Наверное, нет. И, скорее всего, неспроста — биткоины выделены тем, что американские власти признали их средством платежа (не придирайтесь, не помню, как точно это сформулировано), другим электронным деньгам этот статус не положен.

  • Ответить
    Альтер Эго

    Видимо, это канал финансирования наших разведчиков на территории штатов: русский интерфейс чтоб ихние халявщики не примазывались, ну и заявление чтоб проблем с налоговой не было.

  • Ответить
    Альтер Эго

    > Если вдруг вы случайно не поняли что я спрашивал, то представьте себе что адалт вебмастер из Boomfuck, OH решил на свой порносайт повесить Google Ads. И заработал на этом аж сто долларов. И тут гугл такой: а ну-ка, заполни-ка нам русскую форму NDFL-2! А вебмастер такой: WTF?!? А гугл такой: Ибо duhovnost, сын мой! Если вебмастер российский, а договор у него с американским Google, Inc — то у него попросят заполнить штатовские налоговые формочки в процессе настройки выплат. Так не происходит потому, что русские вебмастеры работают то ли с Ирландией, то ли еще с какой прокладкой в дешевой юрисдикции; у некоторых из других стран — просят, см. https://support.google.com/adsense/answer/1322037?hl=ru#n2 например. Не W8, а 8233, но хрень редьки не слаще. Но это все слаборелевантно, потому что изначальная проблема toloka.yandex.com не только и не столько в области налогового законодательства, сколько трудового. Можно было бы, наверное, не просить W8-BEN, только пришлось бы 39% или сколько у них (вас?) там top bracket federal income tax отвалить IRS-у. Чего нельзя сделать, так это провести выплату из РФ в РФ от юрика физику с обоснованием «оплата услуг/работ», не заключая с этим физиком трудовой договор или договор подряда. > А какие проблемы? Проблема не с биткоинами, а с физиками-нерезидентами. Вы сможете в эту систему ввести платеж налом московскому бомбиле, без чека?

  • Ответить

    > Если вебмастер российский, а договор у него с американским Google, Inc Не понял, W8-BEN яндекс же вроде у всех просит. Причем тут «если»? Мой пример про американского вебмастера, который пользуется американским гуглом. А русский — русским яндексом, а ему ВНЕЗАПНО — американскую налоговую форму. > Можно было бы, наверное, не просить W8-BEN, только пришлось бы 39% или сколько у них (вас?) там top bracket federal income tax отвалить IRS-у. 30%. Это backup withholding, он к бракету как таковому не имеет отношения. Федеральный топовый бракет — что-то типа 25%, лень смотреть. > Чего нельзя сделать, так это провести выплату из РФ в РФ от юрика физику с обоснованием «оплата услуг/работ», не заключая с этим физиком трудовой договор или договор подряда Ну так вот см. выше, я там задал вопрос про Яндексовский аналог Google Ads. Как получают деньги русские адалт вебмастеры, вешающие русский аналог Google Ads на свои порносайты? Или у Яндекса нет такого продукта? > Вы сможете в эту систему ввести платеж налом московскому бомбиле, без чека? Да. Обоснование будет выглядеть примерно как «мамой клянус, слыш?». Неоднократно это проделывал, и по причине русских бомбил у которых «слушь, ну только что что этот шайтан-машын работал, а? никак нэ магу чек напэчатат сейчас» и по причине собственного расп…, ээээ, крайней занятости и невнимания к мелочам.

  • Ответить

    >>Ну так вот см. выше, я там задал вопрос про Яндексовский аналог Google Ads. Как получают деньги русские адалт вебмастеры, вешающие русский аналог Google Ads на свои порносайты? Или у Яндекса нет такого продукта? У адалт-вебмастеров минимальная выплата не $10 (а объем бумаги одинаковый на $10 и на $10k). Ну и работали они через посредников (ЦОПы), не знаю вот как сейчас. И там подоходный + фонды, дорого, с комиссией ЦОПа поди меньше половины получали. То есть схема выплат на мелких совсем юзеров масштабируется плохо. Прогнать через американского юрика — оказалось проще.

  • Ответить

    Я долго думал над адекватным комментарием на это, но после двух бутылок и индейки ничего цензурного в голову не пришло. Пусть будет «зато крымнаш».

  • Ответить
    Альтер Эго

    > Ну так вот см. выше, я там задал вопрос про Яндексовский аналог Google Ads. Как получают деньги русские адалт вебмастеры, вешающие русский аналог Google Ads на свои порносайты? Или у Яндекса нет такого продукта? Сколько раз я должен повторить слова «трудовое законодательство», чтобы их заметили? Вебмастеры получают деньги не за работу, а за использование их собственности, если грубо. На ЯД или в российский банк, по договору, заключенному в российском праве, в простой письменной форме, пересланному по бумажной Почте РФ: http://help.yandex.ru/partner/payments/with-individuals.xml. Это вообще совсем другая история, IRS в ней не участвует, только ФНС. Делать такое для разметчиков порнофоточек на toloka во-первых, нерентабельно, во-вторых, в РФ незаконно, они же явно выполняют работы по заказу фирмы, и их договор бы должен соответствовать Трудовому Кодексу. Поэтому _российский_ Яндекс ко всей этой истории формального отношения не имеет, оно хостится на .com и работает от имени американского юрлица. Потому что в Штатах, в отличие от РФ (и, насколько я ничего в этом не понимаю, большинства стран ЕС), можно воровать и убивать^W^W^W выдавать деньги за труд по договору в форме принятия оферты. В обмен на это удобство приходится иметь дело с IRS.

  • Ответить

    Я видел про трудовое законодательство, мой вопрос был в чем разница с точки зрения этого законодательства между размещением рекламы на своем сайте и размечанием порнухи на сайте яндекса. «использование их собственности» это как-то очень уж «грубо говоря». Но вот через прокладку в виде некоего ЦОПа это конечно становится понятнее.

  • Ответить

    я не понял, как Яндекс борется с автоматизацией работниками своего труда? Пользователь сидит далеко, использует свой компьютер, возможно ему подсказывают что-то разные классификаторы, выдача конкурентов. А возможно это и не пользователь вовсе, а так, профиль в браузере, если не хуже — один из 100500 агентов. Или просто деньги пилим, теперь можно сказать, что у Яндекса 100500 асессоров, а по скрытому факту — пара десятков талантливых автоматизаторов.