问题标签 [crowdsourcing]

我有一个基于 NLP MCQ 的任务，我想将 Mechnical Turk 作为请求者。我看到，在所有 NLP 模板中，它们categories都是固定的（静态的），而我的数据以 json 格式排列，如下所示：

在我的情况下，categories必须是option_a，option_b等等。因此用户将阅读text_a然后选择四个选项之一。我尝试了不同的变体，categories但每次我得到错误。我想使用类似的东西，${text_a}因为这些是从我的数据中挑选出来的，而不是硬编码的。你能为这项任务推荐一个好的设计布局吗？

这个问题与沙盒环境有关。

在我们发布之前如何在 Toloka 中测试池？

控制任务的“最近要使用的值”是否可以设置为比当前池大小更大的值以包括旧池？

例如，我有 5 个控制任务和 100 个任务，并有混合设置 4 个任务和 1 个控制。当工人（又名 toloker）刚刚看到最后一个，而还有更多潜在的任务套件要处理时会发生什么？