mechanicalturk - 在 Mechanical Turk 中点击显示顺序

Question

有谁知道它是否存在特定的顺序，根据该顺序将命中呈现给 Amazon Mechanical Turk 中的工人？是否可以控制显示顺序？

谢谢！

Answer 1

我假设您也是在AWS 开发人员论坛上提出这个问题的人。

艾萨克·尼科尔斯的回答是：

我不确定排序是否有名称，但我称之为“窗口随机”。在组中可用任务的特定子集中向工作人员显示随机 HIT。例如，如果您要将 100,000 个 HIT 加载到 Mechanical turk 中，则窗口可能是 500。因此，前 500 个可用 HIT 中的随机一个会显示给工作人员。它是随机的原因是你想最小化两个工人加载相同任务的机会，否则当一个人去接受它时，另一个工人在尝试接受它时会出错。它被“窗口化”到比所有可用 HIT 更小的数字的原因是增加了具有多个分配（用于多个批准策略）的 HIT 迟早会被多个工人处理的几率。如果土耳其人展示了 100 个中的任何一个，你已经加载了 000 个任务，每个 HIT 有 2 个任务，那么完成一个 HIT 需要很长时间。随机显示给工作人员的可用 HIT 窗口较小，它增加了具有多个任务的 HIT 更快完成的几率，因此客户将开始更快地获得结果。