问题标签 [experimental-design]

我正在网页上运行 A/B 测试。用户在网页上没有经过身份验证，因此没有用户 ID 可以跟踪他们。在网页上，有指向 Android/iOS 应用商店的链接，用户可以在其中下载或打开应用。

用户下载并打开应用程序后，我想知道他们在网页上时最初在哪个实验组。我该怎么做？

Android 或 iOS 应用商店中有什么东西可以让我跟踪用户吗？

我正在 ztree 中基于 Billinger、Stieglitz 和 Schumacher 编写所谓的“外星人游戏”。但是，我正在努力将我的 NK 矩阵转换为 ztree。

是否有人对 ztree 中的“表加载器”功能有经验，可以帮助我了解如何转换我的 excel/txt 工作表和/或命令是什么？

已经提前感谢了！

背景：我正在尝试在涉及阻塞治疗分配的实验之前进行相当复杂的功率计算。我有上一次实验的数据。我在想：

1. 从先前数据中抽取样本并进行替换以生成 SAMPLESIZE 观测值
2. 实验方案中的阻断治疗分配
3. 假设特定的 EFFECTSIZE 生成预测结果
4. 生成估计、检验统计量、显着性

重复步骤 1-4 5000 次以估计实验功率，网格搜索 SAMPLESIZE 和 EFFECTSIZE 的值，绘制

我正在关注使用设置来执行此操作的小插曲；他们最小的例子是：paramtestboot=TRUE

但是，我无法弄清楚如何使其适应重新采样，以便每个复制具有比从中采样的数据更大（或更小）的样本量。

我正在设置一个关于精神病的实验，其中刺激物在屏幕上显示一段设定的时间（比如 0.5 秒），然后显示一个空白屏幕并注视。我正在使用 event.waitKeys() 来获取键盘输入。

我已经编写了以下代码。

我在这里遇到的问题是，如果在 0.5 的等待时间在第一个屏幕结束之前收到键盘输入，events.waitKeys() 不会注册这个键输入，仍然在第二个屏幕上等待用于键盘输入。仅当接收到第二个屏幕的键输入时，程序才会前进。

相反，我希望程序在屏幕 1 开始到屏幕 2 结束之间出现键盘输入时进入下一个刺激。也就是说，如果在屏幕 1 本身中接收到键盘输入（在 0.5 结束之前s)，我希望输入被注册并且程序继续到下一个刺激（通过在很短的时间内移动到屏幕 2，或者一起跳过屏幕 2）。我似乎无法弄清楚这是如何实现的。

我想使用文献中的一些现有设计并在 R 中对其进行分析。但是，到目前为止，所有包和功能都允许我创建一个新设计，这很棒，但我不知道如何输入预先存在的设计矩阵。

作为一个特定的例子，我想使用本文中的这种设计并在 R 中对其进行分析。

我尝试创建自己的列表，如下所示来模仿附表中的级别组合，但 FrF2 会覆盖我的列并创建新设计。我怎样才能防止这种情况并输入我自己的表格以便我可以分析和比较？

两组之间的主题实验：每组有一对 10 参与者。（玩家 1 和玩家 2）两组中的对子玩游戏，其中一个因素被操纵。假设：A组得分高于B组。

我可以使用带有随机拦截的混合建模作为玩家和团队作为拦截吗？

分析这个实验设计的好方法是什么？

我正在 Psychtoolbox 中做一个实验，我想做一个词干完成任务。因此，我将向我的参与者展示不完整的单词，例如“apple”“app”。我想把它写成'app _ _'。当我尝试处理我的代码时出现问题，我得到了一个词'app _ _ le'。但是，当输入任何字母时，我想让下划线消失。因此，如果有人对此有解决方案，我将不胜感激。

我使用的是 MATLAB 2016a，所以忽略功能对我不起作用。此外，当我使用 时replace，它会在下划线出现之前替换它。我尝试使用strrepand regexprep。但是，我不想在字母之间有任何空格。

为了将参与者输入回显到我正在使用的屏幕

我有一个执行

函数 foo() {...}

每个用户会话多次。我可以将 2 种替代算法实现为“foo”函数，我的目标是使用 A/B 测试根据执行延迟来评估它们。

每个用户会话调用 foo() 的次数是可变的，但不会超过 10000。每个值的范围在 [1 - 400] 毫秒之间。说延迟值是：

我的问题是选择获胜者的最佳指标是什么？

可能的选择

1. 每个会话的平均值，然后评估 cdf

2. 每个会话的中位数，然后评估 cdf

3. 还要别的吗 ？

我正在尝试用 3 个向量创建一个 data.table。其中向量 A Trial = [a,b,c...n]、向量 Brep = [1,2,3,...,n]和向量 Cplot = [r01, r02, r03,...,n]其中 r= "rep" （重复）

例子：

这些都不是完全正确的。

我希望 rep 将 plot 增加 100 x rep + plot #。

试用 (x)：rep 1，情节 1 -> 101

试用 (x)：rep 1，情节 2 -> 102

试用 (x)：rep 2，情节 1 -> 201

试用 (x)：rep 2，情节 2 -> 202

等等

我准备好了机器学习算法。我想在一个有70个城市的国家投入生产。但在将其推广到 70 个城市之前，我想在 1 个城市进行实验以评估它在生产中的性能。但是，我现在面临一个问题，如果我应该设置什么标准：1.时间（我可以在生产中保留多少个月）2.数据（在实时环境中我需要多少数据来评估算法性能）

任何人都可以在生产环境中指导这个机器学习实验吗？

编辑：我正在将机器学习应用于美国的价格优化。