问题标签 [benchmarking]

您知道哪些机器学习基准测试存储库？

我的程序中的一些加载例程需要很长时间才能完成。我想要一个快速的小片段来检查函数执行所需的时间。小我的意思是“最好没有第 3 方库”。

也许像占用系统时间一样简单？

编辑：有问题的目标操作系统是 Windows。

我正在尝试编写一个我试图衡量其效率的脚本。我有一些问题：-

1. 对于小型应用程序，是否需要这种分析？还是我变得偏执？（假设大多数代码都相当高效/没有无限循环）
2. 我应该以什么为基准？我应该与什么比较？
3. 下面是我从 ab 得到的效率输出。这种方式是不是太离谱了？我设计这个应用程序的方向是错误的吗？有什么我应该注意的警告信号吗？

我正在使用 PHP 编写脚本。在进一步测试中，我还发现如果我从我的 PHP 脚本中注释 MySQL 连接部分，“失败的请求”会变为 0。怎么了？如何降低这种失败率？

谢谢你，亚历克

我们计划在网络本身非常慢的环境中安装 Subversion 存储库。以前在那里使用的 VCS 是 VSS，使用它是一场噩梦（不仅仅是因为它的“功能”）。

所以，我的问题是 Svnserve 和 apache 模块之间的选择。我知道由于无状态协议，apache 模块会变慢，但我不知道它所暗示的时间增加了多少。
是否有一些基准或规则表明两台服务器之间的平均速度差异？

您如何在 Java 中编写（和运行）正确的微基准测试？

我正在寻找一些代码示例和注释来说明要考虑的各种事情。

示例：基准测试应该测量时间/迭代还是迭代/时间，为什么？

相关：秒表基准测试是否可以接受？

我知道我必须使用：rdtsc。测量的函数是确定性的，但结果远非可重复（从运行到运行我得到 5% 的振荡）。可能的原因有：

• 上下文切换
• 缓存未命中

你知道其他原因吗？如何消除它们？

我正在尝试对 XenServer 与 ESX 进行公平比较，我想做的一个比较是多个 VM 的性能。有谁知道如何以公平的方式对 VM 性能进行基准测试？

在每台服务器上，我想运行固定数量的 XP/Vista VM（例如 8 个），并衡量每个服务器在负载下运行的速度。理想情况下，我想要对整个系统（CPU/内存/磁盘/网络）进行一些基准测试，而不仅仅是一个方面。

在我看来，这实际上是一件非常棘手的事情，要获得任何有意义的结果，因此将不胜感激任何建议！

我也有兴趣查看已发布的任何现有报告或比较（最好是独立的，而不是偏向供应商的！）

我正在尝试在线查找一些矩阵乘法/求逆基准。我的 C++ 实现目前可以在 38 秒内反转一个 100 x 100 矩阵，但与我发现的这个基准相比，我的实现的性能真的很糟糕。我不知道它是否是一个超级优化的东西，或者你是否真的可以在大约 0.11 秒内轻松地反转一个 200 x 200 矩阵，所以我正在寻找更多的基准来比较结果。大神有没有好的链接？

更新 我在我的乘法代码中发现了一个错误，它不会影响结果，但会导致无用的循环浪费。现在我的反转在 20 秒内执行。时间还很长，欢迎提出任何想法。

谢谢各位

我有一个在带有OpenSolaris/Glassfish堆栈的 Sun 硬件上运行的 J2EE Web 应用程序。我们正在开始我们的性能基准测试，为以后的可扩展性需求做准备。

任何指南/最佳实践都会非常有用..

我想对我们公司正在开发的网站进行基准测试。它将由多个 Web 和后端服务器组成。

为了能够正确模拟大量请求，我正在考虑使用我们的开发机器（大约 15 Xp/Vista）和一些备用 Red Hat 服务器作为基准测试客户端。

是否有任何工具可以让我将这些机器设置为从机/客户端，然后控制它们执行组合基准测试并获得汇总结果？

基准测试将包括模拟普通用户登录和浏览几页。