triplestore - 评估三重商店的推理性能的任何基准？

Question

有谁知道评估三重商店推理性能的基准？我正在使用 Stardog，它使用 Pellet 作为其推理引擎，并寻找一个基准来评估推理性能。

如果没有任何关于如何进行评估的建议，我们将不胜感激。

谢谢。

Answer 1

LUBM 可能是最标准的基准。LDBC 正在做一些推理基准的工作，但最后看起来，它并没有经过深思熟虑，仍处于早期阶段。

与所有基准测试一样，请小心过度依赖基准测试结果。真正告诉您的是，特定系统在该基准上表现出色。通常，它可能表示性能，也可能不是。除非您尝试在基准上构建一些东西，否则您应该考虑如何使用自己的数据和查询创建基准以反映您自己的实际用例。

您还应该注意不同推理实现的特征，特别是物化与查询重写的含义，并在解释结果时考虑到这一点。