在我收到大量数据的假设场景中，并且通常在收到时按时间顺序排列，有没有办法向前或向后“播放”数据，从而按需重新创建新信息流？我知道，从简单的意义上说，我总是可以有一个脚本（无论输出什么都不重要），它以一个 for 循环开始，该循环接受任意数量的事件或观察并做某事，然后接受更多观察，更新以前的内容输出一个新的结果，依此类推。有没有比简单的 for 循环更可扩展的方法？
基本上，每当我研究这个主题时，我都会很快发现自己进入了高频交易的主题领域，特别是通过对历史数据进行回测的算法效率。虽然我的问题是在更广泛的意义上这样做，我们的观察不需要是股票/期权/未来价格点，但必须适用相同的原则。有没有人有这样的经验，了解如何将这样一个平台构建在一个更可扩展的级别上，而不仅仅是一个带有逻辑的 for 循环？另一个例子是健康数据/声明，随着时间的推移，随着越来越多的声明出现，人们可以前后看到发生了什么。