问题标签 [flow-project]

在论文“Flow Architecture and Benchmarking for Reinforcement Learning in Traffic Control”中，研究人员可以在 Flow 中添加自动驾驶车辆，而我查看 RLController 中的源代码却一无所获。我们如何在 Flow Project 中添加自动驾驶汽车？谢谢！

我正在尝试将红绿灯和一辆“rl”车辆添加到 FigureEightNetwork，让我感到困惑的是我找不到“rl”车辆在哪里获得红绿灯状态。

根据教程 1 和 10，我在 Ray 和 IDMController 中使用“DDPG”算法，但我没有找到他们在哪里获得红绿灯状态。

但是模拟显示他们可以识别红绿灯并正确采取行动，我很震惊，无法理解。“人类”和“rl”车辆如何获得红绿灯状态，然后根据它们采取行动？

当我尝试添加自己的网络时，我总是发现 ValueError :'Observation outside expected value range'。同样在教程08中，当我用其他网络（例如HighwayNetwork或其他）替换RingNetwork时，总是出现ValueError：'Observation outside expected value range'。我不知道如何解决它。

错误：无法安装 flow==0.5.0.dev0 和 ray==0.8.0，因为这些软件包版本具有冲突的依赖项。

造成冲突的原因是：flow 0.5.0.dev0 依赖redis~=2.10.6 ray 0.8.0 依赖redis>=3.3.2

要解决此问题，您可以尝试：

1. 放宽您指定的软件包版本范围
2. 删除包版本以允许 pip 尝试解决依赖冲突

在此处输入图像描述 在此处输入图像描述

当我运行 flow/envs/ring/lane_change_accel 时，出现错误：

我不知道代码是什么（

) 表示，因为 non_lane_sharing_veh 看起来不像整数。有人告诉我出了什么问题，我认为代码不正确

当我添加许多车辆时，会产生值错误，特别是当我使用除 RingNetwork 之外的网络时。有时，当我的车辆数量不太多，网络长度较长时，不会产生错误。我不知道错误在哪里产生。我应该修改什么代码以避免错误重现。谁能给我一些建议？

我们的场景中就有这样一个问题，如下图所示。经过A点的车流可以选择直行或者右转，但不知道为什么，我们的车流只会右转，不会直行。这个需要在哪里设置？非常感谢您的关注，如果您能帮我解决这个问题，将不胜感激。 在此处输入图像描述

我已经在几个级别上测试了 ADDITIONAL_NET_PARAMS、specify_edges、specify_types add width:4，但它们都没有奏效。这个问题困扰我很久了。期待你的答复。先感谢您。 在此处输入图像描述

在遵循 Flow 项目的本地安装步骤时遇到以下错误。

尝试将依赖项更新为ray==0.8.6. 但后来得到了这个：

然后删除版本以仅保留ray在requirements.txt. 尽管如此，安装还是不成功。

尝试使用 Conda 在 Windows 10 设备上安装4.10.0

这里有什么问题？

我已经通过不同的奖励函数训练了许多集，包括加速度的倒数，但是代理的加速度总是像这样抖动

有谁知道如何解决这个问题？如果您能提供帮助，我将不胜感激。