keras - 使用卷积 LSTM 生成下一帧

Question

我一直在努力寻找展示卷积 LSTM 的优秀教程或示例。

我正在尝试构建一个模型，该模型将根据一系列先前的帧生成下一帧。TimeDistributed 和 ConvLSTM2D 的使用有点棘手。

任何人都可以分享例子吗？

Answer 1

使用此链接： https ://github.com/keras-team/keras/blob/master/examples/conv_lstm.py

在上面的链接中，他们使用 shape(n_samples=1200, n_frames=15, n_row_image=40, n_col_image=40, n_channels=1) 的视频来预测测试集中的另一个视频帧。他们使用了 ConvLSTM2D，这是一个很好的功能，可用于帧预测或任何其他类型的视频相关深度学习问题。