tensorflow - 在前馈过程中如何处理填充的0

Question

假设我有一个不同大小的输入列表，例如，有些是 [10,9,5] 的形状，有些是 [7,6,5]，我必须填充 0 以将它们以相同的形式输入张量流大小，比如 [10,9,5]，我需要在前向过程中进行矩阵乘法并添加偏差，这将在填充的 0 位置引入数字。所以我必须自己创建一个掩码矩阵来掩码它们？或者有没有从张量流更简单的方法？谢谢！

顺便说一句，我没有提供序列，也没有使用 rnn。所以我不能使用动态 rnn

Answer 1

我认为您可以使用注意机制将可变长度输入转换为某个固定长度的张量，然后再将它们输入前馈网络。