-2

这个函数中的“ih”和“ho”是什么。这是softmax激活函数我无法理解字符串检查的原因。

public double sim(double x, string layer)
    {
      // Determine max
      double max = double.MinValue;
      if (layer == "ih")
        max = (ihSum0 > ihSum1) ? ihSum0 : ihSum1;
      else if (layer == "ho")
        max = (hoSum0 > hoSum1) ? hoSum0 : hoSum1;

      // Compute scale
      double scale = 0.0;
      if (layer == "ih")
        scale = Math.Exp(ihSum0 - max) + Math.Exp(ihSum1 - max);
      else if (layer == "ho")
        scale = Math.Exp(hoSum0 - max ) + Math.Exp(hoSum1 - max);

      return Math.Exp(x - max) / scale;
    }
4

1 回答 1

0

这个功能并不难理解。您可能需要一些时间来了解该函数如何实现神经网络激活函数行为。

在神经网络中,您通常具有激活函数,它接收输入集并根据最大值(在输入中)决定哪个会触发该函数。

同样适用于您的情况。

似乎有两组输入(每个“组”称为“层”,因此有两层)代号为“ih”和“ho”。每个集合进一步有两个称为元素Sum0Sum1因此组合了四个输入:1.ihSum0ihSum1(对于ih层) 2.hoSum0hoSum1(对于ho层)

无论您的上下文中的ihholayer意味着什么,您都会更好地理解。但是该函数只是检查要使用哪个输入集(或“层”)(即“ih”或“ho”)来确定两个变量(maxscale)。

if (layer == "ih")
    max = (ihSum0 > ihSum1) ? ihSum0 : ihSum1;
else if (layer == "ho")
    max = (hoSum0 > hoSum1) ? hoSum0 : hoSum1;

最终(与 一起x)将用于确定函数的最终输出。

return Math.Exp(x - max) / scale;
于 2016-01-02T06:18:09.843 回答