1

如果是,如何?还有哪些可以通过使用线性激活函数来实现的简单应用示例。

4

2 回答 2

2

答案很简短:

如果您使用线性激活函数,那么您的神经网络并不比简单的感知器强(缺少隐藏层)。

换句话说,使用具有线性激活函数的隐藏层是没有意义的

于 2015-11-07T11:44:12.380 回答
1

XOR 不能线性分离。如果您在 2D 平面上打印函数的输出,并且您试图找到一种将其线性分离的方法,您将找不到。那是 NN 一开始的故障,直到他们找到了不同的激活方法,允许像 sigmoid 函数一样非线性地分离点。

a   b   a XOR b
1   1      0
0   1      1
1   0      1
0   0      0

异或图

激活功能

于 2015-11-07T11:44:18.937 回答