Find centralized, trusted content and collaborate around the technologies you use most.
Teams
Q&A for work
Connect and share knowledge within a single location that is structured and easy to search.
这些天我正在研究非凸优化,我想到了关于非凸优化在深度学习中的应用的问题。如何确定我们的目标函数是凸函数?谢谢
标准定义是如果 f(θx + (1 − θ)y) ≤ θf(x) + (1 − θ)f(y) 对于 0≤θ≤1 并且 x,y 的域也是凸的。
所以如果你能证明你的函数,你就会知道它是凸的。
在深度学习中,很难确定你的目标函数是非凸函数,这就是为什么初始化和超参数调整变得非常重要