video - 训练神经网络检测情绪？

Question

是否有任何经过训练可以检测情绪的开源神经网络？

我想看看我是否可以使用一个来检测视频/音频剪辑和/或文本中的消极情绪。

Answer 1

你可以为音频或视频制作一个，但我不得不说我不相信它会特别有效。神经网络擅长模式识别。网络将自己调整到什么模式？“快乐”或“愤怒”的发音是什么？

Answer 2

这就是我想象的剪辑方式 - 将问题分成更小的问题：

1. 您可以专注于检查视频中的人是否在微笑。首先使用检测人脸的算法。然后，您创建这些面的几个随机（及时）样本。然后，您使用另一种算法（经过训练的神经网络）来检查他们是否以数字的形式微笑：检测到 n 个样本中的 p 个微笑。

2. 使用语音识别来检查他们是在笑还是在哭。

3. 检查点头（注意在某些国家是相反的方式，但你现在可以跳过这部分）

4. 检查剪辑是否响亮地开始并以这种方式结束。

一旦你识别出这 4 个（示例），你可以尝试在它们之上训练一个神经网络：

微笑，积极点头，大声开始 -> 积极

一个好的样本数据将是体育评论员宣布球队输赢。

实际上，当您不知道他们在说什么时，这一切都很好，当您想查看所有 youtube 视频时就是这种情况，但您不想学习世界上所有的语言。