0

我不确定我是否正确理解 tf.metrics 和 tf.contrib.slim.metrics。

这是程序的一般流程:

# Setup of the neural network...

# Adding some metrics
dict_metrics[name] = compute_metric_and_update_op()

# Getting a list of all metrics and updates
names_to_values, names_to_updates = slim.metrics.aggregate_metric_map(dict_metrics)

# Calling tf.slim evaluate
slim.evaluation.evaluation_loop(eval_op=list(names_to_updates.values()), ...)

假设我想计算准确性。我有两个选择:a)计算所有批次中所有图像中所有像素的精度 b)计算一个图像中所有像素的精度,并取所有批次中所有图像的所有精度的平均值。

对于 a) 版本,这就是我要写的:

name = "slim/accuracy_metric"
dict_metrics[name] = slim.metrics.streaming_accuracy(
    labels, predictions, weights=weights, name=name)

这应该相当于:

name = "accuracy_metric"
accuracy, update_op = tf.metrics.accuracy(
    labels, predictions, weights=weights, name=name)
dict_metrics[name] = (accuracy, update_op)

此外,添加这一行应该没有意义甚至是错误的

dict_metrics["stream/" + name] = slim.metrics.streaming_mean(accuracy)

因为我从 tf.metrics.accuracy 获得的准确度已经通过 update_op 对所有批次进行了计算。正确的?

如果我选择选项 b),我可以达到这样的效果:

accuracy = my_own_compute_accuracy(labels, predictions)
dict_metrics["stream/accuracy_own"] = \
    slim.metrics.streaming_mean(accuracy)

其中 my_own_compute_accuracy() 计算标签和预测张量的符号精度,但不返回任何更新操作。事实上,这个版本是计算单张图像还是单批次的准确率?基本上,如果我将批量大小设置为完整数据集的大小,那么该指标是否与 slim.metrics.streaming_accuracy 的输出相匹配?

最后,如果我两次添加相同的更新操作,它会被调用两次吗?

谢谢!

4

1 回答 1

0

是的,苗条的流媒体精度计算整个数据集的每批精度的平均值(如果你只做一个时期)。

对于您的准确性功能,它取决于您如何实现它。

于 2017-08-15T21:03:31.483 回答