我使用 Rouge 指标来评估提取摘要性能。
我使用的数据集是 Kaggle 上的 BBC 新闻数据集。要使用 Rouge 指标,必须有一个参考摘要(人工)和一个系统摘要。数据集中有一个参考摘要,但我想自己创建一个参考摘要。创建此参考摘要时,我是否需要阅读文本并根据我记得的内容创建摘要(可能包括新词,例如抽象摘要),还是需要创建文本中句子的提取摘要?
我使用 Rouge 指标来评估提取摘要性能。
我使用的数据集是 Kaggle 上的 BBC 新闻数据集。要使用 Rouge 指标,必须有一个参考摘要(人工)和一个系统摘要。数据集中有一个参考摘要,但我想自己创建一个参考摘要。创建此参考摘要时,我是否需要阅读文本并根据我记得的内容创建摘要(可能包括新词,例如抽象摘要),还是需要创建文本中句子的提取摘要?