nlp - 如何将地名词典或字典表示为 crf++ 中的特征？

Question

如何使用地名词典或词典作为CRF++中的功能？

详细说明：假设我想对人名进行 NER，并且我有一个包含常见人名的地名词典（或字典），我想使用这个地名词典作为 crf++ 的输入，我该怎么做？

我正在使用条件随机字段包 crf++ 来执行命名实体识别任务。我知道如何在 crf++ 中表示一些常用的特性。例如，如果我们想使用大写作为特征，我们可以在 crf 的特征模板中添加一个单独的列，指示单词是否大写。

Answer 1

您可以创建一个新功能来指示令牌是否在字典/地名词典中。只需检查集合成员并将 Gazeteer 功能设置为 1 或 0。