nlp - torch 中 build_vocab 的解释及其与预训练嵌入的关联

Question

有人可以解释一下什么是火炬中的 build_vocab，在线文档中不清楚吗？为什么我们需要它以及它与预训练嵌入的关系？

Answer 1

我想你在这里混淆pytorch了torchtext。在torchtext （为自然语言提供处理实用程序和流行数据集的包）中，您可以运行build_vocabaField来迭代数据集以构建词汇表。

也看看这里：
https ://torchtext.readthedocs.io/en/latest/data.html#torchtext.data.Field.build_vocab