0

我是拥抱脸的新手,正在编写电影生成脚本。到目前为止,我的代码看起来像这样

from transformers import GPT2Tokenizer, GPTNeoModel
from datasets import load_dataset
dataset = load_dataset('text',data_files={'train':['youtube_3/script.txt']})
tokenizer = GPT2Tokenizer.from_pretrained('EleutherAI/gpt-neo-1.3B')
model = GPTNeoModel.from_pretrained('EleutherAI/gpt-neo-1.3B')

但是我不断收到此错误

ValueError: Please pass `features` or at least one example when writing data 这与我定义标记器等的方式有什么关系。我将如何解决这个问题?任何帮助,将不胜感激。

4

0 回答 0