yoda_formatting_func函数解析(105)
函数生成器生成了一个格式化函数:yoda_formatting_func。我们来使用它对数据进行格式化:
formatted_seqs = yoda_formatting_func(dataset)
formatted_seqs[0]
输出
目前来看,格式处理得还不错。不过,我们还没完全完成 —— 仍需对其进行分词处理:
tokenizer_opt(formatted_seqs[0]
函数生成器生成了一个格式化函数:yoda_formatting_func。我们来使用它对数据进行格式化:
formatted_seqs = yoda_formatting_func(dataset)
formatted_seqs[0]
输出
目前来看,格式处理得还不错。不过,我们还没完全完成 —— 仍需对其进行分词处理:
tokenizer_opt(formatted_seqs[0]