cc2017111
cc2017111
感谢您十分及时的回复！ 我只是在原先的基础上做了一些改动，在配置文件train_ja2zh.yml中添加: default_langs: do_normalize_punctuations: true tokenizer1: mecab tokenizer2: jieba 在tokenize_each.sh中添加： elif [[ ${tokenizer} == "mecab" ]]; then process_cmd="${process_cmd} | python ${tokenize_script_dir}/mecab_lyf.py " 然后正常运行预处理脚本，在预处理与二值化阶段没有问题。在训练过程加载预训练模型时报错： Exception: Cannot load model parameters from checkpoint...
您好，我的fairseq是0.10.0，您说的意思是这个问题导致无法加载预训练模型么？
已解决，感谢您的回复！
请问一下您是如何解压下载的数据集？