xxxiu

KTO训练数据集报错

4

**Describe the bug** 我的kto格式的数据集是这样的  这是我的执行命令： #!/bin/bash source activate swift CUDA_VISIBLE_DEVICES=0 \ swift rlhf \ --rlhf_type kto \ --model_id_or_path /root/autodl-tmp/Qwen2-7B-Chat \ --model_type qwen2-7b-instruct \ --beta 0.1 \ --desirable_weight 1.0 \...