chatglm2-6b lora微调是不是有问题

[Alwin4Zhang]

lora微调只有这2个文件，而且模型没有任何微调过的效果

python train_qlora.py --train_args_json chatGLM_6B_QLoRA.json --model_name_or_path /rainbow/zhangjunfeng/bert_models/pytorch/chatglm2-6b --train_data_path /rainbow/zhangjunfeng/ChatGLM-Efficient-Tuning/data/rb.jsonl --lora_rank 4 --lora_dropout 0.05 --compute_dtype fp32

python=3.9
peft==0.4.0
bitsandbytes==0.41.0
其他的按requirements.txt安装

[shuxueslpi]

正常训练完确实只有这两个文件，checkpoints里的文件会多一些。
所以你是不是训练的步数很少，连保存checkpoint的step都没有达到？

[Alwin4Zhang]

正常训练完确实只有这两个文件，checkpoints里的文件会多一些。 所以你是不是训练的步数很少，连保存checkpoint的step都没有达到？

确实是数据太少了导致没有checkpoints