lqf0624

Results 3 issues of lqf0624

Where are files that

2 comment

关于prompt depth

您好，我在glm2上初步尝试了p-tuning v2 的方法，关于您论文中的消融实验部分，有提到prompt depth，但是在代码中没有找到在哪部分进行的，请问如何设置不同层的prompt微调呢？

accelerator.prepare() get OOM,but available in single GPU

1 comment

### System Info ```Shell - `Accelerate` version: 1.0.1 - Platform: Linux-5.4.0-169-generic-x86_64-with-glibc2.35 - `accelerate` bash location: /opt/conda/bin/accelerate - Python version: 3.10.14 - Numpy version: 1.26.4 - PyTorch version (GPU?): 2.3.0+cu118 (True)...