xtuner icon indicating copy to clipboard operation
xtuner copied to clipboard

请问与 llamaFactory 的训练 TGS 对比时的具体实验条件

Open shihanmax opened this issue 1 year ago • 0 comments

你好,https://github.com/InternLM/xtuner/blob/docs/docs/zh_cn/acceleration/benchmark.rst 中,llama2-7B 32K 序列长度,LLamaFactory 和 Xtuner 分别使用的实验配置是什么样的呢?比如 deepspeed Zero等的配置?

谢谢

shihanmax avatar Sep 06 '24 06:09 shihanmax