kk

关于3b模型在MME上精度结果不一致问题

1

我下载了3b模型跑了官方的MME测试集，使用prompt为官方的默认prompt，算出来的分数为1378.67，和给出的1452差别较大。请问是测试结果使用的prompt不一致导致的吗？

result is different from 0.9.0 and 0.10.0，and speed has decreased when update version

1

### System Info CPU X86 GPU A100 OS Redhat Driver 535.154.05 ### Who can help? _No response_ ### Information - [X] The official example scripts - [ ] My own...