eval-scope icon indicating copy to clipboard operation
eval-scope copied to clipboard

opencompass数据集中safety板块数据集支持

Open Yunfeng-Wan opened this issue 1 year ago • 5 comments

我按照“评测后端”中的“opencompass”教程,使用链接下载的方式下载了数据集包并解压,在用python字典配置好配置文件并运行后,发现在“支持的数据集”中列出的许多数据集似乎暂时不支持调用,比如我比较感兴趣的opencompass数据集中“safety”板块中的五个数据集。

我通过邮件询问maoyunlin后得知目前暂不支持safety模块中的五个数据集,希望可以在未来的版本中支持opencompass中safety板块的数据集吗,非常感谢!

Yunfeng-Wan avatar Nov 12 '24 09:11 Yunfeng-Wan

需求收到,近期将支持上去。

wangxingjun778 avatar Nov 12 '24 11:11 wangxingjun778

感谢∩▂∩

Yunfeng-Wan avatar Nov 13 '24 01:11 Yunfeng-Wan

@wangxingjun778 还有长文本板块的数据集。

weibingo avatar Dec 30 '24 12:12 weibingo

预计在0.9大版本支持。

wangxingjun778 avatar Dec 30 '24 12:12 wangxingjun778

收到,非常感谢

On Mon, Dec 30, 2024 at 8:23 PM Xingjun.Wang @.***> wrote:

预计在0.9大版本支持。

— Reply to this email directly, view it on GitHub https://github.com/modelscope/evalscope/issues/197#issuecomment-2565416160, or unsubscribe https://github.com/notifications/unsubscribe-auth/A7GIKUNR5A6ZB6EMTOBIMY32IE3K5AVCNFSM6AAAAABRTTVSZ6VHI2DSMVQWIX3LMV43OSLTON2WKQ3PNVWWK3TUHMZDKNRVGQYTMMJWGA . You are receiving this because you authored the thread.Message ID: @.***>

Yunfeng-Wan avatar Jan 03 '25 05:01 Yunfeng-Wan