Tianhui Ma
Tianhui Ma
使用重新生成和自带的都是近似随机的效果,所以请问您源文件这里是不是一致; 另外我重新clone文件之后,不进行games处理操作会得到: ValueError: File dataset/Games/Games.train.inter not exist 所以怀疑是源文件是否一致; torch 1.13.0 recbole 1.2.0
OrderedDict([('recall@1', 0.525), ('recall@5', 0.865), ('recall@10', 0.94), ('recall@20', 1.0), ('recall@50', 1.0), ('ndcg@1', 0.525), ('ndcg@5', 0.7071), ('ndcg@10', 0.7325), ('ndcg@20', 0.7474), ('ndcg@50', 0.7474) 直接解压确实获得这里,我对比了test文件的不同左边是我的,右边是您的:  请问源文件是对应的上面截图的两个吗? 另外就是我在运行 ’python data_process_amazon.py --dataset Games‘时 f1.write(str(user)+'\t'+' '.join([str(item)...
但是我使用 python sample_candidates.py -s random -d Games重新生成 random文件后,得到的结果仍然是: OrderedDict([('recall@1', 0.04), ('recall@5', 0.235), ('recall@10', 0.46), ('recall@20', 1.0), ('recall@50', 1.0), ('ndcg@1', 0.04), ('ndcg@5', 0.1323), ('ndcg@10', 0.2035), ('ndcg@20', 0.3383), ('ndcg@50', 0.3383)])
使用自己训练的模型得到:('ndcg@1', 0.515), ('ndcg@5', 0.6933), ('ndcg@10', 0.7224), ('ndcg@20', 0.7383), ('ndcg@50', 0.7383)]);感谢您的回复!因为对于这个模型不熟悉产生的错误:( 另外想咨询您,如果想使用auc 的value一类的评价指标,对应的yaml文件应该是怎么样的呢,我想用这类指标来测试表现,但对于recbole我看了文档较长时间但不确定具体实现,想问您有这个对应的yaml实现或者哪里进行修改吗
看到RecBole中有直接提供的auc指标,那个可以用吗
好的,我这边测试使用和论文中类似的prompt,但输出的格式比较多,另外也不能完全控制输出完全来自于候选集,这块请问处理上是在同一个parser下仍然能控制在1-5%吗