ALLfu

Question about multi-gpu training

2

Thanks for sharing such an excellent work： Now I want to use eight GPUs for DDP training on a server. How should I use the script? I am a little...

some question about softmax’s output

1

大佬，应该是中国人吧，我就用中文了： 是这样，我用自己的数据训练了一下，然后前向推理时，我在softmax那个地方加了个日志，把输出写到本地看了一下，排序后发现最大的输出并不是“赢者通吃”的状态，甚至出现了有并列最大值的情况，这种状况下，使用argmax获得到的索引能直接作为类别使用么？ 可能是我的使用方式不当，希望大佬指点一下； 优秀的工作，感谢分享！