Tsuyoshi

为什么多卡训练batch_size和单卡一样

2

DDP多卡训练模型 GPU_ids：[0,1] 两张2080显卡，batch size只能选择64，一张2080batch size也是选择64. 两张显卡的时候，如果将batch size选择为128，就会提示超出一倍的显存，好奇怪呀。

四分类任务，每个类别分别需要多大的数据量，才能达到较好的效果呀？

/usr/bin/ld: ../ncnn/lib/libncnn.a(bnll.cpp.o): in function `ncnn::BNLL::forward_inplace(ncnn::Mat&, ncnn::Option const&) const [clone ._omp_fn.0]': bnll.cpp:(.text+0x133): undefined reference to `__exp_finite' /usr/bin/ld: bnll.cpp:(.text+0x140): undefined reference to `__log_finite' /usr/bin/ld: bnll.cpp:(.text+0x150): undefined reference to `__exp_finite' /usr/bin/ld: bnll.cpp:(.text+0x15d): undefined...

or the device required