Monitor fr-en training

Open kpu opened this issue 3 years ago • 1 comments

It's slowly crunching through forward translation on nanna

for i in /mnt/nanna0/nbogoych/data/data/fr-en/fr-en-prod/translated/corpus/file.*.ref; do f=$(dirname $i)/$(basename $i .ref).nbest; if [ ! -f $f ]; then echo $i; fi; done |wc

Mar 15 '22 22:03 kpu

Backtranslation failed:

germann@nanna:/raid0/nbogoych/data/data/fr-en/fr-en-prod$ zcat translated/mono.fr.gz | head -n3
tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu
tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu
tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu tu

due to fp16.

Mar 21 '22 11:03 ugermann