shining_love
shining_love
> > > > 最近在忙毕业，我先上传可以运行的代码 。 我还没上传损失函数和网络参数的变动，在论文发布后上传 好的，那期待尽快大佬可以给出
> No, it's just used to show the net works. what dataset have you used？I don't understand the reply "No, it's just used to show the net works."
> 训练集去哪弄啊？感觉真的应该开放一下，训练效果确实很好 他永远不会开放的。除非有比他更好的数据集开源。代码不值钱，最重要的就是数据
> > @YCG09 我使用自己生成的2000的小数据集(只包含汉字数字)来fine-tune 预训练模型，但是试了很多次训练的acc始终停留在0.23左右，loss～54，可以给一些建议吗？ > > fine-tune训练的acc上去了吗？ 我也有这个问题，有什么经验可以分享吗？ > > @YCG09 我使用自己生成的2000的小数据集(只包含汉字数字)来fine-tune 预训练模型，但是试了很多次训练的acc始终停留在0.23左右，loss～54，可以给一些建议吗？ > > fine-tune训练的acc上去了吗？ 我也有这个问题，有什么经验可以分享吗？ > > @YCG09 我使用自己生成的2000的小数据集(只包含汉字数字)来fine-tune 预训练模型，但是试了很多次训练的acc始终停留在0.23左右，loss～54，可以给一些建议吗？ > > fine-tune训练的acc上去了吗？ 我也有这个问题，有什么经验可以分享吗？ 你好，请问你解决这个问题了吗？我也遇到这个问题，头大
> 用訓練中文字同樣的方法，訓練數字，先試一下： > > dict 中只有 2\n 4\n > GenerateDataFromString --> random 10 個 characters 在一張圖中，e.g. > image 0: 2224244422 > image 1: 2424424442 , etc. > ... > image...
> 你确定加载了预训练模型吗？默认代码加载路径是没有的 大佬等你回复我早都解决了哈哈哈
> 第一个问题中的 bn层是densenet中的吗 是的。他的这个repo中densenet中有三处BN层，在测试的时候状态应该改成非训练状态
> 这个要看生成的样本质量如何 你好，我看你在众多issues中都提到了样本质量的问题，请问样本质量如何判断？什么是好质量的样本呢？
> @xxlxx1 我尝试了加大学习率和迭代次数，acc有升高，但还是很低，在0.4以下。我期望值是在0.8以上的，所以还在想办法。 你好，我也遇到了你这种问题，请问你怎么解决的？
> 可能是还没搞明白原理, finetune的效果真的很差............... 你好，你说的差是指什么？是微调时的训练精度低，还是其他什么情况？