HAT icon indicating copy to clipboard operation
HAT copied to clipboard

强制切片推理会导致模型误判景深

Open bfloat16 opened this issue 1 year ago • 1 comments

感谢作者开源的HAT,在动漫数据集上面进行训练取得了非常好的效果。 目前遇到的问题是:显存不足需要强制切片推理,并且图片前后景有虚化,人物应该是清晰的场景很容易误判景深(如下图绿色框所示): raw 4x 是否有可能能把全局的信息同步给每个tile,以此来纠正模型超分每个tile的行为?(尝试过”滑窗“等切片策略,但依然不能根除bad case)

bfloat16 avatar Sep 22 '24 06:09 bfloat16

引入全图信息作为condition和一些具有全局degradation的pair数据进行训练理论上是应该可以解决的。Tuning-free的方法感觉应该不太行。

chxy95 avatar Sep 22 '24 10:09 chxy95