PowerPaint icon indicating copy to clipboard operation
PowerPaint copied to clipboard

Finetune powerpaint v2 需要多少样本?

Open justStarG opened this issue 1 year ago • 8 comments

Finetune powerpaint v2 需要多少样本?能提示下样本的数量级吗?

justStarG avatar Sep 05 '24 01:09 justStarG

hi @thesby 我们训练 powerpaint-v2 用的数据量级和 v1是一样的,就是 laion + openimage

zengyh1900 avatar Sep 05 '24 03:09 zengyh1900

我只有1000张左右的图片,怎么微调 powerpaint v2 呢?在 brushnet 上弄个 lora 来训练吗?

justStarG avatar Sep 06 '24 23:09 justStarG

我只有1000张左右的图片,怎么微调 powerpaint v2 呢?在 brushnet 上弄个 lora 来训练吗?

请问你尝试过了吗,我试了7w样本全参数微调,效果比较差

Rook1e-li avatar Sep 10 '24 11:09 Rook1e-li

我只有1000张左右的图片,怎么微调 powerpaint v2 呢?在 brushnet 上弄个 lora 来训练吗?

请问你尝试过了吗,我试了7w样本全参数微调,效果比较差

没有,我只试了下 brushnet,好像还行

justStarG avatar Sep 16 '24 02:09 justStarG

我只有1000张左右的图片,怎么微调 powerpaint v2 呢?在 brushnet 上弄个 lora 来训练吗?

请问你尝试过了吗,我试了7w样本全参数微调,效果比较差

没有,我只试了下 brushnet,好像还行 如何实现微调,是将训练好的checkpoints/ppt-v2的作为初始的权重训练,还是单独训练brushnet?

huangshihong avatar Nov 29 '24 07:11 huangshihong

我只有1000张左右的图片,怎么微调 powerpaint v2 呢?在 brushnet 上弄个 lora 来训练吗?

请问你尝试过了吗,我试了7w样本全参数微调,效果比较差

没有,我只试了下 brushnet,好像还行 如何实现微调,是将训练好的checkpoints/ppt-v2的作为初始的权重训练,还是单独训练brushnet?

请问你后面有得到好的效果么 @huangshihong

ry555555 avatar Jan 07 '25 06:01 ry555555

我只有1000张左右的图片,怎么微调 powerpaint v2 呢?在 brushnet 上弄个 lora 来训练吗?

请问你尝试过了吗,我试了7w样本全参数微调,效果比较差

没有,我只试了下 brushnet,好像还行

@thesby 请问你微调brushnet用的是train_ppt2_bn.py这个脚本吗?我用这个脚本、加载了checkpoints/ppt-v2-1中的brushnet,训练的效果很差。

ry555555 avatar Jan 07 '25 06:01 ry555555

请问有后续的结果吗,是采用 lora 还是直接改 官方提供的 ckpt?

xiao10ma avatar May 26 '25 03:05 xiao10ma