MuseTalk icon indicating copy to clipboard operation
MuseTalk copied to clipboard

人物嘴型模糊的问题

Open hour-note opened this issue 1 year ago • 6 comments

你好!在使用本项目的过程碰到人物嘴型模糊的问题,对此有以下几个疑问,望大佬能解答:

使用素材类型:1. 拍摄的素材;2. 可灵生成的视频素材;

问题描述:在使用拍摄的素材生成对口型视频的时候,基本不回出现嘴角模糊的情况,但使用可灵生成的视频素材进行视频推理(实时推理)的时候,会频繁出现嘴角模糊的情况

视频推理: image image

hour-note avatar Dec 20 '24 09:12 hour-note

I also met this issue. Maybe you can attemp to restore the face with other relative project.

foreverhell avatar Dec 24 '24 09:12 foreverhell

They suggested to use https://github.com/TencentARC/GFPGAN for superresolution. try this maybe on image sequences

anuj509 avatar Dec 30 '24 10:12 anuj509

They suggested to use https://github.com/TencentARC/GFPGAN for superresolution. try this maybe on image sequences

GFPGAN 这个项目都三四年前了

WangShaoyu1 avatar Jan 14 '25 16:01 WangShaoyu1

用gfpgan后, 清晰度会改善很多, 但是带来了很强烈的嘴唇抖动问题.

guang-yao avatar Jan 22 '25 07:01 guang-yao

你好!在使用本项目的过程碰到人物嘴型模糊的问题,对此有以下几个疑问,望大佬能解答:

使用素材类型:1. 拍摄的素材;2. 可灵生成的视频素材;

问题描述:在使用拍摄的素材生成对口型视频的时候,基本不回出现嘴角模糊的情况,但使用可灵生成的视频素材进行视频推理(实时推理)的时候,会频繁出现嘴角模糊的情况

视频推理: image image

请问方便分享一下你们用于推理的原视频吗?

czk32611 avatar Feb 06 '25 02:02 czk32611

你好!在使用本项目的过程碰到人物嘴型模糊的问题,对此有以下几个疑问,望大佬能解答: 使用素材类型:1. 拍摄的素材;2. 可灵生成的视频素材; 问题描述:在使用拍摄的素材生成对口型视频的时候,基本不回出现嘴角模糊的情况,但使用可灵生成的视频素材进行视频推理(实时推理)的时候,会频繁出现嘴角模糊的情况 视频推理: image image

请问方便分享一下你们用于推理的原视频吗?

你好!以下是推理的原视频,麻烦大佬来看下是啥问题: https://github.com/user-attachments/assets/3d91d016-241c-4acc-bf1b-b2d20c296755

hour-note avatar Feb 06 '25 04:02 hour-note