生成数字人的效果因使用的工具和方法而异。以下是一些常见的情况:
在剪映中生成数字人:
打开“数字人”选项,选择免费且适合的形象,如“婉婉青春”,软件会播放其声音,可判断是否需要,点击“添加数字人”将其添加到视频中,剪映会根据提供的内容生成对应音视频并添加到轨道中。左下角会提示渲染完成时间,可点击预览按钮查看效果。
腾讯的 MimicMotion 项目:
效果显著优于阿里,支持面部特征和唇形同步,不仅用于跳舞视频,也可应用于数字人。其优化包括基于置信度的姿态引导机制确保视频连贯流畅、基于姿态置信度的区域损失放大技术减少图像扭曲变形、创新的渐进式融合策略实现任意长度视频生成。项目地址:https://github.com/tencent/MimicMotion 节点地址:https://github.com/AIFSH/ComfyUIMimicMotion
此外,还有适合小白用户的开源数字人工具,如:
特点:一键安装包,无需配置环境,简单易用。
功能:生成数字人视频,支持语音合成和声音克隆,操作界面中英文可选。
系统兼容:支持 Windows、Linux、macOS。
模型支持:MuseTalk(文本到语音)、CosyVoice(语音克隆)。
使用步骤:下载 8G+3G 语音模型包,启动模型即可。
GitHub:
官网:
2025-01-21