以下是一些将照片转动画的工具和相关信息:
网站:
Morph Studio:https://app.morphstudio.com/ ,还在内测。
Heygen:https://www.heygen.com/ ,数字人/对口型。
Kaiber:https://kaiber.ai/ 。
Moonvalley:https://moonvalley.ai/ 。
Mootion:https://discord.gg/AapmuVJqxx ,3d 人物动作转视频。
美图旗下:https://www.miraclevision.com/ 。
Neverends:https://neverends.life/create ,操作傻瓜。
SD:Animatediff SVD deforum ,自己部署。
Leiapix:https://www.leiapix.com/ ,可以把一张照片转动态。
Krea:https://www.krea.ai/ 。
Opusclip:https://www.opus.pro/ ,利用长视频剪成短视频。
Raskai:https://zh.rask.ai/ ,短视频素材直接翻译至多语种。
invideoAI:https://invideo.io/make/aivideogenerator/ ,输入想法>自动生成脚本和分镜描述>生成视频>人工二编>合成长视频。
descript:https://www.descript.com/?ref=feizhuke.com 。
veed.io:https://www.veed.io/ ,自动翻译自动字幕。
clipchamp:https://app.clipchamp.com/ 。
typeframes:https://www.revid.ai/?ref=aibot.cn 。
VIGGLE:
是一款创新的可控视频生成平台,基于 JST1 技术,允许用户自由创建和控制 3D 角色的动作。在游戏开发、动画制作及 VR/AR 等领域展现出巨大潜力。
体验地址:https://www.viggle.ai/ 。
官方 Discord:https://discord.gg/viggle 。
操作方式(以网页端举例):
Upload a character image of any size.上传任意尺寸的角色图像。
For better results,use a fullbody photo with a clean background.为了获得更好的效果,请使用背景干净的全身照片。
Image size图像大小(最大 10MB)。
The photo you upload must comply with您上传的照片必须符合社区规则。
全球 AI 电影马拉松大赛获奖短片《种子》创作思路分享:
图片转视频主要用到了其实整个视频还是比较顺利的。主要用到 runway 的笔刷,即梦的前后帧,Pixverse、pika 等,画面都不难出,难出的就再抽他个一百次就行。
主要说三个本次用到的转场画面:
360 人物环绕:在主角的梦境破碎,从年轻变老的这一段,尝试了很多方式去表达,最后决定人物环绕拍摄的方式去做。而技术的思路是先用 MJ 做一组不同角度的人物站立图,然后通过 comfyui 的首尾帧进行视频制作。
母亲的影子:当时的想法是这组图既能在播放时看到母亲的轮廓,又能在暂停时自己成为一张完整的图片。参考节气图的思路,在 SDXL 工作流中加入了两个 controlnet,先在 base 里控制构图,再在 refiner 里再控制母亲在画面中的强度。
上帝之手:先出了一张伸手的图,然后用 runway 跑相互接近,然后转视频序列帧后在 comfyui 里用 controlnet 控制构图,按顺序自动出图跑一晚上,最后再剪辑序列帧就好了。
2024-12-18