以下是一些可以生成分镜和故事板的 AI 工具及相关信息:
在现阶段的应用场景方面:
使用人工智能为2D或3D角色制作动画。输入文字,或打开相机并表演。无需再为3D角色进行绑定。生成3D资产,只需输入文字或上传图像。我们将其转换为3D。控制3D场景中的每个元素。前5000名注册用户可享受1个月的Playhouse独立计划[heading3]Playbook[content]Playbook是一个基于扩散的3D场景引擎,利用ComfyUI进行图像和视频生成。Playbook基于网络的工具+Blender插件300渲染积分[heading3]Tripo[content]Tripo AI是由VAST推出的生成式3D模型,可以在8秒内生成带纹理的3D网格模型,在2分钟内生成详细模型。此外,Tripo还开发了自动绑定、动画和风格化功能,以使生成的模型更易于在流程中使用。Tripo API与ComfyUI集成良好,可实现迭代和可控流程。Tripo AI还拥有一个热门的3D创作者/开发者社区。Tripo的最终目标是在即将到来的3D时代让每个人都成为超级创作者。1个月的Tripo专业订阅[heading3]剧本创作[heading3]SAGA[content]SAGA是第一款也是最好的剧本创作和故事板应用程序,由针对电影输出而精心调整的最新和最强大的生成式人工智能模型提供支持,包括GPT-4、Claude 3.5和Luma Dream Machine。具有精心开发的故事、引人入胜的角色和精心策划的摄影的人工智能短片甚至音乐视频在比赛中表现更好。SAGA为您提供最佳创意,让您在一个地方完成所有操作,无需购买一系列人工智能工具以及像Final Draft或Storyboarder这样的应用程序来将其整合在一起。1个月的Saga高级订阅
文本能力:[heading3]测试:小七姐同样的提示词,理解能力更强[content][GPT4o的一些文本生成任务测试(连夜)](https://waytoagi.feishu.cn/wiki/Y3Aawxm4Piynr2kNjXOcJpnDnld?fromScene=spaceOverview)"[heading3]测试:AJ一次性出10个分镜,速度极快[content][heading3]测试:猫叔,做了张图,可惜中文还是画不出来[content][heading3]测试:盖茨比,复现了官方案例,创建手写英文插图诗[content][heading3]测试:CT[content]来一张桌面首图镇楼,GPT-4o和桌面版应用发布[heading4]测试3D object Synthesis[content]画一个雕刻3D的形象。结论:质感很好,但是字母细节错了。[heading4]测试多模态,讲个故事,生成剧本,生成分镜图[content]讲个鬼故事并画出分镜[RPReplay_Final1715662704.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/M9AybXeOjojj9Ix3ZjHczXGYntf?allow_redirect=1)[heading4]测试photo of caricature[content]输入从网上找到的一张图对这张照片的描述作为输入生成动画的prompt除了护肤产品画得多了一点,没毛病。[heading4]测试Peotic typography with iterative editing 1[content]写了一个给waytoagi的诗❤️结果就一言难尽,看起来还是不能让他写字[heading4]测试Variable binding-cube stacking[content]prompt,想让它生成一个堆叠的openai字母。实际效果不太理想。结果没有生成正确
在盘点完全部产品后,我感受到AI视频产品目前面向的主要受众群体有:(1)专业创作者(艺术家、影视人等):AI生成能够为作品赋予独特风格和想象力,为创作者提供灵感,配合高超的剪辑技巧和叙事能力,便可以制作出超乎想象的效果。低成本动捕更是能够大幅降低后期制作的门槛和成本,自动识别背景生成绿幕、视频主体跟随运动等能够辅助视频编辑,为后期制作增加更多空间。目前该应用主要集中在音乐MV、短篇电影、动漫等方向。一些AI视频平台也积极寻求创意合作,为创作者提供免费支持。@valleeduhamel使用现有的素材、Gen-1和大量合成创作了新电影《After Light》的过程分享Ammaar Reshi的团队使用Stable WarpFusion+Davinci Resolve制作完整的动漫剧情,制作过程分享(2)自媒体、非专业创作者:这部分人群通常有着非常具体且明确的视频剪辑痛点。a.比如科技、财经、资讯类重脚本内容的视频在制作时需花费大量时间寻找视频素材、还需注意视频版权问题。一些产品(Invideo AI、Pictory)已经在发力脚本生成分镜、视频,帮助创作者降低视频素材制作门槛。Gamma AI已经实现了文章高效转PPT的能力,若能结合Synthesia、HeyGen AI、D-ID等产品的Avatar、语音生成能力也可快速转化为视频内容。b.不同平台适合不同内容形式,创作者想要将同一个素材在不同平台分发就意味着制作成本的升高。而OpusClip提供的长视频转短视频致力于解决这一痛点。(3)企业客户:对于没有足够视频制作资金的小企业、非盈利机构来说,AI视频生成可以为其大幅缩减成本。