以下是一些常见的视频总结的 AI 工具:
总结一下,整体看下来,Pika、Pixverse、Runway三家各有优劣,综合能力差距不算太大。Pika对于奇幻感比较强的画面把控是四家里最好的,会比较自然,但真实环境的画面比较容易糊,Pika更新的唇形同步功能虽然没有太引发热议,也是一个要不断抽卡的功能,但嘴形同步集成到平台上实际上是非常便捷的;Pixverse在高清化方面是四家里比较优势的,以及对于一些偏风景和纪录的、有特定物体移动的画面会非常友好,Pika和Runway在测试风景那里的时候,差点垮了,但有一个问题就是生成的视频有点帧率问题,导致处理到人物的时候,会有种慢速播放的感觉,容易出戏;Runway在真实影像方面质感是最好的,战争片全景的镜头处理得最好,以及Runway的控件确实目前体验感也比较好,但Runway就是特别爱变色,光影非常不稳定;SVD整体真的略拉垮……唯一能打的就是在风景片的测试,那条测试他是跑得最好的,其他方面就真的还很一般……我在做视频的时候,其实是会根据不同工具对画面的处理能力进行组合使用。举个栗子:Pixverse擅长物体滑行运动,我们就会用Pixverse生成,但这个视频里前面有一部分的飞机变形了,我们就会把Pixverse里生成的视频再放到Pika里面去局部重绘。有手部特殊运动的画面,我们就会用Runway来辅助完成。需要人物表情比较自然的画面我们就会用Pika来生成。总之就是,办法总比困难多,想尽一切招数,解决问题。这里本来可以对应介绍一些视听语言的书,但篇幅实在太长了目前,下次再推荐!第四步,AI声音
除了聊天内容之外,我们还能让AI总结整理各种文章(文章不超过2w字,否则就超出token了)例如,我复制了我的一篇文章给它总结:打开后直接全选复制全文,然后粘贴发送给GPTs,它就开始总结了,很方便,GPT4它能识别出哪些部分属于重点内容。[heading3]2、B站视频[content]你可能会疑惑,GPT不是无法处理视频内容吗,这是怎么做到的?答案是视频字幕。我用这个视频举例:https://www.bilibili.com/video/BV1VL411U7MU/?spm_id_from=333.337.search-card.all.click&vd_source=e05ea46c768d112737bc19e721da8967打开这个视频,如果你能在视频栏下面有一个字幕按钮,说明这个视频作者已经上传了字幕或者后台适配了AI字幕。那我们把这些字幕弄下来,再发给AI执行内容总结任务,是不是就达到了总结视频的效果?是的,目前大部分用AI总结视频的工具/插件/应用都是这么干的。那接下来的卡点就是,怎么把字幕文字内容给提取出来,用语音转文字?不,效率太低了。像这种有字幕的视频,我们可以装一个油猴脚本:[Bilibili CC字幕工具](https://greasyfork.org/zh-CN/scripts/378513-bilibili-cc%E5%AD%97%E5%B9%95%E5%B7%A5%E5%85%B7)安装之后,刷新浏览器,点击字幕,你会看到多出一个“下载”按钮点击下载按钮,会弹出下面这个窗口,你可以选择多种字幕格式,带时间的或者不带时间的:接下来,还是老办法,将字文字内容全选复制发送给GPTs即可。当然,总结完视频内容之后你继续向AI提问更多细节内容或者与它探讨视频内容。
stablevideo.com开放公测!!群友实测案例目前市面上非常优秀的AI视频工具,只有几家都试过之后才知道各家的擅长。(因为最近在搞离谱村项目,把所有图生视频工具都用了个遍,能感受到每个产品背后差别)先看卡兹克的教程介绍:https://mp.weixin.qq.com/s/YGEnIzfYA3xGpT9_qh56RA再看看zho总结的官方网站的案例[heading3]现在还能白嫖[content]当大家都沉浸在Sora的惊艳中时,昨天(2.21)SVD1.1官网正式开放了公测!快去玩!除了每日150个赠送积分外,还新增了积分购买选项,目前提供两种积分包(积分永久有效):500积分/$10,约50段视频3000积分/$50,约300段视频期待各位的大作!另外之前emad提到过SVD本身是基于2.1模型的然后也说到与sora差距是gpt2和3的样子应该是未来估计会有基于SDXL的视频模型,他也说到过或许需要一些小微调模型来弥补差距[heading3]可以操作固定种子,步数,运动幅度[content][heading3]交互也很有意思,在生成的过程中,会给一些案例让你帮忙做标注[content]用了歸藏的截图示意