以下是关于文生视频的相关信息：
文字生成视频的 AI 产品有：
1. Pika：一款出色的文本生成视频 AI 工具，擅长动画制作，并支持视频编辑。
2. SVD：若熟悉 Stable Diffusion，可安装其最新插件，在图片基础上直接生成视频，这是由 Stability AI 开源的 video model。
3. Runway：老牌 AI 视频生成工具，提供实时涂抹修改视频的功能，但需收费。
4. Kaiber：视频转视频 AI，能够将原视频转换成各种风格的视频。
5. Sora：由 OpenAI 开发，可以生成长达 1 分钟以上的视频。
更多的文生视频的网站可以查看：
PixVerse V2 使用教程：
单个视频生成（8s）：8s 的视频生成需要花费 30Credits，5s 的视频生成需要花费 15Credits，且只能使用 PixVerse V2 模型，生成时请注意模型选择。目前仅支持 16:9 画面比例的视频生成。
文生视频：点击“Text to Video”，在“Model”选择“PixVerse V2”，视频时长。PixVerse V2 支持多风格的视频生成，您可以通过在提示词中加入“Anime”，“Realistic”等词语做到这点。
图生视频：点击“Image to Video”，在“Model”选择“PixVerse V2”。图生视频暂不支持“Magic Brush”、“Camera Motion”、“Motion Strength”等功能，如需要使用上述功能，请将模型切换至“PixVerse V1”。
Sora 的前世今生：从文生图到文生视频，其模型推理策略包括：
1. 文生视频：喂入 DiT 的就是文本 embedding+全噪声 patch。
2. 视频编辑：类似 SDEdit 的做法，在视频上加点噪声（不要搞成全是噪声），然后拿去逐步去噪。
3. 图生视频、视频反推、视频融合：喂入 DiT 的就是文本 embedding（可选）+特定帧用给定图片的 embedding+其他帧用全噪声 patch。
2024-10-15