Navigate to WaytoAGI Wiki →
Home/Question List/Question Detail

ai变声

Answer

以下是关于 AI 变声的相关内容:

实时变声方面:

  • sovits 一键包:基于 sovits4.0 一键包 2.0,链接:https://share.weiyun.com/Afv83T5j 密码:INT-16 链接:https://pan.baidu.com/s/1Vx0BnpkmPIRziQtORFv-Jg?pwd=INT8 提取码:INT8 不需要安装 python 和 cuda,双击运行
  • Hugging face 可直接测试的模型:https://huggingface.co/spaces/akhaliq/Real-Time-Voice-Cloning
  • 达摩院的产品,可在线测试:https://modelscope.cn/studios/damo/personal_tts/summary
  • 软件界面,支持加载各种 VC(它使用各种语音转换 AI(VC,Voice Conversion)为客户进行实时语音转换):https://github.com/w-okada/voice-changer

语言声音 AI 模型方面:

  • 使用 AI 的实时语音转换器(Trainer):https://github.com/isletennos/MMVC_Trainer
  • AI 孙燕姿音色训练 svc:https://github.com/svc-develop-team/so-vits-svc
  • 基于检索的语音转换 WebUI,一基为 VITS 简单易用的语言转换器(语音转换器)框架:https://github.com/liujing04/Retrieval-based-Voice-Conversion-WebUI
  • 基于 DDSP(可微分数字信号处理)的实时端到端歌声转换系统:https://github.com/yxlllc/DDSP-SVC
  • 浅扩散模型(DDSP+Diff-SVC 重构版)

在 AI 春晚《西游不能停》创作过程中,关于 vocal 变声:

  • 效果不好的原因在于变声效果完全取决于训练素材。如 AI 孙燕姿效果好是因训练大量其歌曲,涵盖不同音域、曲风的干声,而收集的西游记素材有限。
  • 用到了一点 AI 变声技术,如来佛祖的声音等。
  • 尝试了两种办法但效果不满意,最终因 deadline 舍弃。第一种是训练声音模型直接变声,问题是 AI 味儿重,丢失原有强调;第二种是训练声音模型,自己录 rap 再变声,问题是需要专业配音技巧,超出能力范围。八戒和沙僧声音也有训练但文件丢失,效果不理想。
Content generated by AI large model, please carefully verify (powered by aily)

References

AI 语音合成应用方案

实时变声的sovits一键包!基于sovits4.0一键包2.0链接:https://share.weiyun.com/Afv83T5j密码:INT-16链接:https://pan.baidu.com/s/1Vx0BnpkmPIRziQtORFv-Jg?pwd=INT8提取码:INT8不需要安装python和cuda,双击运行Hugging face可以直接测试的模型https://huggingface.co/spaces/akhaliq/Real-Time-Voice-Cloning达摩院的产品,可以在线测试https://modelscope.cn/studios/damo/personal_tts/summary软件界面,支持加载各种VC(它使用各种语音转换AI(VC,Voice Conversion)为客户进行实时语音转换)https://github.com/w-okada/voice-changer[heading2]语言声音AI模型[content]使用AI的实时语音转换器(Trainer)https://github.com/isletennos/MMVC_TrainerAI孙燕姿音色训练svchttps://github.com/svc-develop-team/so-vits-svc基于检索的语音转换WebUI,一基为VITS简单易用的语言转换器(语音转换器)框架https://github.com/liujing04/Retrieval-based-Voice-Conversion-WebUI基于DDSP(可微分数字信号处理)的实时端到端歌声转换系统https://github.com/yxlllc/DDSP-SVC浅扩散模型(DDSP+Diff-SVC重构版)

金属文:AI春晚《西游不能停》创作过程分享

这里我想聊聊效果不好的原因,玩过sovits、RVC的小伙伴应该知道,变声效果完全取决于训练素材。去年AI孙燕姿之所以效果那么好,能惊艳到大家,也是因为训练了大量孙燕姿的歌曲,涵盖了不同音域、不同曲风的干声。而我收集的西游记素材全部来自86版电视剧,只有师徒四人说话的声音,没有他们唱歌或说唱的素材,所以就不太像。如果当时AI孙燕姿唱的是周杰伦的双节棍,大家也不会觉得很像,因为孙燕姿没有唱过类似的歌,不符合大家对孙燕姿歌声的固有印象。不过《西游不能停》还是用到了一点AI变声技术的,比如前面提到的修音,还有outro那里如来佛祖的声音。算是最后的倔强吧?。对了顺便提一句,如来这里的台词本来是想致敬“黑神话悟空”的,不过好像大家都没get到?[00_01_59-00_02_04.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/VenCbv11Zo7oyzxWn0FcZAw7nyc?allow_redirect=1)[392402545-1-208 00_10_44-00_11_07.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/FsNFbxMgFoBr6Ux8k9ocaGVfn4f?allow_redirect=1)

金属文:AI春晚《西游不能停》创作过程分享

前面提到,我最初的想法是用师徒四人的声音演绎这首歌的,但是用RVC浅尝了两种办法后,效果都不是很满意,最终考虑到deadline就干脆舍弃了。这里还是把“猴哥”和“唐僧”的部分放出来给大伙听听,就当小彩蛋吧。第一种方法,训练声音模型,然后直接变声。问题是变声后AI味儿太重,丢失了猴哥和唐僧的强调。[变声.mp3](https://bytedance.feishu.cn/space/api/box/stream/download/all/T4pqb30M5oKUU9x2XicciwaunXe?allow_redirect=1)第二种方法,训练声音模型,自己录rap,然后再变声。问题是需要我在录音的时候,尽量模仿还原出猴哥和唐僧的特点和感觉,这个涉及到专业的配音技巧,实在超出我的能力范围了....[录音+变声.mp3](https://bytedance.feishu.cn/space/api/box/stream/download/all/C7XbbRwIXodIGmxdu6UcO52cngd?allow_redirect=1)还有八戒和沙僧的声音我也训练了,但是文件丢失了,总之效果也不是很理想。

Others are asking
AI语音,变声器推荐
以下是为您推荐的一些 AI 语音变声器: :提供实时语音和口音转换流媒体服务。 :为高效在线会议提供的 AI 驱动软件解决方案。 :免费的实时语音变换器。 :为创作者、开发者和虚拟会议提供的降噪产品。 :其软件在复杂声学环境中提升语音的清晰度和可懂度。 :声称不制作音频,而是让音频更好。 :用于会议和音频的降噪。 :采用最先进的 AI 技术消除视频会议通话中的所有背景噪音。 :一套 AI 驱动的音频质量增强工具。 :将智能手机变成高级语音增强设备的应用程序。 :去除干扰性背景噪音的智能手机应用程序。 :用于音频和语音产品的智能音频解决方案。 :通过引入机器学习功能来革新麦克风。 :生成式 AI 音频增强。 此外,还有以下相关资源和工具: 实时变声的 sovits 一键包: 基于 sovits4.0 一键包 2.0 链接:https://share.weiyun.com/Afv83T5j 密码:INT16 链接:https://pan.baidu.com/s/1Vx0BnpkmPIRziQtORFvJg?pwd=INT8 提取码:INT8 不需要安装 python 和 cuda,双击运行 Hugging face 可以直接测试的模型:https://huggingface.co/spaces/akhaliq/RealTimeVoiceCloning 达摩院的产品,可以在线测试:https://modelscope.cn/studios/damo/personal_tts/summary 软件界面,支持加载各种 VC(它使用各种语音转换 AI(VC,Voice Conversion)为客户进行实时语音转换):https://github.com/wokada/voicechanger 语言声音 AI 模型相关: 使用 AI 的实时语音转换器(Trainer):https://github.com/isletennos/MMVC_Trainer AI 孙燕姿音色训练 svc:https://github.com/svcdevelopteam/sovitssvc 基于检索的语音转换 WebUI,一基为 VITS 简单易用的语言转换器(语音转换器)框架:https://github.com/liujing04/RetrievalbasedVoiceConversionWebUI 基于 DDSP(可微分数字信号处理)的实时端到端歌声转换系统:https://github.com/yxlllc/DDSPSVC 浅扩散模型(DDSP+DiffSVC 重构版)
2025-01-14
ai视频
以下是 4 月 11 日、4 月 9 日和 4 月 14 日的 AI 视频相关资讯汇总: 4 月 11 日: Pika 上线 Pika Twists 能力,可控制修改原视频中的任何角色或物体。 Higgsfield Mix 在图生视频中,结合多种镜头运动预设与视觉特效生成视频。 FantasyTalking 是阿里技术,可制作角色口型同步视频并具有逼真的面部和全身动作。 LAM 开源技术,实现从单张图片快速生成超逼真的 3D 头像,在任何设备上快速渲染实现实时互动聊天。 Krea 演示新工具 Krea Stage,通过图片生成可自由拼装 3D 场景,再实现风格化渲染。 Veo 2 现已通过 Gemini API 向开发者开放。 Freepik 发布视频编辑器。 Pusa 视频生成模型,无缝支持各种视频生成任务(文本/图像/视频到视频)。 4 月 9 日: ACTalker 是多模态驱动的人物说话视频生成。 Viggle 升级 Mic 2.0 能力。 TestTime Training在英伟达协助研究下,可生成完整的 1 分钟视频。 4 月 14 日: 字节发布一款经济高效的视频生成基础模型 Seaweed7B。 可灵的 AI 视频模型可灵 2.0 大师版及 AI 绘图模型可图 2.0 即将上线。
2025-04-20
ai视频教学
以下是为您提供的 AI 视频教学相关内容: 1. 第一节回放 AI 编程从入门到精通: 课程安排:19、20、22 和 28 号四天进行 AI 编程教学,周五晚上穿插 AI 视频教学。 视频预告:周五晚上邀请小龙问露露拆解爆火的 AI 视频制作,视频在视频号上有大量转发和播放。 编程工具 tree:整合多种模型,可免费无限量试用,下载需科学上网,Mac 可拖到文件夹安装,推荐注册 GitHub 账号用于代码存储和发布,主界面分为工具区、AI 干活区、右侧功能区等。 网络不稳定处理:网络不稳定时尝试更换节点。 项目克隆与文件夹:每个项目通过在本地新建文件夹来区分,项目运行一轮一轮进行,可新建会话,终端可重开。 GitHub 仓库创建:仓库相当于本地项目,可新建,新建后有地址,可通过多种方式上传。 Python 环境安装:为方便安装提供了安装包,安装时要选特定选项,安装后通过命令确认。 代码生成与修改:在 tree 中输入需求生成代码,可对生成的代码提出修改要求,如添加滑动条、雪花形状、颜色等,修改后审查并接受。 2. AI 视频提示词库: 神秘风 Arcane:Prompt:a robot is walking through a destroyed city,,League of Legends style,game modelling 乐高 Lego:Prompt:a robot is walking through a destroyed city,,lego movie style,bright colours,block building style 模糊背景 Blur Background:Prompt:a robot is walking through a destroyed city,,emphasis on foreground elements,sharp focus,soft background 宫崎骏 Ghibli:Prompt:a robot is walking through a destroyed city,,Spirited Away,Howl's Moving Castle,dreamy colour palette 蒸汽朋克 Steampunk:Prompt:a robot is walking through a destroyed city,,fantasy,gear decoration,brass metal robotics,3d game 印象派 Impressionism:Prompt:a robot is walking through a destroyed city,,big movements
2025-04-20
ai写程序
以下是关于使用 AI 写程序的相关内容: 1. 对于技术纯小白: 从最基础的小任务开始,让 AI 按照最佳实践写一个 say hello 的示例程序,并解释每个文件的作用及程序运行的逻辑,以学会必备的调试技能。 若学习写 chrome 插件,可让 AI 按照最佳实践生成简单的示范项目,包含全面的典型文件和功能,并讲解每个文件的作用和程序运行的逻辑。若使用 o1mini,可在提示词最后添加生成创建脚本的要求,并请教如何运行脚本(Windows 机器则是 create.cmd)。 2. 明确项目需求: 通过与 AI 的对话逐步明确项目需求。 让 AI 帮助梳理出产品需求文档,在后续开发时每次新起聊天将文档发给 AI 并告知在做的功能点。 3. 在独立游戏开发中的经验: 单独让 AI 写小功能没问题,但对于复杂的程序框架,可把不方便配表而又需要撰写的简单、模板化、多调用 API 且牵涉小部分特殊逻辑的代码交给 AI。 以 Buff 系统为例,可让 AI 仿照代码写一些 Buff。但目前 Cursor 生成复杂代码需要复杂的前期调教,ChatGPT 相对更方便。 教 AI 时要像哄小孩,及时肯定正确的,指出错误时要克制,不断完善其经验。 4. 相关资源和平台: AI 写小游戏平台:https://poe.com/ 图片网站:https://imgur.com/ 改 bug 的网站:https://v0.dev/chat 国内小游戏发布平台:https://open.4399.cn/console/ 需要注意的是,使用 AI 写程序时,对于技术小白来说,入门容易但深入较难,若没有技术背景可能提不出问题,从而影响 AI 发挥作用。
2025-04-19
有哪些好用的法律ai
以下是一些好用的法律 AI 应用场景和示例: 1. 诉讼策略制定: AI 将基于商标法等相关条款和案例法,为商标侵权案件提供诉讼策略,包括对原告商标权利的分析、被告侵权行为的评估、关键证据搜集建议、法律抗辩点及和解或调解策略。 其他例子: 为专利侵权案件制定诉讼策略,分析专利有效性、被告侵权行为及抗辩理由,提出证明侵权和计算损害赔偿的建议。 针对劳动合同纠纷案件,分析员工权益和雇主责任,提出诉讼策略,包括主张权益、证据收集重点及证明雇主违约行为。 在知识产权许可诉讼中,分析许可协议条款和双方权利义务,提出诉讼策略,包括证明许可协议违反、计算损失赔偿及可能的合同解除条件。 模拟法庭,如模拟商业合同违约的法庭审理,分析双方论点、证据和法律依据,预测判决结果,给出优化法庭陈述和证据呈现的建议。 2. 法律意见书撰写: AI 根据案件背景、证据材料和法律法规,自动撰写初步法律意见书,包含案件事实梳理、法律分析和结论。 其他例子: 针对商业秘密泄露案件,分析法律责任和赔偿范围,撰写法律意见书,提供应对策略。 为计划上市的公司提供关于公司治理结构的法律意见书,确保符合相关法规要求。 就消费者权益保护案件提供法律意见,分析商家赔偿责任和消费者维权途径,制定应对措施。 起草股权转让协议,包括转让方和受让方信息、股权转让份额、价格、支付方式和时间表、先决条件、双方权利义务、保密、违约责任和争议解决条款等。 3. 指令风格和技巧: 可指定 AI 模仿某位资深律师的逻辑严谨和言简意赅的风格,使其提供的信息更符合专业律师的沟通和表达习惯。 运用 PEMSSC 方法,如选择个性化的风格、给出参考或逻辑结构、从多个角度思考、进行总结概括、使用分隔符号区分等。 个性化风格:选择幽默且富有洞察力的风格,融入创新视角。 参考和逻辑结构:在提供法律建议时,采用 SWOT 分析法或 4P 原则等逻辑结构。 多角度思考:在分析商事诉讼时,从市场趋势、竞争对手行为、战略规划、财务状况和市场前景等角度思考诉讼策略。
2025-04-18
有没有能根据描述,生成对应的word模板的ai
目前有一些可以根据描述生成特定内容的 AI 应用和方法。例如: 在法律领域,您可以提供【案情描述】,按照给定的法律意见书模板生成法律意见书。例如针对商业贿赂等刑事案件,模拟不同辩护策略下的量刑结果,对比并推荐最佳辩护策略,或者为商业合同纠纷案件设计诉讼策略等。 在 AI 视频生成方面,有结构化的提示词模板,包括镜头语言(景别、运动、节奏等)、主体强化(动态描述、反常组合等)、细节层次(近景、中景、远景等)、背景氛围(超现实天气、空间异常等),以及增强电影感的技巧(加入时间变化、强调物理规则、设计视觉焦点转移等)。 一泽 Eze 提出的样例驱动的渐进式引导法,可利用 AI 高效设计提示词生成预期内容。先评估样例,与 AI 对话让其理解需求,提炼初始模板,通过多轮反馈直至达到预期,再用例测试看 AI 是否真正理解。 但需要注意的是,不同的场景和需求可能需要对提示词和模板进行针对性的调整和优化,以获得更符合期望的 word 模板。
2025-04-18
可以增强图片清晰的的ai
以下是一些可以增强图片清晰度的 AI 工具: 1. Magnific:https://magnific.ai/ 2. ClipDrop:https://clipdrop.co/imageupscaler 3. Image Upscaler:https://imageupscaler.com/ 4. Krea:https://www.krea.ai/ 更多工具可以查看网站的图像放大工具库:https://www.waytoagi.com/category/17 此外,PMRF 也是一种全新的图像修复算法,它具有以下特点: 擅长处理去噪、超分辨率、着色、盲图像恢复等任务,生成自然逼真的图像。 不仅提高图片清晰度,还确保图片看起来像真实世界中的图像。 能够应对复杂图像退化问题,修复细节丰富的面部图像或多重损坏的图片,效果优质。 详细介绍: 在线体验: 项目地址: 这些 AI 画质增强工具都具有不同的特点和功能,可以根据您的具体需求选择合适的工具进行使用。
2025-04-18