FoleyCrafter是一款AI配音工具,专为无声视频生成清晰、逼真的声音效果。它能够理解视频的语义内容结合提示词,自动生成与视频内容完全匹配的声音,确保声音和视频同步。无论是电影、动画还是游戏视频,FoleyCrafter都能提供高质量的音效。
开源地址:https://github.com/open-mmlab/foleycrafter
☞☞☞☞☞☞ 一键启动包在右侧下载 ☞☞☞☞☞☞
视频教程:
软件功能:
- 高质量声音生成:FoleyCrafter能为视频生成高质量的声音效果,声音清晰逼真。
- 内容匹配:系统能理解视频的语义内容。例如,当视频中出现狗时,FoleyCrafter会生成狗叫的声音;当视频中有海浪时,它会生成海浪声。
- 文本控制:用户可以通过简单的文字描述来控制声音的生成。例如,输入“海浪声”,系统就会生成相应的海浪音效。
- 适用性广泛:无论是电影、动画还是游戏视频,FoleyCrafter都能提供合适的声音效果,增强观众体验。
应用场景:
- 电影和电视制作:为影视作品自动生成高质量的音效,提升制作效率和效果。
- 动画制作:动画片中的每一个动作和情节都可以通过FoleyCrafter自动添加相应的音效,使作品更加生动。
- 游戏开发:为游戏场景和动作生成精准的音效,提升玩家的沉浸感。
- 广告制作:广告中的各种声音效果可以通过FoleyCrafter自动生成,快速制作高质量的广告内容。
- 教育和培训:在教育视频和培训材料中自动生成相应的音效,提升教学效果和学员的学习体验。
- 社交媒体内容创作:为社交媒体视频生成逼真的音效,帮助创作者制作更具吸引力的内容。
配置要求:
建议电脑满足以下配置:
- 操作系统:Windows 10/11 64位
- 显卡:至少12G显存的英伟达(NVIDIA)显卡,
- CUDA >= 12.1
CUDA如未安装可以查看安装教程:https://aiyy.info/requirements/
如何查看显卡品牌型号和显存:
- 打开任务管理器
- 点击“性能”
- 点击“GPU”
- 右上角可以看到显卡型号,下方可以看到显存大小
使用教程:
① 打开下载页面(https://aiyy.info/foleycrafter/)点击页面右侧下载按钮,下载整合包之后解压,建议使用winrar解压(解压软件下载地址:https://www.winrar.com.cn/)
注意:文件夹路径和文件名称(包括音频、图片、视频等文件名称)不要出现中文字符,否则部分软件会因识别不出而报错
② 双击“一键启动.exe”,首次打开需要加载和下载模型,稍等片刻会在浏览器中自动打开操作界面
③ 上传视频,填写提示词及负面提示词,提示词建议描述清楚视频中所需的音效,负面提示词填写不想出现的音效(如噪音 noise),点击随机种子,点击生成,生成结果位于右侧,目前只支持每次生成10秒视频
④ 可以播放预览生成结果,点击右上角下载按钮可以将生成结果保存至指定文件夹
生成结果:
官方案例展示: