Pyramid-Flow是一项由快手、北京大学和北京邮电大学研究团队联合推出的开源超高清视频生成模型。它采用创新的“金字塔式压缩流动”架构,通过分层式的逐步生成方法实现高效的视频生成,仅需文本输入即可生成10秒、分辨率1280×768、帧率24帧每秒的高质量视频,还支持图片生成视频。Pyramid-Flow在生成效率、计算资源节省等方面表现优异,为资源有限的开发者带来了高性价比的视频生成解决方案。

本期就带来ComfyUI版本的Pyramid-Flow,相关ComfyUI软件包、模型、节点、工作流均已打包在内,一键启动即可。实际体验下来效果当然不及可灵,风景、物品等效果相对可以,但人物比较容易变形。

 

开源地址:https://github.com/kijai/ComfyUI-PyramidFlowWrapper

☞☞☞☞☞☞  右侧下载整合包  ☞☞☞☞☞☞

 

软件功能:

  • AI视频生成:用户只需提供文本输入,Pyramid-Flow即可自动生成符合描述的视频,同时支持图片结合提示词生成视频。
  • 高分辨率和高帧率:支持1280×768分辨率和24帧每秒的帧率输出,提供高清流畅的视觉体验,适用于多种创意应用。
  • 金字塔式压缩流动架构:通过逐步生成和降噪修复策略,Pyramid-Flow在低分辨率下处理初始步骤,再逐步提升清晰度,实现高效计算和流畅的画面生成。
  • 节省资源的训练与生成:在降低能耗的同时加快生成效率,Pyramid-Flow特别适合资源有限的中小企业和开发者应用,显著减少计算资源需求。

 

应用场景:

  • 视频创作与广告:广告、宣传片等需要快速生成创意视频的领域可以利用Pyramid-Flow,根据文本描述创作高质量视频,满足多样化的视觉表达需求。
  • 影视与动画制作:在电影预览和动画制作中,Pyramid-Flow的高效生成流程能帮助团队快速制作短片内容,节省大量前期创作时间。
  • 教育与培训:适用于生成教学视频、模拟展示等内容,便于直观生动地展示知识,增强学习效果。
  • 个性化视频生成:可用于社交媒体、营销等领域生成个性化视频内容,实现根据用户输入自动生成视频,为用户带来独特的互动体验。

 

配置要求:

建议电脑满足以下配置:

  • 操作系统:Windows 10/11 64位
  • 显卡:建议12G显存及以上的英伟达(NVIDIA)显卡,
  • CUDA >= 12.4
  • 整个包解压完接近33G,要留足硬盘空间

CUDA如未安装可以查看安装教程:https://aiyy.info/requirements/

 

如何查看显卡品牌型号和显存:

  • 打开任务管理器
  • 点击“性能”
  • 点击“GPU”
  • 右上角可以看到显卡型号,下方可以看到显存大小

 

使用教程:

① 打开下载页面(https://aiyy.info/pyramid-flow/)点击页面右侧下载按钮,下载整合包之后解压,建议使用winrar解压(解压软件下载地址:https://www.winrar.com.cn/

注意:文件夹路径和文件名称(包括音频、图片、视频等文件名称)不要出现中文字符,否则部分软件会因识别不出而报错

 

② 双击“一键启动_gpu.bat”,稍等片刻会在浏览器中自动打开操作界面

 

 

③ 点击左上角“工作流”,再点击“打开”

 

 

④ 其中包含“提示词生成视频”、“图片生成视频”和“提示词生成视频拼接”三个工作流,下面依次介绍

1、提示词生成视频

选择“提示词生成视频.json”工作流,打开

 

 

工作流中可以选择模型,但是建议默认使用768p模型,另一个384p模型生成的视频分辨率太低,填写提示词,视频宽高建议默认1280×768,其他分辨率效果不佳,然后调整temp数值,5秒视频为16,10秒视频调整为31,最后点击“执行队列”即可

 

 

2、图片生成视频

选择“图片生成视频.json”工作流,打开

 

 

默认使用768p模型,填写提示词,上传图片,视频宽高建议默认1280×768,其调整temp数值,5秒视频为16,10秒视频调整为31,最后点击“执行队列”即可

 

 

3、提示词生成视频拼接

选择“提示词生成视频拼接.json”工作流,打开

 

 

分别填写第一和第二组提示词,各自描述需要生成的视频,最后会生成两个视频进行拼接,视频宽高建议默认1280×768,其调整temp数值,5秒视频为16,10秒视频调整为31,最后点击“执行队列”即可

 

 

⑤ 保存生成结果:右键点击生成结果,选择“save preview”即可保存至指定文件夹

 

 

或者在文件包中的“ComfyUI/output”目录下也能找到生成结果

 

 

声明: ① 本站所有资源版权均属于原作者所有,这里所提供资源均只能用于参考学习用,请勿直接商用。若由于商用引起版权纠纷,一切责任均由使用者承担。更多说明请参考赞助计划。 ② 本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。