StoryDiffusion 是由南开大学 HVision 团队开发的一款创新人工智能工具。它的核心功能是生成连贯的图像和视频故事,尤其擅长漫画创作。该工具采用了先进的一致性自注意力(Consistent Self-Attention)技术,可以在无需额外训练的情况下,生成主题一致的图像序列,非常适合用于叙述故事或作为进一步内容创作的基础。
软件功能:
- 角色连贯性保持
StoryDiffusion 采用一致性自注意力机制,生成风格和服装一致的图像和视频,确保多图漫画和长视频中的角色保持连贯性,从而实现流畅的故事叙述。 - 多场景应用
StoryDiffusion 不仅适用于漫画生成,还能用于图像转视频等多种应用场景。用户可以提供一系列条件图像,利用 Image-to-Video 模型生成视频,为广告、电影等领域提供创新的内容制作方式。 - 教育材料设计
教育工作者可以使用 StoryDiffusion 设计引人入胜的教育视频或互动故事,增强学习者的参与度和兴趣。 - 长范围图像生成
StoryDiffusion 特别适合制作连贯的广告故事,能够加强品牌形象,在广告和品牌推广方面展现出独特的优势。 - 即插即用,无需训练
通过将一致性自注意力技术整合进现有的 U-Net 图像生成模型架构,并重用原有的自注意力权重,StoryDiffusion 实现了即插即用,无需额外训练。 - 高效能与稳健性
StoryDiffusion 保持角色特性和符合提示描述的同时,展示了出色的性能和稳健性,定量指标也证明了其高效能和可靠性。
配置要求:
建议电脑满足以下配置:
- 操作系统:Windows 10/11 64位
- 显卡:至少16G显存的英伟达(NVIDIA)显卡
如何查看显卡品牌型号和显存:
- 打开任务管理器
- 点击“性能”
- 点击“GPU”
- 右上角可以看到显卡型号,下方可以看到显存大小
使用教程:
① 打开下载页面( https://aiyy.info/storydiffusion )点击页面右侧下载按钮,下载整合包之后解压,建议使用winrar解压(下载地址:https://www.winrar.com.cn/)
注意:文件夹路径和文件名称不要出现中文字符,否则部分软件会因识别不出而报错
② 双击“一键启动.exe”,稍等片刻会在浏览器中自动打开操作界面
③ 选择预训练模型,选择角色控制类型,填写人物描述,填写负面提示词,选择样式模板,填写漫画描述(每行对应一个画面)
④ 调整参数(如对AI绘画不熟悉,保持默认即可),最后点击生成,等待程序运行结束,右侧会显示生成结果(结果会一张一张生成,有几行提示词就会生成几张画面,等待全部生成再关闭程序)
⑤ 右侧会呈现生成结果
声明:
① 本站所有资源版权均属于原作者所有,这里所提供资源均只能用于参考学习用,请勿直接商用。若由于商用引起版权纠纷,一切责任均由使用者承担。更多说明请参考赞助计划。
② 本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。