FramePack-Studio:支持LoRA的文字/图片生成视频

此为FramePack项目的优化版本,不仅支持图像生成视频、文本生成视频,亦能够借助hunyuan LoRAs实现视频的生成。

开源地址:https://github.com/colinurbs/FramePack-Studio

配置要求:

电脑需满足以下配置:

  • 操作系统:Windows 10 或 Windows 11 的 64 位版本
  • 内存:推荐使用40G及以上的内存容量。若内存容量不足,可通过增加虚拟内存的方式加以解决,具体操作教程可通过百度自行搜索获取。
  • 显卡:需配备英伟达(NVIDIA)显卡,其显存至少为8G。若要使用LoRA等完整功能,建议采用显存16G及以上、型号为30系及以上的英伟达显卡。显卡性能越高,生成速度越快(速度参考:在开启TeaCache的情况下,4060ti 16G显卡每生成1秒大约需要4分钟)。
  • CUDA:显卡所支持的CUDA版本需大于或等于12.8版本。若不清楚显卡支持的CUDA版本,应自行通过合适途径进行查询。
  • 整个包解压后占用空间约为47.3G,在解压操作前,请确保硬盘预留足够的空间。

如何查询显卡的品牌、型号以及显存信息:

  • 请打开任务管理器。
  • 随后,点击界面中的“性能”选项。
  • 接着,点击“GPU”。
  • 在此页面中,于右上角位置能够查看到显卡型号,而在页面下方则可看到显存大小。
图片[1]-FramePack-Studio:支持 LoRA 的文字 / 图片生成视频工具

使用教程:

① 在此郑重建议您使用 WinRAR 进行解压操作。请于下方选取适配您需求的网盘进行转存。务必注意,需先将文件成功转存至您个人的网盘后,再执行下载操作

请勿使用 Windows 自带的解压工具!也请勿使用 360 解压工具!

图片[2]-FramePack-Studio:支持 LoRA 的文字 / 图片生成视频工具

注意:文件夹路径以及各类文件名称(涵盖音频、图片、视频等文件的名称),均不应出现中文字符。这是因为,部分软件可能因无法识别中文字符而报错。

图片[3]-FramePack-Studio:支持 LoRA 的文字 / 图片生成视频工具

② 双击名为“一键启动.bat”的文件,稍作等待,操作界面将自动在浏览器中打开。

图片[4]-FramePack-Studio:支持 LoRA 的文字 / 图片生成视频工具

③若要使用LoRA,需将其放置于“loras”文件夹内。所使用的LoRAs应基于hunyuan进行训练,否则可能出现兼容性问题。

图片[5]-FramePack-Studio:支持 LoRA 的文字 / 图片生成视频工具

④ 请依据实际需求,选择适宜的视频生成方式:

若需进行图生视频操作,首先应上传视频,随后填写提示词,接着对视频时长等相关参数进行调整,完成上述步骤后,点击“添加到队列”即可。

若需进行文生视频操作,无需上传图片,直接填写提示词,随后调整视频时长等相关参数,最后点击“添加到队列”按钮即可。

若需使用LoRA生成视频,应首先将LoRA文件放置于“loras”文件夹内,随后重启程序。在程序界面的“选择要加载的LORA模型”选项中,选取已放入的LoRA文件。接着,填写提示词(需留意,部分LoRA需在提示词中输入触发词方可生效)。之后,对视频时长等参数进行调整,最后点击“添加到队列”,便可完成操作。

图片[6]-FramePack-Studio:支持 LoRA 的文字 / 图片生成视频工具
图片[7]-FramePack-Studio:支持 LoRA 的文字 / 图片生成视频工具

生成结果处于右侧。

图像生成视频

图片[8]-FramePack-Studio:支持 LoRA 的文字 / 图片生成视频工具

基于LoRA技术的视频生成

图片[9]-FramePack-Studio:支持 LoRA 的文字 / 图片生成视频工具

⑤ 点击界面右上角的下载按钮,即可将相关内容保存至指定文件夹。

图片[10]-FramePack-Studio:支持 LoRA 的文字 / 图片生成视频工具

生成结果亦可在文件包内的“outputs”文件夹中找到。

图片[11]-FramePack-Studio:支持 LoRA 的文字 / 图片生成视频工具

声明: 本站所涉全部资源的版权,皆归原作者所有。此处提供的资源,仅可用于参考学习,严禁直接用于商业用途。若因商业使用导致版权方面的纠纷,所有责任均由使用者自行承担。倘若本站内容侵害了原著者的合法权益,可与我们联系,我们将予以妥善处理。

下载地址:

FramePack-Studio:支持LoRA的文字/图片生成视频-资源速享
FramePack-Studio:支持LoRA的文字/图片生成视频
此内容为免费资源,请登录后查看
0
免费资源
© 版权声明
THE END
喜欢就支持一下吧
点赞0赞赏 分享
评论 抢沙发

请登录后发表评论

    暂无评论内容