)
这是我们ComfyUiMinimaxH3视频模型从部署到生产系列文章的第三篇。第一篇我们对MinimaxH3视频模型做了 一个比较全面的介绍。第二篇我们把搭建工作流所需要的模型和插件都已经全部准备完成。本篇我们将正式开始我们的MinimaxH3的工作流搭建。第一步加载模型以前我们都是主模型、Clip、vae分开加载这次我们用一个新组件所有模型用一个组件加载。搜索“MiniMax H3 Easy 加载器”。从上到下加载了1、FL2VA模型图生视频模型。2、REF2VA模型全能参考生视频模型这就是为什么我们前面两章让复制一个图生视频模型再把名字改为参考生视频模型的名字这里是识别名称的。3、文本编码器clip文件。4、视频VAE。5、音频VAE。可以看到我们即加载了“图生视频模型”同时也加载了“参考生视频模型”所以我们这个工作流是既可以做图生视频/文生视频的工作也可以做全能参考生视频的工作。第二步加载一个可以输入提示词、设置时长、分辨率的组合插件搜索“MiniMax H3 Easy”模型加载器出来的线直接连到他的H3模型组合上就行。他的这个“media”节点就是我们接入参考图片、视频、音频用的。最多一次 可以参考 9张图片、3条视频、3个音频具体的用法后面我们做图生视频视频生视频时都会给大家讲。看过我前面搭建LTX2.3视频模型的朋友应该知道我们当时为了设置分辨率、帧数、时长这些信心用了很多的 int 组件这个插件给我们把这些东西全部集成了起来用起来就很清爽了。第三步添加lora我们以前用的都是“LoRA加载器仅模型”这个东西这里的的这个Lora是不能用他的。必须用“MiniMax-H3 Turbo LoRA”这个组件来加载。原因是我们用了这个加速lora以后把采样步数降低到了4步这个时候视频和音频的部分就有可能会出现不吻合的情况。因此必须用这个专门的lora加载器才能使他的音频和视频相吻合权重给1。搜索“MiniMax-H3 Turbo LoRA”原来我们用LoRA加载器的时候lora是直接链接到主模型的后面这里的这个lora我们需要链接到“MiniMax H3 Easy”这个组件的后面如下图。这个加速lora的权重设为1。第三步添加一个MiniMax H3 Easy 输出由于我们前面用了两个聚合组件而后面采样解码的时候是需要vae、fps等这些节点的。因此我们就需要一个能输出这些节点的组件。搜索“MiniMax H3 Easy 输出”他的输入节点只有一个“H3 Content”和我们前面的“MiniMax H3 Easy”的输出节点‘H3 Content’是一一对应的。输出的节点就包含了全部的后面采样、解码所需要的输入节点从上到下分别是提示词条件、latent、视频vae、音频vae、帧率。第四步加载采样器和我们前面做LTX的工作流一样这个的采样器也是分块的我们一部分一部分的添加。1采样器选择搜索“MiniMax-H3 Turbo Sampler”这个采样器是专门和上面那个加速Lora配合使用用了那个加速Lora就必须用这个采样器。将来如果不用这个加速Lora了就需要换成我们LTX里面那样的采样器采样步数改为20步。2种子这就是采样用的种子没啥好说的搜索“随机噪波”3基本引导器引导器的作用就是把提示词和模型传输给采样器用的。搜索“基本引导器”把从lora出来的模型节点和MiniMaxH3 Easy 输出的条件节点传给他。4调度器搜索“基本调度器”他的输入点就一个把模型给他就行。这里我们用了加速lora,采样步数给4就可以其他的都默认。5自定义采样器搜索“自定义采样器”这个自定义采样器高级和前面的噪波、采样器、引导其一起组合起来就和我们在前面的文章中常见的k采样器是一个功能。输入点虽然有点多但都是一一对应的噪波-噪波、引导器-引导器、采样器-采样器、西格玛-调度器的sigma输出、latent图像-Easy输出的latent。第五步 音频视频解码采样器把视频采样出来到潜空间以后我们就需要再从潜空间里把他给解码出来就OK了。1VAE解码音频搜索“VAE解码”像前面的LTX2.3他的音频和视频都是输出到latent,我们需要加一个分离节点才能把音频和视频单独分出来。MinimaxH3则完全不需要他输出的时候就给我们分离好了一个输出音频降噪latent一个输出视频latent。我们只需要加一个“VAE解码音频”的组件把“降噪latent(音频)”和音频的vae文本链接给他就可以了。2VAE解码视频搜索“VAE解码”视频解码其实就是图像解码我们就用我们经常用的普通的“vae解码”节点把“latent(视频)”和视频的vae文件链接给他就可以了。第六步出视频采样完成了也解码了剩下的就是把视频创建出来就OK了。1创建视频搜索“创建视频”把图像视频、音频、帧率FPS链接给他就OK。2保存视频最后再加一个普普通的“保存视频”我们的工作流就完成了。搜索“保存视频”记得把格式改成mp4格式。第六步输入提示词我们直接复制官方工作流里面的提示词运行试试效果都是同样的提示词480P 5s 我们用了90s,官方用了291秒本章总结在前两章的准备基础之上这一章我们把我们带有加速lora的工作流给搭建了出来并成功运行。和原版的官方工作流对比提速效果还是很明显的。同样都是480p分辨率时长5秒我们用了90秒官方的用了290秒速度提升的还是很大的。所有的加速Lora或多或少都会对画质有一定的降低但我选的这个Lora也是一位老师给推荐的我自己测试感觉对画质的影响还是很小的在可接受的范围之类。我们还剩下的课程还有1提示词书写的格式要求。2图生视频以及参考生视频的用法。--------结束线---------我建了一个交流群方便大家在学习的过程中相互交流。有兴趣的朋友可以加一下平时也会在群里分享一些资料。如果大家在阅读文章的时候有什么困惑可以在文章的底部留言我看到的第一时间就会进行回复。也可以对有困惑的文章进行赞赏赞赏后可以和我约个时间进行一对一的实时交流赞赏金额不限制多少都可以
