
喵爸联萌
ComfyUI不只是AI绘图,还能做视频,这你知道的吧? 我在之前的攻略《[使用ComfyUI进行AI绘画](https://lazycat.cloud/playground/guideline/1191)》介绍了用Flex Dev绘图,下面介绍一下图生视频。 你将需要AI算力舱,并安装ComfyUI。 https://appstore.lazycat.cloud/#/shop/detail/cloud.lazycat.aipod.comfyui 首先我会使用这张图样用懒猫AI文生图绘制的猫咪图片:  打开ComfyUI之后,忽略默认打开的SD1.5工作流,直接从左上角菜单打开“浏览模板”  从“视频生成”类选择Wan 2.2 14B Image to Video。 当然,Wan 2.2也支持文生视频,但文生视频对于提示词的要求更高些,我会在以后再讲解。  初次打开会要求下载两个超巨大的模型,因为我已经下载过了就不再截图了,我记得大约每个是14G左右,总共是28G,需要等待足够的时间。 下载完之后工作流自动打开,这个模板是使用双模型渲染,所以相对比较复杂。如果你用过古老的SDXL可能会熟悉双模型,在这里我会详细解释一下。  Wan2.2 t2v有两个模型文件,分别是: * wan2.2_t2v_high_noise_14B_fp8_scaled.safetensors * wan2.2_t2v_low_noise_14B_fp8_scaled.safetensors 顾名思义,high-noise用来进行高噪声生成,会让画面有更多的创意和变化,low-noise用来降低噪声,让结果更符合初始画面和符合提示词。两个模型要分别处理生成过程的前半段和后半段,其中Step的分配比例可能会很大地影响到结果的动感和质量。 首先让我们在图片输入节点上传之前那张小猫的图片。  再在绿色的提示框输入提示词,红色的反向提示可以直接保留。 初始提示词: > 生气的小猫咪,抬起爪子向镜头抓来,动感夸张的社交媒体GIF动画,低帧率快速动画,大幅度的动作,强烈的冲觉冲击感,有趣的运镜。  然后要设置图片的大小,这张图我打算生成动画表情包,所以使用微信表情包的图片大小240x240,这样生成速度也比较快。帧数我想要36帧(会被自动校正为37)。  如果你在意质量,可以保留模板中的现有步数设计(25步),但是我的要求不高,而且求快,所以我要将总步数设置为15步。 这里你会看到两个K采样器,分别对应前面提到的high-noise和low-noise模型。第一个停在第5步,第二个从第5步开始走完剩下的10步。  点击“运行”按钮,你会从顶部进度条看到AI开始工作了。你也可以点击右上角的图标查看动态日志。  按上述的尺寸和步数设置,生成一段动画只需要两分钟。  嗯,动起来了,运镜尚可,可是动画感不够强烈,可能是AI并不太理解猫需要什么动作。 让我们优化一下提示词,给它一个明显的动作: > 生气的小猫咪,抬起爪子向镜头抓来,动感夸张的社交媒体GIF动画,低帧率快速动画,大幅度的动作,强烈的冲觉冲击感,有趣的运镜。 小猫咪听话(并生气)地挥舞起了爪子: 接下来我们进行传说中的抽卡,就是多生成几份挑选最好的,反正无限Token不是么?    让我们把提示词再优化一点,加上镜头动作: >生气的小猫咪,抬起爪子向镜头抓来,动感夸张的社交媒体GIF动画,低帧率快速动画,大幅度的动作,强烈的冲觉冲击感。有趣的运镜,镜头在爪子抓来时快速后退,仿佛在躲避爪子,镜头晃动但始终对准小猫,镜头晃动时有一点跑焦,但很快又恢复了自动对焦。   从此表情包自由了。 
评论
3最后一个表情咋生成呀哈哈哈哈好美丽
那个我记得是先用Flux krea文生图,再用wan2.2图生视频。
谢谢