考虑到提供了Enhance a Video等功能且支持模块化和量化后的VACE模型,虽然显存优化差一些但还是在Comfyui改用WanVideoWrapper而非官方工作流进行部署。

使用文生视频时,8g显存能生成33帧1152x640分辨率的视频,在3070m用时约26分钟。

使用VACE模型时,8g显存能生成29帧1088x608视频,用时约21分钟。

另外,之前使用的主打速度的模型搭配改成Stable Diffusion3搭配HyperSD lora(SD3.5没有对应的lora),搭配LTX Video0.9.6图生视频也基本能正常生成,但还是因为效果跟Hidream i1 full以及Wan2.1 14b有明显差距而弃用了。以后要平衡速度和生成效果还是要等HyperSD和FastVideo项目提供上述模型的步数蒸馏。

2
message-square
3
  • William7004OP
    11 days ago

    前两天用起来感觉画质还是差一些,今天发现是模型加载节点选了量化,该节点量化选项对显存占用和速度没影响,但会降低画质。不过文本编码器加载节点还是要开量化以降低显存占用。

    • William7004OP
      11 days ago

      后面的视频是关闭量化的。40系开fp8 fastmode的话应该有一定速度提升,但据说画质也差不少。

  • William7004OP
    9 days ago

    关闭量化后画质还是有一些问题,后面引入了Accvid,之前Hunyuan Video的Accvid是5步,Fast Video是6到8步,都有一定画质问题。Wan2.1的Accvid改为10步,画质损失比较小。由于速度提高,顺便检查了一下Teacache,发现之前Teacache默认是按图生视频版本的比例的,调整后画质正常了。