微比恩 > 信息聚合 > 蜘蛛侠妖娆起舞,下一代 ControlNet 来了!贾佳亚团队推出,即插即用,还能控制视频生成

蜘蛛侠妖娆起舞,下一代 ControlNet 来了!贾佳亚团队推出,即插即用,还能控制视频生成

2024-08-17 12:42:55来源: IT之家

只用不到 10% 的训练参数,就能实现 ControlNet 一样的可控生成!而且 SDXL、SD1.5 等 Stable Diffusion 家族的常见模型都能适配,还是即插即用。同时还能搭配 SVD 控制视频生成,动作细节控制得精准到手指。在这些图像和视频的背后,就是港中文贾佳亚团队推出的开源图像 / 视频生成引导工具 ——ControlNeXt。从这个名字当中就能看出,研发团队给它的定位,就是下一代的 ControlNet。像大神何恺明与谢赛宁的经典大作 ResNeXt(ResNet 的一种扩展),起名字也是用的这个路数。有网友认为这个名字是实至名归,确实是下一代的产品,将 ControlNet 提高了一个档次。还有人直言 ControlNeXt 是规则改变者,让可控生成的效率提升了一大截,期待看到人们用它创作的作品。蜘蛛侠跳起美女舞蹈ControlNeXt 支持多款 SD 系模型,而且即插即用。其中包括了图像生成模型 S

关注公众号
标签: on 视频