图1:原图
最近,听说你们对《灌篮高手》电影版的赤木晴子很不满哦~
那我们来花个两分钟全体AI真人版吧。
这是一个很范例的二次元改三次元(现实)的案例,我们用这个例子来解释controlNet的根本运用:
事情流:
(1)图生图,反推提示词。得到图1的描述词。
(2)试跑图生图。调度参数,建议分辨率=原图(后续再放大),紧张是CFG和重绘幅度,建议CFG高于9,重绘大于0.7。
(3)关键点:开启controlnet功能, 同时开启两个controlnet选项(设置内可以开启)
controlnet-0 : 选openpose预处理+openpose模型
controlnet-1 :选candy/hed预处理+candy/hed模型(我们这里用了lineart)
类似的参数设置位置。
这里面,openpose锁定了动作。
lineart线稿锁定了轮廓。
(4)模型选择。选一个现实风的模型,我这里用chilloutmax,同时搭配人物角色lora。分别对应不同角色的Lora。
比如,想把角色换成一个和志玲姐姐很像的角色。。换个lora即可。
想换一个角色,换lora即可。
实在,举一反三,这也是换脸的方法。在商业用场上,我们可以用这种转换来实现衣服换人(如果衣服存在一些变革,须要调度锁定描述词)。
我们就用这个小例子来展示lora+controlnet的强大运用能力;个中,很主要的是controlnet的叠加。
实话说,这是由于controlnet的更新太快了,最近,controlnet已经更新到了1.1版本,预处理也已经增加到一屏放不下。十多二十种预处理搭配各种模型,再加上controlnet自身可以叠加,玩法的排列组合大家自己可以测算一下。
这里面的玩法更新非常快也非常多,本日展示的只是个中很小一部分。抛砖引玉,精进须要自我琢磨。后面我们会更新更多的controlnet玩法。