为了在真实3d世界里呈现出立体的二次元/2d的人物角色或动物等。之前也探索过这种2d3d融合的出图方式,但是因为素材缺乏所以没成功。这次因为机缘巧合在sdxl里摸索出了这样的风格,于是用sdxl出的图片训练了一个适用于1.5模型的lora,这样就可以在1.5模型环境下也出类似的图片效果了。
【推荐底模】泛化性比较强的真实风格底模,例如The Final Fantasy of Fireflies,(由于测试真的好累,所以我也就主要以这个本身对真实风格和二次元都有比较好的兼容性的虫模来做测试为主。)
另外,我也浅浅试了一下二次元底模,例如优可Anything,baitian V3,AWPainting,Lora强化了其中应该真实风格化的背景,所以即使是二次元底模下,背景也更加偏2.5D,与主体角色形成了比较鲜明的两种风格对比。(后面放了例图和参数)
【起手式/触发词】<lora:2d3dmix_v2:1.0>, 2d3dmix, flat drawing, [后面加主体,例如anime, a girl, solo]
测试下来,用这套词+萤火虫模,效果还算稳定。
【推荐采样】DPM++ 2S a Karras (我也没试很多其它的采样方式,就浅浅跑了一下,感觉这个采样比较稳。大家可以试试。)
Prompt: 2d3d, 2d3dmix, 1girl, long wedding dress, solo, fullbody, chibi, standing,, pretty face, extremely beautiful detailed eyes,
Negative prompt: verybadimagenegative_v1.3 negative_hand-neg
Steps: 25, Sampler: DPM++ 2S a Karras, CFG scale: 7, Seed: 3950888102, Size: 512x512, Model hash: 48754cc424, Model: baitianmixV3_v2.0, VAE hash: c6a580b13a, VAE: vae-ft-mse-840000-ema-pruned.ckpt, Clip skip: 2, RNG: CPU
Prompt: 2d3d, 2d3dmix, 1girl, long wedding dress, solo, upperbody, chibi, standing, beach, portrait, speech bubble with text "Hi", pretty face, extremely beautiful detailed eyes,
Negative prompt: paper on ground,, verybadimagenegative_v1.3 negative_hand-neg
Steps: 25, Sampler: DPM++ 2S a Karras, CFG scale: 7, Seed: 729783722, Size: 512x512, Model hash: 2ffdce100c, Model: 自由变换_优可youkengi anything anime_lib限时独享_anything ver., VAE hash: c6a580b13a, VAE: vae-ft-mse-840000-ema-pruned.ckpt, Clip skip: 2, RNG: CPU
剩下的就大家自己摸索一下吧。觉得不错的,欢迎返图。