规划总平“一键出图”lora模型使用指南
20241114
本模型由同济大学钮心毅团队训练,欢迎各位同学、同行体验并评论、返图,留下您宝贵的意见与经验以使我们进一步优化模型,谢谢!
1 模型使用准备
1.1模型适用场景
模型适用于中等尺度大小(20-100公顷)的规划专业平面图线稿的上色,可以实现对平面图整体图面效果的快速生成及效果展示。能够在设计方案沟通交流与修改反馈过程中起到积极作用。
图片作者:周思薇 王晨亦
1.2模型使用愿景——多阶段,多场景
图片作者:孙旻皓
1.3线稿处理与输入
①平面图线稿应包含建筑、道路、场地、绿化等要素的区分
②线稿不应包括文字、图例等标注内容
③应选择图面因素区分较为明显的线稿,对部分细节要素应尽量精简省略(如停车位、树池、休憩座椅等等)
图片作者:周思薇 王晨亦
上述不同方案阶段、不同尺度的图纸都能通过本模型产出相应的规划总平面图,但需要注意线稿图最简洁也不可缺少道路、水系等结构性表达。
1.3提示词选择
触发词:zongping
七种功能类型:居住区、交通枢纽区、商业区、教育园区、产业园区、历史风貌区、公园绿地与广场
二类图面结构控制提示词(可选):空间结构与特征、路网形态
四类图面要素细节提示词:建筑本体描述、建筑布局描述、环境描述、周边环境要素
五类图面色彩效果提示词:色彩基调、色彩搭配、阴影构成、图面关系、色彩细节
通用性反向提示词:(EasyNegative,ng_deepnegative_v1_75t,:1.2),(NSFW:1.5), (worst quality:2), (low quality:2), (normal quality:2), lowres,watermark, normal quality, ((monochrome)), ((grayscale)), skin spots, acnes, skin blemishes, age spot, (ugly:1.331), (duplicate:1.331), (morbid:1.21), (mutilated:1.21), (tranny:1.331), mutated hands, (poorly drawn hands:1.5), blurry, (bad anatomy:1.21), (bad proportions:1.331),
提示词选择示例
触发词:((zongping))功能类型提示词:((residential area)),(commercial area)
结构控制提示词(可选):grid-type road,
要素细节提示词:green roofs,commercial complex,commercial street,pointbuilding,plate building,curve building,row and columnlayout,park,riverwalk,curvy paths,greenbelts along theriver,playground,river,
色彩效果提示词:(bright-colored),(analogous color),(light shadow),(partlycolored),(harmonious combination),white buildings,orangebuildings,yellow paths,
反向提示词(通用性输入):text,label,lineart,paintings,cropped,error,cluttered,(worst quality:2),(lowquality:2),(normalquality:2),lowres,signature,blurry,drawing,sketch,poorquality,ugly,text,pixelated,low resolution,chaotic spaces
1.4 controlnet选择
lineart线稿/invert反向:对本身是白底黑线的线稿图进行反色效果处理
识别得到的线条与原线稿完全相同
controlnet模型:本指南部分实例使用了TheMisto.ai 开发的 MistoLine-SDXL-ControlNet。controlnet模型的选择对结果影响较大,可尝试选用不同的controlnet模型。
——对于处理完成度较高的黑白线稿底图,推荐使用lineart线稿/invert反向作为预处理,
2彩色平面图输出及筛选
2.1输出初步结果
由于随机种子不同,生成图片的识别性及部分上色存在差异,因此选择一次生成4-8张图以供筛选
图示参数:
Steps: 30, Sampler: Euler a, Schedule type: Karras, CFG scale: 7, Size: 1024x1280, Model hash: e6bb9ea85b, Model: sd_xl_base_1.0_VAEFix, VAE hash: 63aeecb90f, VAE: sdxlVAE_sdxlVAE.safetensors, Clip skip: 2, Lora hashes: "zongping_80", Refiner: sd_xl_refiner_1.0_VAEFix [8d0ce6c016], Refiner switch at: 0.8, Version: v1.10.0
2.2提示词权重调整(可选)
对生成批次图片中生成效果均较差的要素提示词进行权重调整
提高或降低权重以控制相关要素在图面中的生成效果
(word:x) x为权重调整值
权重赋值示例:
(word):将权重提高 1.1 倍
((word)):将权重提高 1.21 倍(= 1.1 * 1.1)
[word]:将权重降低至原先的 90.91%
(word:1.5):将权重提高 1.5 倍
(word:0.25):将权重减少为原先的 25%
使用建议1:功能类别与图面结构控制、图面要素细节成组变化对平面图可用性影响最显著.保留功能类别不变,删除or改变图面要素/结构,对结果可用性无显著影响,但是在表达效果上有随机性带来的正面作用
使用建议2:对于概念方案提示词类单独改变时:功能类别>图面结构>图面细节;与功能类别成组改变时: 图面结构<图面细节。因此:概念方案的图面深度下,图面细节成组变动的敏感性大于图面结构; 工程方案的图面深度下,图面细节成组变动的敏感性小于图面结构;
使用建议3:图面细节单独变化时,改变效果和可用性极其有限。然而当图面细节与色彩表达同时变化时,效果显著。其中yellow pathes 与 city axis对轴线表达最显著;green water与river/waterside city对滨水空间表达最显著
2.3图片筛选
平面生成未出现明显错误
整体图面效果较好
各个细节要素的识别情况较好
选择其中一张图片作为初步输出成果,以待后续进一步调整
3输出结果调整
3.1对平面图重要要素进行重绘调整
①示例:对识别出错的河流水域进行调整
在webUl界面使用画笔或上传图层蒙版选中重绘区域输入水系相关提示词:((zongping)),green water,river仍然需要添加controlnet控制生成结果
②示例:对识别出错的操场区域进行调整
在webUl界面使用画笔或上传图层蒙版选中重绘区域输入操场相关提示词:((zongping)),playground仍然需要添加controlnet控制生成结果
3.2对平面图建筑及阴影再调整
初步生成图片存在问题:图面建筑识别与原线稿差距较大或建筑边缘线拟合较差;建筑阴影不明显;建筑层数识别错误,高层建筑无法体现
使用PS对图片再调整:
①叠加正确的建筑线稿
②使用正片叠底以叠加正确的建筑阴影影
③可修改的建筑颜色以凸显设计重点
3.3图像分辨率放大
图像清晰度不足无法适应图像展示需求图像分辨率放大:
原输入线稿及输出成果分辨率均为1024x1280像素
①输入局部重绘及建筑阴影调整后的成果图像
②可使用放大算法:R-ESRGAN 4x
③输出结果分辨率设置为需要的大小,图示以4096x5120为例
4部分操作流程演示
4.1彩色平面图输出及筛选
4.2对平面图重要要素进行重绘调整
4.3对平面图建筑及阴影再调整
在PS中直接操作
4.4图像分辨率放大
图片作者 陈瑞
最终就能得到生成的心仪图纸啦~
©本模型由同济大学钮心毅团队训练
说明书作者:王晨亦、周思薇、孙旻皓、陈瑞、刘思涵