浅谈 Stable Diffusion AI 在建筑设计的应用2.0

上一篇稍微介绍Ai Stable Diffusion的基本概念,这一篇我们会介绍几种不同的控图方法,适合有建筑模型却不知如何渲染,或有黑白线稿想出idea 的你快速上手!

简言之,绘画涉及构图和风格两方面。以前人们常说现在的AI绘画就像炼丹,但实际上它炼的是什么?

简而言之,它通过各种咒语来控制画面的构图和风格。大家都知道这些咒语很烦。但在我看来,这些所谓的咒语反人类。AI的目标本应是降低门槛,而不是提高门槛。随着AI技术的迅速发展,这些咒语将来肯定会被淘汰。现在已经有两个利器来解决这个问题:ControlNet用于控制构图,LoRA用于控制风格。

让我们来了解ControlNet是如何控制构图的吧!

1. ControlNet: MLSD直线检测

Control Net: MLSD模型是一个专门检测直线的模型,基于MLSD模型的特性,MLSD模型在建筑、室内方向的处理上是比较好的选择,可以很好的检测出原图的直线线条。

2. ControlNet: Segmentation 语义分割

使用ADE20k 进行语义分割,用色彩来定义不同的物品或部件,语义分割可多通道应用让AI能正确识别对象类型和需求生成的区界。

Section: 建筑与外界的交界,墙的剖面的形状,柱子的轮廓

Exterior Perspective:建筑与外界的交界,窗,门,植被的轮廓

Interior Perspective: 室内物体的轮廓窗,门,灯具,植被的轮廓

3. 使用MLSD和SEG进行精确控图

使用Seg来定义内容:

Section:定义墙体,窗,门,天空,人

Exterior Perspective:定义外墙,窗,门,植被,人,天空

Interior Perspective: 定义窗,墙体,天花板,人,绿植,门

所有图片均为作者本人创作

Previous
Previous

浅谈 Stable Diffusion AI 在建筑设计的应用3.0

Next
Next

浅谈 Stable Diffusion AI 在建筑设计的应用1.0