夜雨聆风学习资料网

ARTICLE · 1087198

超体实验室: 范斯沃斯AI Remix

超体实验室: 范斯沃斯AI Remix

——Kimi + Codex × Rhino + Blender MCP × Unreal Engine = Promptism,建筑聊天主义工作流

首次尝试用AI Agent 调用多个不同领域的工具,半自主完成一个完整流程的设计工作流。通过简要的自然语言Prompt,指挥,调度 Rhino 和 Unreal Engine等专业软件,完成从资料搜集、建筑模型生成,BIM设计,到设定环境、时间、气氛、镜头,拍摄一部四季短片。过程做了一些记录,少量录屏,编撰此文,供大家参考——也顺便聊聊那场逐渐依稀的爱情故事

一、邂逅

"我们走下河岸,在两棵巨大的黑糖枫树隆起的树根之间,找到了几把最惬意的座椅……在靠近岸边的水中,一只乳白色的苍鹭纹丝不动地立在自己波光荡漾的倒影脚下。这是第一次造访,而这片土地在往后的约二十六年里,将为我献上它的种种情致与倒影、它的美丽与摧残。"

 伊迪丝·范斯沃斯,回忆 1944 年,为购买周末度假屋的林地,第一次造访福克斯河畔

范斯沃斯住宅(Farnsworth House, 1945–1951)是密斯流亡美国后最实验性的作品。 密斯的名言,Less is more,少即是多,Farnsworth House是这句口号的实物注脚——四面透明的落地玻璃墙,让整个建筑向风景完全敞开,看似散落的家具对空间做着很克制的划分。所有的服务设施,卫生间,厨房等,都包在一个木质装修的核心筒里,目光所及之处,都是纯粹。
Less is more,没有就是一切。随着时间的流逝,Farnsworth House最终展现了它该有的全部诗意,成为了建筑学皇冠上的明珠。
其他的,就很八卦了。这栋房子的业主是伊迪丝·范斯沃斯医生(Dr. Edith Farnsworth),出生在芝加哥,受父亲的影响,少女伊迪丝便懂得欣赏自然之美。天资聪颖的她曾说服父母允许她到罗马去接受音乐教育。钟爱音乐与诗歌的范斯沃斯回到美国后却读了医学院的博士。1945 年,她在一次晚宴上认识了密斯——包豪斯最后一位校长。密大师当时刚从德国流亡到芝加哥、还没在美国站稳脚跟,而范斯沃斯医生刚在芝加哥郊外一小时车程的普莱诺(Plano)买了块福克斯河畔的地,想盖一栋周末度假屋。这次邂逅,让她决定把设计交给密斯,而且,聊的实在是投缘,伊迪丝告诉密斯他可以完全自由的创作。
范斯沃斯医生最初的想法是花个八千到一万美金,密斯预估的造价是四万美元,最终结算到了七万三到七万九之间——翻了将近一倍。更要命的是,两个超级个体单身男女为了这栋房子长期密切相处,好几个周末一起开车去福克斯森林看地、盯进度......,坊间和后世传记都暗示两人之间的情愫。后来范斯沃斯的姐姐回忆说:"我这个妹妹反正是被密斯迷住了,大概和他有过一段的"。密斯自己还留下过一句传得很广的俏皮话:"那位女士期待建筑师跟着房子一起过门。"
感情冷却之后就是法庭。1951 年,建筑师密斯发起诉讼,追讨未付的设计费;范斯沃斯医生则反诉密斯"欺诈",虚报造价,专业失准。她列了一个很长的清单:玻璃墙没有任何隐私,夜里像一只被展示的大灯泡;缺乏衣柜和储物;没有空调,夏天蒸笼,冬天结露;下大雨就漏水......。媒体看热闹不嫌事大,《House Beautiful》主编 Elizabeth Gordon 借机写了篇长文,把现代主义和极权划上等号,称这房子是"踩着高跷的玻璃牢笼";有些报纸的标题是"指控著名建筑师诈骗",《新闻周刊》更损,叫"玻璃屋互相甩锅"。
1953 年 1 月结案,密斯胜诉。范斯沃斯医生最后只付了 2500 美元和解,从此,传说中的这对“情侣”毕生再没说过一句话。💔
此后范斯沃斯医生在这栋"住不下去"的郊野玻璃房子里住了二十多年,在这里,她用意大利语写下了很多诗歌和笔记,按照自己的意愿把房子装饰的非常烟火气,甚至还弄来一对中国的石狮子镇邪。直到1972 年她把房子卖给了英国地产商彼得·帕伦博,然后只身移居佛罗伦萨。
不仅是成功的地产商,作为英国艺术委员会的兼职主席,彼得的眼光使他成为全球建筑界最具传奇色彩的现代主义建筑收藏家之一,他同时还购买了赖特的哈根住宅(Kentuck Knob)和柯布西耶的加乌尔别墅(Maisons Jaoul)。而作为密斯的骨灰粉,彼得坚信是密斯改变了现代建筑的进程,他花重金精心修复了范斯沃斯住宅,重现了密斯心中所念的极致纯粹。
2003 年,一群芝加哥捐赠者把房子买下来捐给了美国国家历史保护信托,今天,无价之宝范斯沃斯已经从郊野别墅化身为自己的博物馆(2006 年列入国家历史地标)。
时间流逝,物是人非,让我们用AI来重现这段世纪恩怨吧。

二、 Promptism Build,聊天主义建造

一切AI的起点都是一句Prompt。
这次我们用Kimi Agent(K3 模型)来操刀,让它调用Rhino MCP来建立这个房子的模型。 简单prompt任务要求后Kimi就开始工作了:

(任务开始之前需要打开Rhino,通过MCPStart命令启动MCP服务,之后Kimi会自动扫描服务端口,建立连接:)

随后Kimi开始访问哥伦比亚大学建筑与规划学院的范斯沃斯住宅专项研究网站,读取了项目的详细的介绍。 接着访问了知名建筑杂志Archeyes的范斯沃斯页面,下载了设计图纸和照片:
Archeyes建筑杂志的范斯沃斯住宅页面:
下载的图纸和照片:

读完所有的资料后,Kimi进行了一段很长很长的英文内心独白,大约四千字,纯粹技术性思维过程,包含对图纸和互联网资料的详细阅读笔记,确认了建筑的规格,参数,空间关系,构件尺寸和数量,独白最后列出了接下来的工作计划:将通过编写Python脚本,用上面推理获得的数据驱动Rhino建模:
并没有花太长时间,Kimi交付了Rhino模型,并且把截图发到了聊天窗。比较简单,但基本都对:
接下来的问题是,如何更好的表达这个作品呢,AI生图?实时渲染?

三、真实与虚幻

建筑渲染目前流行的做法都是把草模型交给AI来生图,GPT image或者Nano什么的。但即便是最前沿的AI模型在生成图片或是“真实”渲染时局限性依然很大,抽卡几乎是日常,尤其修改AI生成的那种永无止尽的幻觉,常常会让人怀疑这nm到底是碰到了人工智能还是人工智障......总有一天我们早上吃的包子都是世界模型高斯泼溅的!
实时渲染软件也很多,Lumion什么的,但是想想那些里三层外三层重叠繁复的菜单根本就记不住,即便记住了下场仍然是无穷尽的调材质,摆配景,调光线等等令人生畏的手搓劳动......还是回去祈祷抽卡成功吧。
如果让AI Agent来指挥实时渲染软件?这放以前肯定是不行的,那现在肯定是可以了吗?CLI or MCP?
想想黑神话悟空令人叹为观止的视觉质量(天量手搓),背后跑的Unreal虚幻实时渲染引擎。如果能用Agent把Unreal虚幻实时引擎接起来,那渲染简直不要太爽。GPTimage和Nano banana那些AI slop统统退后.....
UE官方也有城市建筑的渲染案例:
我知道Epic Games已经发布了最新的虚幻引擎,特别提到了利用大语言模型来加速创作(就是通过Agent来进行工作流的自动化)。
要知道Unreal的用户界面和菜单那是“臭名昭著”的复杂。这次同步发布的一个实验性的MCP插件,可以通过AI Agent来绕过那些繁杂的菜单。Unreal用了一个AI驱动进行城市设计的案例来介绍这个新的插件,一边聊一边建城市,看着还蛮有趣的。
关注
重播 分享 赞

那就让Kimi研究一下如何让Rhino连接到Unreal引擎(我已经安装了UE)
Kimi推荐方案C:MCP双桥联动最具想象力!就是说Agent可以同时操作Rhino和Unreal,双向指挥,让Rhino建模型,然后API自动丢给Unreal(告别中间文件格式),Unreal自己来搭配景,布光,渲染,我只需要看看截图确认效果,哈哈,这不就是真正的AI自动化场景嘛:
但是我这个Unreal版本不够新,不支持MCP。
为了实现AGI立刻更新Unreal至5.8:

再次尝试连接,MCP打通!现在可以试试通过Kimi聊天框直接启动和操作Unreal了(Unreal的UI设计师在骂人:我可是费了老鼻子劲给你们这些人设计菜单,咋说不要就不要了啊,还给不给人活路啊...):
Kimi截图,证明范斯沃斯已经从Rhino发送到了Unreal的场景中,创建了初始的阳光和大气环境,素模状态,Agent调度两个软件成功!:

Unreal默认场景是白色的素模,为了达到建筑效果图水准,Kimi Agent建议立刻通过Unreal的MCP工具更新住宅的材质,玻璃,钢材,石材,室外草地等等,这些材料列表是Agent从哥伦比亚大学的那个网站查到的:
除了添加真实材质,我的建议是同时把环境配景也升级一下,把Rhino的抽象球球树换成是真实的树。Kimi确认两个任务,然后开始上网找素材(终于不用自己来干这些事情了,有点期待哦!):
替换真实材质,增加树木,环境,看截图还真的是有内味儿了哈,信心大增!!! Kimi接着开始主动规划拍电影这个事情了:
那就太好了,先强调关于电影画面情绪与调性的一些想法,为了电影的质量,让Kimi把三维模型的细节也打磨一下。 Kimi拿到任务以后,做了一个三步实施计划:
Kimi重新审视了照片和建筑的技术描述,把Rhino模型先精修了一遍,钢柱改成了H型钢,踏步也做了相应调整,增加了室内灯光等等,然后把修好的模型同步到了Unreal场景中。 关键一步完成了:
根据四季与时间变化的任务,Kimi开始指挥Unreal调光,测试不同季节的环境贴图和色调,并且把截图发给我确认:
看着Unreal自己在那儿不断的摆弄光线,切换季节场景忙的还挺带劲的:

场景确定以后,根据之前设定的故事线(季节与时光流逝),Kimi写了一大堆python代码,包括四个季节的光线与环境设定,相机角度和运动,灯光的照度变化....这些脚本和参数都会用来驱动下一步的Unreal电影渲染:
Python代码开始源源不断的发送到Unreal,一个场景接着一个场景,Unreal自动渲染了每个季节的帧序列,最后,Kimi调用FFmpeg合成了所有的镜头,交付了第一段成片,说实话,这已经远超我的预期了:
关注
重播 分享 赞

根据第一次拍摄的效果,我提出了一些更具体的要求和任务,包括电影的调性,指定环境,时间,气氛和镜头等等。
为了更饱满的效果,为建筑创建一个树林密布的环境,给了一个比较明确的要求,开始有点经验了,给Agent安排任务,不能太啰嗦,要简要,明确,场景化等等,常常能事半功倍:
我也跟着Kimi去它最爱逛的素材网站Polyhaven去翻资料。经过仔细比较,为春夏秋冬指定不同的的天空,气氛,我认为这很重要,直接把素材链接发给Agent,同时指定场景的景别。
雪夜这一幕选了星空和银河,美呆了,拿到场景截图后Kimi都忍不住称赞有加,认为这个场景正是“安静讲述时间流逝”的镜头语言:

可以了,让Unreal正式拍一条看看效果🎬:
最后,让Agent找一段德彪西的音乐给配上🎵:
关注
重播 分享 赞

环境,建筑框架落定,现在检查另一支Agent部队的成果。 负责室内家具创建的Agent是大名鼎鼎的Codex。
让Codex读取工作文件夹里的范斯沃斯室内陈设的所有照片,把里面的各种家具模型全部建出来。
半个小时不到,Codex完成了读图,分类,写Python脚本,通过blender MCP建模全过程,最后还很贴心的把工作成果摆了一张完整截图,非常Nice!
通过Agent调度,让Blender把模型发送到Rhino模型里,然后同步到Unreal,大功告成!
左边Blender打开的是Codex建的范斯沃斯家具库,右边是Kimi根据原图纸和照片在Rhino里布置的家具。

增加几个人吧(💡小技巧:需要三维场景人可以通过Hyper 3D的MCP在Codex或者Kimi里直接创建,详见官网)

至此,详细的三维模型,Unreal气氛,环境,光线,时间都搭建好了,场景开始变得有生命了。
当所有的元素都出现在恰当的位置的时候,忍不住再凝视一番:
我做的最多的事情就是在UE各种浏览,寻找有表现力的相机角度,琢磨着采用什么样的光线,季节会有感觉。然后发指令给Agent让它抓当前UE视图的相机参数,排到渲染序列里去(突然想起以前去效果图公司盯效果图哈哈)。

所有的镜头都选好了,Kimi编写最后的Python拍摄脚本,准备开始大规模拍摄作业。 结果,Token耗尽!下个月再见(Kimi&%¥#%……此处骂人话占篇幅较多,省略):
赶紧的,乖乖的充钱继续:
最终合成:
关注
重播 分享 赞
最终拍摄成果!

👇 点个「在看」,把这篇转给你那个还在手动渲图的建筑朋友。


四、尝试一个新东西,创建一个BIM模型

Agent有Agent的语言,模型,Harness,COT。建筑师有建筑师的语言,图纸,BIM,CAD。
所以,创建一个BIM模型来作为这篇文章的收尾吧。
GPT6 Astra发布以后,开源软件的标杆,号称自由灯塔项目Blender也跟着大火特火!在开源社区有那么一小撮人在Blender的基础上开发了一个完全开源的BIM插件,叫Bonsai BIM(之前叫BlenderBIM Add-on),可以直接在Blender的三维环境里搭建IFC模型。我琢磨着既然Blender MCP已经完全融入了Agent工作流,那作为Blender的插件,Bonsai应该也能被覆盖吧?
没有先例,那就直接尝试吧,反正总得有人先吃螃蟹!

安装和启动kimi的Blender MCP插件:
让Kimi先了解Blender的BIM工作区和Bonsai插件,链路通了以后,开始创建范斯沃斯的BIM模型,这次没有看图,Blender直接和Rhino握手,调用Rhino模型里的数据。须臾间BIM模型完成:
IFC构件统计:
接着画图!终于动动嘴嘴就有图了hahahha
Blender MCP内置工具接口针对的基本都是游戏类通用三维建模和渲染,并不包含像Bonsai这样非常垂直的专业类建筑建模和图纸生成指令。如果是闭源软件,那你得等到官方的开发团队把指令封装好,发布出来才能使用。
这个时候开源软件的优势一下子就体现出来了,通过下载和阅读Bonsai的源代码,Agent搞明白它的内部逻辑和操作机制,马上现编Python脚本,扩充MCP功能,指挥Blender+Bonsai画图。
软件在过程中涌现!这是我们即将开启的AI Agentic时代,这立即让我产生一个设想,即回到源代码,创造一个AI原生的工具,Opus5.5刚刚发布,下一个试验已经在脑海里成型,未来和大家分享:
MCP导出PDF,收工!(多么熟悉的场景,无论多复杂的项目,无论用什么工具,无论在世界的哪个角落,Deadline最后都是导出PDF,收工!)
关注
重播 分享 赞

五、范斯沃斯后记:

算是有趣的探索,通过AI对建筑名作做了一次粗浅的再现,一场学习和演练。实际上并没有触及建筑设计的本质,即创造的代名词,以及它所代表的责任。
设计是如何产生的?我们已经无法共情那灵光一现的时刻,是什么样的力量推动着密斯,让他以如此的勇气和决心落笔?是福克斯河谷的林线?要拥有所有风景的唯一解?又或是和范斯沃斯医生的邂逅,真正“点燃“了密斯。而他又是如何洞悉这所有的细节,穿越时间的桎梏,直达永恒?
也许,范斯沃斯医生和密斯的冲突并不是有情人难成眷属,而是他们之间谁应该更爱这个建筑。密斯倾注了万分的心血,承包商埋怨他对钢材的加工和表面处理几乎到了吹毛求疵的地步。密斯并没有接受过正式的建筑教育,他从小就在父亲的石匠作坊里长大,接受过石材加工和绘图训练,在范斯沃斯施工现场,他因为细微的瑕疵拒收了超过一半的意大利石材。而范斯沃斯医生几乎在第一天就意识到她未来的度假小屋将会名垂青史。都是自己的孩子,谁说不爱呢?
爱而不得,便是煎熬。
哥伦比亚大学的网站上有着这个项目最翔实的资料,建筑,结构,工程,所有的细节,Agent所取不过万分之一。我们有幸经历人工智能开始展现一种前所未有的可能性,一些我们引以为傲的能力,技巧被快速的自动化,变得无足轻重。不仅是设计的发生,所有的理论和实践都将面临冲击。和历史上的历次伟大变革一样,机会属于机会主义者。
Promptism,聊天主义,这是我瞎编的一个词,和舒马赫派崔克的参数化主义同样可笑。古法建模,传统设计的施展空间在迅速的收缩,但是,Prompt无法代替设计,Agentic design也无法代替创造和责任,我们需要思考如何驾驭AI这个最强大脑,探索如何与之真正的协作,创造属于这个时代的价值。

六、一些心得

第一,AI 自动化了巨量的"手搓劳动",但是仍然需要建筑师的判断。改模型、换天空、摆 500 棵树、建一栋BIM模型,出一套设计图——这些动作和任务被压缩到分钟级之后,人的精力真正回到空间,构图、光线等真正想实现的意图上,建筑师的品味,判断力,会被放大。
第二,"理解Agent的能力"很重要。让 AI 替你查资料、比对照片建模,是比想象中快好几个量级。但是理解Agent的能力,需要转变的是思维模式,它能做的事情维度很高,需要我们思考的维度也会更高,在和Agent互动的过程中尽可能地拓展它的能力边界,多Agent协作,理想中的Agentic Team工作时代就会逐渐成型。
第三,思考设计的新模式。这是一个模拟的项目,关注的是过程。以后设计的发生,实现,交付,大概率会发生巨变。设想一下范斯沃斯医生活在今天,她还会“邂逅”密斯吗?也许她第一时间会问豆包哈哈。当然,她还会需要一个建筑师,她仍然会追求“人类经验的革新”——这是她对自己的家,密斯的作品的客观评价。她需要的是责任,交付,和超越,这些真正的人类意图,需要我们利用AI解放的能力和视野来实现。
第四,和AI一起进化。大模型,Harness,智能体仍然在飞速进步。AI独立完成一个设计的大部分任务的时间点正在迅速临近,保持方向感,避免沉迷在技术细节中,让工作和Agent彼此渗透,和AI一起进化。

 *全文无AI生成文字,放心阅读*

相关学习资料