foar 概念建筑中的人工智能：对文本到文本、文本到图像以及图像到图像生成器设计的思考—论文—科学网-米乐m6棋牌官网

论文标题：

期刊：

作者：anca-simona horvath, panagiota pouliou

发表时间：15 jun 2024

doi：

微信链接：

foar是由高等教育出版社和东南大学建筑学院联合主办的全英文学术期刊

建筑学 / 城乡规划 / 风景园林

本刊已被 a&hci / cscd / scopus / doaj / cstpcd 收录

01 论 文 题 目 manuscript title

ai for conceptual architecture: reflections on designing with text-to-text, text-toimage, and image-to-image generators

概念建筑中的人工智能：对文本到文本、文本到图像以及图像到图像生成器设计的思考

02 作 者 authors

anca-simona horvath (a)* , panagiota pouliou (b)

(a) research laboratory for art and technology, aalborg university, aalborg 9000, denmark

(b) lighting design lab, aalborg university, copenhagen 2450, denmark

03 论 文 摘 要 abstract

in this paper we present a research-through-design study where we employed textto-text, text-to-image, and image-to-image generative tools for a conceptual architecture project for the evolo skyscraper competition. we trained these algorithms on a dataset that we collected and curated, consisting of texts about and images of architecture. we describe our design process, present the final proposal, reflect on the usefulness of such tools for early-stage design, and discuss implications for future research and practice. by analysing the results from training the text-to-text generators we could establish a specific design brief that informed the final concept. the results from the image-to-image generator gave an overview of the shape grammars of previous submissions. all results were intriguing and can assist creativity and in this way, the tools were useful for gaining insight into historical architectural data, helped shape a specific design brief, and provoked new ideas. by reflecting on our design process, we argue that the use of language when employing such tools takes a new role and that three layers of language intertwined in our work: architectural discourse, programming languages, and annotations. we present a map that unfolds how these layers came together as a contribution to making machine learning more explainable for creatives.

本文中，我们提出了一项通过设计进行探索的研究，针对evolo摩天大楼竞赛中一个概念建筑项目使用了文本到文本、文本到图像以及图像到图像的生成工具。我们在一个被收集和整理的数据集上训练这些算法，包括关于建筑的文本和图像。我们描述了这一设计过程，提出了最终的建议，反思了这些工具对早期设计的有用性，并讨论了对未来研究和实践的影响。通过对文本到文本生成器训练结果的分析，我们可以建立一个特定的设计概要来展示最终概念。图像到图像生成器的结果概述了先例的形状语法。所有的结果都是有趣的，也可以帮助提高创造力。通过这种方式，这些工具有助于深入了解历史建筑数据，帮助形成特定的设计概要，并激发新的想法。通过反思设计过程，我们认为，当使用这些工具时，语言的使用承担了一个新的角色，并且在作品中交织着三层语言体系：建筑论著、编程语言以及注释语言。我们展示了一张地图，诠释了这些层次是如何交织在一起的，从而使机器学习对设计师们来说更容易理解。

04 关 键 词 keywords

machine learning / 机器学习

stylegan2-ada / stylegan2-ada

rnn tensorflow / 循环神经网络 tensorflow

vqgan clip / vqgan clip

ad journal / ad 期刊

evolo / evolo杂志

conceptual design / 概念设计

architectural design / 建筑设计

05 章 节 标 题 sections title

1. introduction / 引言

2. machine learning in architecture / 建筑中的机器学习

3. design iteration 1 / 设计迭代一

3.1. design brief / 设计概要

3.2. dataset: text and images / 数据集：文本和图片

3.3. training the machine learning algorithms / 训练机器学习算法

3.4. results from the two workflows: training textto-text, text-to-image, and image-to-image algorithms / 来自两个工作流的结果：训练文本到文本、文本到图像和图像到图像算法

4. design iteration 2 / 设计迭代二

4.1. final design brief / 最终设计概要

4.2. developing the final design / 最终设计的发展

4.3. title / 题目

5. discussion / 讨论

5.1. reflections on integrating text-to-text, textto-image, and image-to-image machine learning tools in a conceptual architectural design process / 在概念建筑设计过程中整合文本到文本、文本到图像和图像到图像机器学习工具的思考

5.2. architecture, machine learning and language / 建筑、机器学习及语言

6. conclusion / 结论

06 主 要 插 图 illustrations

▲ 图一：基于我们展示的数据集生成混合文本和混合图像的两个工作流。© 本文作者

▲ 图二：part of the design space resulting from workflow a. top: hybrid texts were generated using tensorflow2 trained on the dataset of architectural texts. bottom: we used snippets from the hybrid texts as parameters (prompts) for training vqgan clip. © 本文作者

▲ 图四：part of the design space resulting from workflow b, where hybrid images were generated based on images of previous submissions to the evolo skyscraper competition using the stylegan2-ada algorithm. © 本文作者

▲ 图五：置于欧洲城市场所下的摩天大楼的渲染效果图。 © 本文作者

▲ 图六：应用于 assembled growth-babel 创作的最终设计过程 . © 本文作者

07 作 者 介 绍 authors’ information

anca-simona horvath

assistant professor

research laboratory for art and technology

aalborg university, denmark

my research investigates the relationship between emerging technologies, including computational design, digital fabrication, ai and bio-technologies, and creative practice, as well as their place in broader cultural contexts. i use design-based research as a main method of inquiry, and would call myself a reflective practitioner. my projects have covered a broad range of scopes and scales, from shoe insoles to urban planning. i have a background in architecture and work experience as an architect, urban planner, and computational designer in romania and denmark.

panagiota pouliou

research assistant

lighting design lab

aalborg university, denmark

08 原 文 阅 读 download link

长按上方二维码｜浏览本期精彩论文

▼ 点击下方词条 | 往期精彩不容错过

#期刊快讯#系列

#新刊上线#系列

#foar投稿指南#系列

#期刊知识科普#系列

#精彩文章#系列精选

期刊联络

高等教育出版社： 010-58556484

东南大学：025-83795543

刊物邮箱：foar@pub.seu.edu.cn

foar英文期刊交流qq群：21608832

在线投稿

刊物米乐app官网下载主页

《前沿》系列英文学术期刊

由教育部主管、高等教育出版社主办的《前沿》（frontiers）系列英文学术期刊，于2006年正式创刊，以网络版和印刷版向全球发行。系列期刊包括基础科学、生命科学、工程技术和人文社会科学四个主题，是我国覆盖学科最广泛的英文学术期刊群，其中12种被sci收录，其他也被a&hci、ei、medline或相应学科国际权威检索系统收录，具有一定的国际学术影响力。系列期刊采用在线优先出版方式，保证文章以最快速度发表。

中国学术前沿期刊网