Нейрокапром или как сделать плохо специально

Студенты кафедры средового дизайна ION РАНХиГС в рамках студии Андрея Киселева и Сергея Шестопалова занимаются исследованиями в области дополненной и смешанной реальности, тренировкой нейросетей, передовых инструментов проектирования и созданием интерактивных проектов для выставок и общественных пространств.

Студия стремится сформировать новый тип «гибридных» специалистов, которые могли бы работать на границе архитектуры, средового дизайна и иммерсивных технологий. В рамках экспериментов здесь тестируют новые подходы, которые заложат основу будущих индустриальных стандартов.

Студенческая команда проекта: Лера Митина, Полина Тимофеева, Алекс Порцева, Соня Старшова, Маргарита Монако, Аня Матвиенко, Софья Медведева, Валерия Рысева.

Слепки обыденности

Одно из последних исследований включает серию экспериментов с тремя разными направлениями: вернакулярной архитектурой пригородов, советским модернизмом и капиталистическим романтизмом.

В рамках исследования три нейросети натренировали воспроизводить архитектурные сюжеты, которые обычно в воспроизводстве не нуждаются – во-первых, потому, что и в реальности представлены в достаточном количестве, во-вторых, потому, что их архитектурная и эстетическая ценность либо еще не выявлена, либо ставится под сомнение. Это попытка использовать возможности нейросетей для исследования повседневности, и, в частности – рядовых, обыденных составляющих окружающей нас архитектурно-пространственной среды. В большинстве существующих экспериментов нейросети используются для улучшения изображений, основной целью является поиск красивого результата. Мы подошли к задаче с противоположной стороны.

Первый эксперимент проводили с Сергеем Колчиным, руководителем бюро LeAtelier. Нейросеть c открытым кодом Stable Diffusion вместе со студентами обучили с помощью фотографий частных домов подмосковных СНТ и поселков. В основе набора исходных данных (датасета) лежит паблик Сергея Колчина в @FOLKRUSSIANHOUSES с примерами вернакулярной среды дома из дачных СНТ поселков.

Студенты подготовили и разметили датасеты, а затем обучили систему генерировать достоверные и в то же время нереальные «слепки» нашей реальности. Пользователи и подписчики соцсети Сергея Колчина не заметили подмены.

Сергей Колчин

Когда я стал замечать на дорогах случайные шедевры, многие из которых из-за неожиданности своих решений после легкой доработки могли бы запросто оказаться на порталах archdaily или dezeen, я понял, что эта фактура должна быть сохранена и исследована. В конце концов, при внимательном взгляде понимаешь, что чисто количественно загородный вернакуляр и есть российская архитектура XX века. Ценность вернакуляра для меня в возможности интерпретации и поиске вдохновения для своих профессиональных проектов.

Упование на нейросети последнего времени носит двоякий характер. Красота создаваемого часто представляется неоспоримой и пугающей, вызывающей опасение за сохранение рабочих мест в ближайшем будущем. Вместе с этим в соревновании на поле «исконно русского домостроения» со всей его трогательной фантазийностью, смелостью применяемых форм и вынужденным разнообразием, кажется, пока ничья. Появление бесценных шедевров происходит примерно с той же частотой, что и с обычным сознанием, примерно один на 1000. Но этот один стоит того, чтобы генерировать дальше. Вернакулярная нейросеть вдохновляет и делает это на уровне обычного человека (это комплимент), теперь у меня точно хватит контента.

Второй эксперимент был посвящен генерации советского модернизма. Нейросеть обучали генерировать образы несуществующих советских зданий и сооружений вместе с одним из авторов телеграм-канала «Архитектурные излишества», историком архитектуры, экспертом в области советского модернизма Константином Антипиным.

Взяв за основу материалы Константина студенты собрали чекпойнт (библиотеку на основе которой работает нейросеть Stable Diffusion) и получили тысячи генераций – часть из них с трудом можно отличить от настоящих советских зданий. Здесь преследовали иную цель: для жизни нужно все больше дата-центров, архитектура в этих постройках и сооружениях просто-напросто отсутствует. Если на заре компьютерной эпохи дата-центры и здания для первых ЭВМ являлись произведениями архитектуры, то сейчас их облик полностью потерял эстетическую составляющую, уступив место утилитарным формам ангаров и складов.

Константин Антипин

В своем стремлении атрибутировать и исследовать архитектурные памятники советского модернизма и постмодернизма мы в первую очередь вынуждены опираться на современную этой архитектуре профессиональную периодику, сборники статей и книги. Именно они формируют наше первичное представление о том, что такое советская архитектура, когда мы решаем погрузиться в ее изучение. В то же время на российских улицах нас повсюду окружает предмет нашего исследования, и в силу множества причин он отличается от набора памятников, представленного в печати.

Подчиненный иерархии внутри крепко институционализированной архитектурной отрасли, взгляд советских обозревателей был искажен ограниченными возможностями путешествовать по огромной стране и смотреть на создаваемую среду своими глазами. Из регионов в центр по очевидным причинам отправляли фотографии своих лучших работ, в то время как «средняя» средовая архитектура оставалась вне поля зрения.

Телеграм-канал «Соварх» показывает не рядовую советскую архитектуру такой, какая она есть. Благодаря уличным панорамам на картах, мы можем «путешествовать» по разным регионам, не ограниченные прежними препятствиями. За короткий срок в четыре года в канале собрана гигантская база памятников, способная не только сформировать насмотренность у человека, но и, как оказалось, обучить нейросеть.

Капиталистический романтизм

Третьим направлением для эксперимента стала стилистика капиталистического романтизма – эпохи первых двух постсоветских десятилетий. Это яркие примеры постперестроечного пост-модернизма, которые редко вызывают симпатию в профессиональных кругах и не являются на сегодняшний день объектами культурного наследия.

В данной части эксперимента помогал Даниил Веретенников, автор термина капиталистический романтизм (капром) и сооснователь проекта «Клизма романтизма», посвященного исследованию и популяризации постсоветского архитектурного наследия. Несмотря на то, что этот архитектурный феномен еще не обрел статус, присущий модернизму, и не является таким же массовым, как вернакулярная застройка пригородных поселков, это часть большого исследования, которое проводят основатели проекта.

Парадоксально, но именно эта стилистика оказалась наиболее сложной для воспроизведения нейросетью. Здания эпохи капрома зачастую настолько странны, что даже сеть выдает не столь вызывающие результаты, как настоящие постсоветские архитекторы. Мы пришли к выводу, что это та стилистика, в которой наиболее сложно подготовить качественный deep fake. Хотя нам и удалось добиться некоторого количества вполне правдоподобных результатов, можно с уверенностью утверждать, что архитекторы России лихих девяностых и тучных нулевых пока превосходят нейросеть по странности и неожиданности своих решений.

Даниил Веретенников

Среди архитекторов, исследователей архитектуры и просто увлекающихся горожан до недавнего времени была популярна точка зрения, что капром – это неудачная страница нашего наследия, которую нужно в лучшем случае перелистнуть и забыть, а в худшем – исправить методом масштабных сносов и реконструкций. Отчасти такое мнение сохраняется и сегодня, хотя капром с каждым годом получает все больше понимания, внимания и даже любви от вчерашних противников. Нейросетевой эксперимент SINTEZ привел к совершенно неожиданным для меня результатам, которые, как мне кажется, послужат добрую службу в деле принятия и валоризации постсоветской архитектуры. Эксперимент дал понять, что архитектуру, которую многие считают простодушной, бездарной и халтурной, сымитировать оказалось труднее, чем памятники других эпох и направлений. Я хочу верить, что это объясняется нетривиальностью творческих подходов, которыми пользовались зодчие-капромантье, и это только подтверждает колоссальную недооцененность постсоветского наследия, которое нам ещё только предстоит открывать и осмыслять.