Выпускник Королевского колледжа искусств Чжаоди Фэн создал интерактивный инструментарий Promptac, который позволяет пользователям вводить подсказки в генераторы изображений ИИ, используя движения рук, а не текст.
В комплект входит сенсорный контроллер, который распознает цвета и материалы из реального мира, а также небольшие инструменты, которые пользователи крутят, сжимают, нажимают и сгибают, чтобы придать форму изменениям в цифровых проектах, созданных искусственным интеллектом.
Фэн создал Promptac, чтобы преодолеть разрыв между цифровым и физическим миром, стремясь обеспечить более интуитивный творческий процесс при проектировании с помощью ИИ. Обычно генеративные модели ИИ принимают подсказки только в виде цифрового текста или изображений.
Сделанные из пенопласта и силикона инструменты в наборе выступают в роли «переводчика» между действиями пользователя и ИИ.
Инструменты Promptac изготовлены из пенопласта и силикона.
Фэн протестировала продукты-прототипы с помощью инструментов искусственного интеллекта Midjourney и InstructPix2Pix, которые она использовала для создания базового изображения объекта путем ввода текстовой подсказки, такой как ваза, кружка или горшок с растением.
Затем это изображение можно изменить, взаимодействуя с набором инструментов Promptac.
Контроллер кончиком пальца используется для выделения цветов и материалов из реального мира для применения к объекту, созданному ИИ.
Контроллер содержит датчик цвета и датчик радиочастотной идентификации (RFID), который распознает палитру материалов с RFID-метками, генерирует текстовую подсказку для ИИ и изменяет внешний вид объекта на изображении.
Физические жесты преобразуются в изменения дизайна, созданные искусственным интеллектом.
Аналогично другим инструментам Promptac, которые Фэн называет «мягкими датчиками», пользователи применяют физические жесты, которые преобразуются в текстовые подсказки, чтобы изменить форму 3D-модели, представляющей изображение, сгенерированное ИИ.
Фэн разработал мягкие датчики, чтобы пользователи могли изменять изображения ИИ таким образом, чтобы имитировать создание вещей вручную, говоря, что это «все равно что играть с глиной».
«Датчик скручивания создает форму спирали, датчик защемления формирует неравномерное изменение формы и делает ее длиннее или уже, датчик нажатия сглаживает форму, а датчик изгиба формирует изогнутую или угловатую форму», — сказала она Dezeen.
Большинству инструментов для создания изображений с помощью ИИ требуется точно написанный текст, описывающий материалы, текстуры, цвета и формы для создания желаемого изображения.
Фэн создал Promptac, ориентируясь на не-дизайнеров, надеясь, что инструменты облегчат сообщение об изменениях в дизайне без необходимости использования точного языка.
«Этот набор предназначен для того, чтобы уменьшить зависимость от явных текстов при изменении подсказок, особенно для людей, которые больше полагаются на сенсорный опыт и взаимодействие рук с объектами для восприятия и выражения своих идей», — сказала она.
«Существует потенциал для повышения эффективности коммуникации при совместном проектировании с помощью этого комплекта, поскольку он может позволить недизайнерам и клиентам естественным образом сообщать дизайнерам о желаемых материалах, цветах и формах без специального словаря дизайнерских терминов».
«Я также думаю, что Promtac может принести пользу людям с трудностями или ограниченными возможностями при текстовом общении и может помочь в продвижении инклюзивности технологий в потенциальном будущем сценарии широкого использования генеративных инструментов искусственного интеллекта», — добавил Фэн.
Сенсоры в инструментах генерируют текстовые подсказки
Фэн начал разработку Promptac, исследуя традиционные ремесла. Она была проинформирована об эволюции инструментов дизайна и о том, как технологические достижения меняют то, как люди создают.
Она считает, что, хотя в изменении технологий есть преимущества, между нашими отношениями с физическим миром произошел пагубный разрыв.
«Несмотря на преимущества повышения эффективности, мы постепенно отключаемся от физического мира, дистанцируемся от производства и каким-то образом испытываем деквалификацию», — сказал дизайнер.
«Возможно, появится возможность вернуть традиционные способы изготовления и физическое ощущение изготовления обратно в наш творческий процесс и опосредовать наши отношения с технологиями».
Promptac стремится добавить физический аспект в цифровой дизайн
В настоящее время Promptac является прототипом, но Фэн надеется разработать продукт для различных типов конструкций и в более крупных масштабах с помощью исследователей искусственного интеллекта.
Хотя инструментарий в настоящее время работает путем преобразования движений в текстовые подсказки, которые могут распознавать модели ИИ, Фенг считает, что можно создать новую модель ИИ, которая напрямую считывает движения.
«Можно обучить новую модель, которая напрямую преобразует манипуляции руками или другие осязаемые взаимодействия в изображения», — сказала она.
«Влияние ИИ на дизайн и творчество зависит от того, как он предназначен для использования», — добавил Фэн. «Нам нужна лучшая точка соприкосновения, чтобы взаимодействовать с ИИ и позволить технологиям способствовать творчеству».
Другие проекты, разработанные с использованием ИИ, включают складной диван от Space10, в котором ИИ был признан «творческим сотрудником», и проект, в котором ИИ использовал изображения мятой бумаги для превращения изображений скомканной бумаги в архитектурные модели в стиле известных архитекторов.
Фото и видеосъемка — Чжаоди Фэн.
Иллюстрация Селины Яу
Айтопия
Эта статья является частью серии AItopia от Dezeen, в которой исследуется влияние искусственного интеллекта (ИИ) на дизайн, архитектуру и человечество как сейчас, так и в будущем.
