Paragraphica: 3D-печатный «фотоаппарат» с нейросетью вместо объектива

Paragraphica — это проект «камеры», формирующей изображения по контекстным подсказкам. В роли последних выступают расположение, время суток, погода и местные достопримечательности, а дальше в дело вступает искусственный интеллект, составляющий необходимую картинку по текстовому описанию.

Автор этого проекта — нидерландский дизайнер Бьорн Карманн, вдохновившийся кротами-звездоносами. Как и другие кроты, эти животные проводят большую часть времени под землей. От зрения в полной темноте толку никакого, поэтому мордочки звездоносов утыканы кожными наростами-антеннами. Наросты служат органами осязания, с помощью которых звездоносы формируют картинку окружающей среды.

Paragraphica же «прощупывает» окружающий мир по стандартному шаблону. Получив вводные данные — адрес, погоду, время суток и так далее — система пишет краткое, но детальное описание, а затем конвертирует его в изображение с помощью нейросети Stable Fusion.

В верхней части камеры расположены три регулятора, позволяющих настраивать основные параметры. Первый заменяет функцию фокусировки, задавая дистанцию, на которой камера выполняет поиск мест и другой контекстной информации. Второй заменяет регулировку зернистости, задавая «шумность» изображений при генерации искусственным интеллектом. Третий отвечает за четкость интерпретации: чем выше значение, тем точнее алгоритмы следуют исходному описанию. Сгенерированное описание отображается в видоискателе, а после нажатия на спуск камера выдает изображение.

Фактически, получаемые картинки выглядят не так, как видит фотограф, а так, как сцену представляет нейросеть в момент съемки, так что результаты никогда не соответствуют действительности на все сто процентов. С другой стороны, система очень интересно формирует образы, как бы встраивая в изображения настроения и эмоции искусственного интеллекта.

Несколько примеров:

Строго говоря, камера здесь тоже необязательна. Хотя Бьорн и собрал рабочий прототип в 3D-печатном корпусе, всю ту же функциональность можно получить от виртуальной версии. Если хотите, можете опробовать виртуальный контекстный фотоаппарат прямо сейчас. Ссылка есть на официальном сайте проекта.

Благодарим за наводку SPC.

А у вас есть интересные новости? Поделитесь с нами своими разработками, и мы расскажем о них всему миру! Ждем ваши идеи по адресу news@3Dtoday.ru.