Paragraphica – первая в мире «камера», которая не снимает, а генерирует фото на основе местонахождение пользователя с помощью ИИ

Дизайнер Бьорн Карманн создал необычный арт-проект под названием Paragraphica. Это компактное устройство, имитирующее фотокамеру, но не имеющее объектива.

“Камера” работает, собирая данные о своем местонахождении с помощью открытых API. Объединяя информацию об адресе, погоде, времени суток и близлежащих местах Paragraphica создает абзац текста, подробно описывающий текущее местоположение и момент съемки. Используя искусственный интеллект для преобразования текста в изображение, устройство создает “фотографию”.

https://twitter.com/BjoernKarmann/status/1663496103998750721

Полученное изображение – это не просто снимок, а сложное отображение места, где находится пользователь, и как модель ИИ его «видит».

Место, текстовое описание и сгенерированное Paragraphica изображение:

Paragraphica – это полностью вручную собранное устройство, построенное на Raspberry Pi 4 с использованием кастомной электроники, сенсорного экрана и напечатанного на 3D-принтере корпуса.

На месте объектива в камере расположена антенна, дизайн которой напоминает усики крота.

«Звездоносый крот, живущий и охотящийся под землей, считает свет тщетным. Поэтому он эволюционировал, чтобы воспринимать мир с помощью пальцеобразных усиков, которые наделили его необычным и умным способом «видеть» – пишет Бьорн Карманн.

Кроме сенсорного экрана, управление Paragraphica осуществляется с помощью трех поворотных дисков.

Первый диск ведет подобно фокусному расстоянию в оптическом объективе, но контролирует радиус (метры) области, в которой камера ищет места и данные. Второй диск можно сравнить с зернистостью пленки, поскольку значение между 0,1 и 1 создает шумовое зерно для процесса диффузии изображения ИИ.

А третий диск регулирует масштаб наводки. Увеличение наведения заставляет ИИ точнее следовать абзацу. По аналогии с традиционной фотокамерой, чем выше значение, тем “резче”, а чем ниже, тем “размытее” фото, соответствующее фокусу.

Для работы программного обеспечения Paragraphica автор проекта использовал Noodl, код Python и Stable Diffusion API. Он также запустил сайт, где прямо через браузер можно «сделать снимок» своего местопребывания, однако сейчас он не справляется с наплывом посетителей и работает с перебоями.

Пока Бьорн Карманн не планирует превращать устройство в коммерческий продукт, впрочем, есть вероятность, что идеей могут заинтересоваться другие производители.