Услышав о камере на основе Raspberry Pi, вы, вероятно, представите себе классическую камеру, работающую на одном из фирменных датчиков Raspberry Pi Foundation с объективом, фотоматрицей и пр. Изобретение норвежца Бьёрна Карманна под названием Paragraphica едва ли можно классифицировать как камеру, однако оно действительно способно генерировать изображения – при помощи ИИ-алгоритма.
Paragraphica напоминает собой гибрид фотоаппарата и крота-звездоноса. На месте традиционного объектива у устройства располагается необычного вида конструкция, напоминающая антенну из научно-фантастических фильмов. По словам Бьёрна, этот элемент является своеобразной метафорой: крот-звездонос обитает под землёй и для охоты ему не нужно полагаться на свет. Для подземного существования эволюция одарила его необычной способностью «видеть» мир при помощи антеннообразных кожных наростов, которые за доли секунды обнаруживают и анализируют съедобность объектов, встречающихся на пути крота. Воспроизводя этот уникальный орган осязания в виде «объектива» своей камеры, Карманн отдал дань уважения альтернативным методам восприятия окружающего мира, недоступным для человека.
Кнопка спуска затвора запускает процесс генерирования изображения. Для создания фото Paragraphica использует данные со встроенного GPS-модуля, а также вносимые пользователем текстовые описания времени и обстоятельств съёмки, погоды, даты и деталей местности. Вместо видоискателя Бьёрн оборудовал свою камеру сенсорным дисплеем, при помощи которого он осуществляет основные настройки «съёмки». Кроме этого, на верхней грани устройства располагаются три ручки для дополнительных настроек. Первая ручка определяет «фокусное расстояние» – радиус «съёмки», в котором алгоритму необходимо осуществлять поиск данных. Вторая устанавливает уровень шума конечного изображения. И наконец, третья регулирует, насколько близко алгоритм должен следовать заданному пользователем описанию – в контексте работы генеративных ИИ этот показатель можно назвать резкостью.
По словам Карманна, обработка данных осуществляется при помощи нескольких открытых ИИ-API. В основе устройства лежит одноплатный микрокомпьютер Raspberry Pi 4, который Бьёрн разместил внутри напечатанного на 3D-принтере корпуса. Программное обеспечение для Paragraphica норвежец написал самостоятельно при помощи инструмента разработки веб-приложений от компании Noodl, однако по своей сути она представляет собой гибрид Python и Stable Diffusion API. На своём сайте Карманн продемонстрировал карту ПО, которую он использовал для создания эффективной коммуникации между камерой и многочисленными API, задействованными в генерировании изображений. К слову, Бьёрн сделал своё детище (веб-приложение Paragraphica) публичным, потому оценить его работу могут все желающие.
Автор изображений: Bjørn Karmann