😱 Что случилось: художник создал слепую фотокамеру, которая создаёт изображения по звуку.
🤔 А как: устройство работает на Raspberry Pi 3B. Спереди камеры прикреплён большой рожок — как и корпус устройства, он распечатан на 3D-принтере. Небольшой экран на задней стороне камеры служит видоискателем и отображает предварительный просмотр сгенерированных изображений.
Для обработки звука художник создал специальную нейросеть с помощью Python 3. Она обрабатывает аудиозапись и генерирует по нему изображение, которое соответствует звукам. Для обучения модели художник снял несколько видеороликов в родном Мехико, при этом каждый кадр был связан с захваченным звуком. По этому набору данных нейросеть обучилась кодировать звук и декодировать его обратно в изображение.
📺 Посмотреть:
🤨 И что? Художник говорит, что это в первую очередь художественный проект. И хотя основным творцом в нём выступает нейросеть, это тоже искусство. По созданным изображениям можно хотя бы отдалённо представить, как слепые люди воспринимают окружающий мир на слух.
👨🔧 Кто: художник Диего Трухильо Писанти, Мексика.
Источник: hackster.io
