Слепая камера на базе Raspberry Pi, создающая изображения по звуку

Слепая камера на базе Raspberry Pi, создающая изображения по звуку
Мексиканский инженер Диего Трухильо Писанти презентовал новую разработку: ею стал проект под названием Blind Camera («Слепая камера»).
Варшавское шоссе, д. 35, стр. 1 Москва, Россия +7(495) 926-85-96

Мексиканский инженер Диего Трухильо Писанти презентовал новую разработку: ею стал проект под названием Blind Camera («Слепая камера»). Решение базируется на архитектуре Raspberry Pi 3 B с применением TFLite. В портативное устройство встроена бортовая система, работающая по принципам искусственного интеллекта. Она фиксирует акустический фон окружающего мира и на его основе генерирует фотографическое изображение. Подключать камеру к внешним системами не нужно.

Для создание применяемой модели ИИ использовался язык программирования Python 3. Сама модель может быть эксплуатирована в работе с Tensorflow 2.  

Принцип использования «Слепой камеры» мало отличается от обычной — пользователю следует навести девайс на объект, который он желает зафиксировать, и нажать на кнопку. Blind Camera также оснащена большим передним рупором, что обеспечивает лучшее качество фиксации звука. С помощью ИИ-инструментов происходит анализ звуковой дорожки; затем в общих чертах создается картинка.     

Для этого проекта инженер-разработчик создал новую нейронную сеть и произвел машинное обучение на собственной модели с помощью ряда видеороликов, отснятых в Мехико. Именно на основе сравнения звуков в видеоматериалов нейронная сеть создает изображение-ассоциацию.