Исследователи из Университета Вашингтона создали прототип беспроводных наушников VueBuds, которые оснащены крошечными камерами. Благодаря этому пользователи могут в реальном времени общаться с ИИ о том, что находится перед ними — например, попросить перевести текст на упаковке или узнать, что написано на книге.
Система работает просто: наушники снимают низкоразрешенные чёрно-белые изображения и передают их по Bluetooth на смартфон. Небольшая модель ИИ на устройстве быстро анализирует кадр и отвечает голосом. Всё обработка происходит локально, без отправки данных в облако. Когда камеры активны, загорается маленький индикатор, а пользователь в любой момент может мгновенно удалить сделанные снимки.
«Большинство людей не хотят носить умные очки или VR-шлемы из-за дискомфорта и опасений за приватность. Но почти все уже носят беспроводные наушники. Мы решили добавить в них визуальный интеллект, сохранив при этом высокую защиту приватности», — объяснил старший автор исследования Шьям Голлакота.
Камеры расположены под углом 5–10 градусов наружу, что обеспечивает поле зрения 98–108 градусов. При обычном использовании слепая зона почти не мешает. Две картинки с левого и правого наушника автоматически «сшиваются» в одну, чтобы ИИ отвечал быстрее — примерно за одну секунду.
В тестах с 74 участниками VueBuds показали результаты, сопоставимые с Ray-Ban Meta Glasses, хотя и используют значительно более низкое разрешение и полностью локальную обработку. Точность перевода и распознавания объектов составила 83–84%, а при определении автора и названия книги — 93%.
Всё это открывает новые возможности для повседневного использования ИИ без необходимости носить умные очки.
