Созданы умные очки, которые переводят язык жестов в голос

Пока аксессуар может переводить медленно и по одной букве. Создателю есть над чем работать.
Источник: Nekhil / Hackster
Источник: Nekhil / Hackster

Энтузиаст под ником Nekhil смастерил смарт-очки, которые переводят язык жестов в речь. Гаджет будущего сможет упростить жизнь немым людям. Теперь они смогут коммуницировать даже с теми, кто не понимает языка жестов.

Корпус очков был напечатан на 3D-принтере. По центру аксессуара находится камера, которая снимает руки пользователя. Когда владелец начинает общаться с помощью языка жестов, камера фиксирует каждый жест и передает информацию на встроенный компьютер. Затем одни ИИ-модели переводят жест в речь, а другие ИИ-алгоритмы отвечают за озвучку. Автор идеи признался, что пока очки идеально работают только с американским жестовым языком (ASL).

Нейросеть VIAM, установленная в умные очки-переводчики. Именно эта ИИ-модель отвечает за перевод жестов в голос.
Нейросеть VIAM, установленная в умные очки-переводчики. Именно эта ИИ-модель отвечает за перевод жестов в голос.

В основе смарт-очков лежит микрокомпьютер Raspberry Pi Zero 2 W. Звук воспроизводится через один динамик мощностью 3 Вт. Также есть встроенные батареи и порт USB для зарядки, но автономность гаджета не раскрывается.

Инженер уточнил, что все компоненты для создания очков можно приобрести почти в любых онлайн-магазинах. Список деталей и подробная инструкция по проектированию смарт-гаджета доступны на портале Hackster.

Ранее в США выпустили очки, которые умеют менять диоптрии по одному касанию пальцев.