ИИ сейчас преподает американский язык жестов: вот как научиться

Вы когда-нибудь задумывались о том, чтобы выучить язык жестов, чтобы общаться с глухими членами семьи, друзьями или другими людьми в сообществе? Если это у вас на уме, вам может быть интересно попробовать новый интерактивный веб-сайт, который использует ИИ для обучения американскому языку жестов (ASL). Платформа под названием Signs не только показывает, как выполнять жесты, но и использует камеру вашего устройства, чтобы проверить, правильно ли вы формируете движения рук и пальцев.

Как работает Signs?

Если вы новичок в ASL, начните с посещения сайта Signs. После прохождения приветственного экрана выберите опцию «Изучить ASL», чтобы начать обучение. Убедитесь, что ваша камера включена и правильно настроена, и что у вас достаточно места для комфортного выполнения жестов.

Занимательный 3D-аватар проведет вас через ваше первое слово: «Привет». Повторяйте жесты аватара, глядя на свое изображение на экране, чтобы выполнить жест. Обучение продолжается с другими базовыми словами и фразами, такими как «Спасибо» и «Кто».

После обучения вы можете выбрать уровень сложности. Чем выше уровень, тем сложнее жесты. Новичкам стоит начать с первого уровня, а тем, кто уже знаком с ASL, можно выбрать более высокий.

Аватар демонстрирует каждый жест, предоставляя спокойные и терпеливые инструкции о том, как правильно расположить руки и пальцы. Приятный звуковой сигнал звучит каждый раз, когда вы правильно повторяете жест, и вы зарабатываете очки для отслеживания прогресса.

Вы можете продвигаться до четвертого уровня, создавая прочную основу в ASL. Возможно, вам будет полезно повторять уровни, пока вы не почувствуете уверенность для перехода к следующему без уроков.

История создания Signs

Создание Signs было результатом совместной работы. NVIDIA, сотрудничая с Американским обществом для глухих детей, разработала открытую базу данных ASL. Тем временем нью-йоркская студия Hello Monday/DEPT, создавшая аналогичную платформу Fingerspelling, разработала платформу Signs для использования ИИ в интерактивном обучении.

Сайт приветствует разные типы пользователей. Те, кто хочет выучить ASL, могут погрузиться в интерактивное обучение. Опытные пользователи языка жестов могут загружать видео, чтобы расширить базу слов и жестов. Даже новички могут загружать свои попытки, чтобы обогатить коллекцию.

Каждое загруженное на сайт видео проверяется глухими людьми и сертифицированными переводчиками, чтобы обеспечить точность движений рук и пальцев. Хотя многие сосредотачиваются только на жестах рук, мимика и движения головы имеют решающее значение для общения с глухим сообществом. Разработчики исследуют способы включения отслеживания лица и других технологий захвата движения.

На странице «О нас» сайт заявляет: «NVIDIA и Hello Monday/DEPT считают, что каждый имеет право на самовыражение. В то же время NVIDIA и Hello Monday/DEPT признают, что некоторые сообщества не имеют равного доступа к средствам выражения. Мы создали эту платформу в первую очередь, чтобы помочь слышащим родителям, которые не знают, как общаться жестами, наладить связь и общение с глухими детьми и членами семьи. Мы рассматриваем это как возможность использовать ИИ во благо, чтобы обучать и вовлекать глухое сообщество значимым образом».