Sony Патенты на языке жестов в игре

Sony делает значительный шаг к повышению доступности для глухих геймеров с недавно поданным патентом, направленным на обеспечение перевода на языке жестов в реальном времени. Патент под названием «Перевод языка жестов в виртуальную среду» подробно описывает систему, которая может перевести американский язык жестов (ASL) на японский язык жестов (JSL) и наоборот, улучшая общение в видеоиграх.

Sony Patents ASL для JSL Translator для видеоигр

Предлагается использовать устройства VR и работать над облачными играми

Патент Sony вводит новаторский подход, чтобы помочь глухим геймерам, позволяя переводам языков знаков в реальном времени во время внутриигровых взаимодействий. Технология, описанная в патенте, включает в себя виртуальные индикаторы или аватары, которые появляются на экране для выполнения языка жестов в режиме реального времени. Процесс начинается с перевода жестов знака одного языка в текст, за которым следует преобразование этого текста в другой указанный язык, и, наконец, преобразование данных в жесты знаков целевого языка.

«Реализации настоящего раскрытия связаны с методами и системами для захвата языка жестов одного пользователя (например, японского языка) и перевода языка жестов другому пользователю (например, английскому языку)», - объяснила Sony в патенте. «Поскольку языки знаков варьируются в зависимости от географического происхождения, язык жестов не является универсальным. Это обеспечивает необходимость надлежащего захвата языка жестов одного пользователя, понимания нативного языка и генерирования нового языка жестов в качестве вывода для другого пользователя на их родном языке жестов».

Sony представляет собой систему, реализованную с использованием устройств VR-типа или дисплеев, установленных на голову (HMD). «В некоторых реализациях HMD подключается через проводное или беспроводное подключение к пользовательскому устройству, такому как персональный компьютер, игровой консоль или другое вычислительное устройство», - говорится Sony. «В некоторых реализациях пользовательское устройство отображает графику для отображения через HMD, который обеспечивает захватывающее просмотр виртуальной среды для пользователя».

Компания далее предлагает, чтобы пользовательские устройства могли беспрепятственно общаться друг с другом по сети, облегченную игровым сервером. «В некоторых реализациях игровой сервер выполняет общий сеанс видеоигры, поддерживая каноническое состояние видеоигры и ее виртуальную среду, - сказала Сони, - и к которому пользовательские устройства синхронизируются в отношении состояния виртуальной среды».

Эта настройка позволяет пользователям взаимодействовать в одной и той же виртуальной среде или игре через общую сеть или сервер. Sony также упомянула, что в некоторых реализациях игровой сервер может быть частью системы облачных игр, которая «рендеры и потоковые видео» между каждым пользовательским устройством, улучшая общий опыт игр для глухих игроков, обеспечивая плавную и в реальном времени связь.