ソニー、ゲーム向けリアルタイム手話翻訳の特許を申請

ソニーの特許: ゲーム内手話翻訳機能により、聴覚障害者や口のきけないプレイヤーでもゲームをプレイできるようになります。ソニーは、聴覚障害のあるゲーマーにとってゲームをよりアクセスしやすくすることを目的とした特許を申請した。この特許には、ゲーム内で異なる手話間のリアルタイム翻訳を可能にする技術が記載されています。

VR機器とクラウドゲームを利用してリアルタイム翻訳を実現

「仮想環境における手話翻訳」と題されたソニーの特許は、アメリカ手話 (ASL) を日本手話 (JSL) に翻訳し、日本語を話すプレーヤーが ASL プレーヤーを理解して使用できるようにする技術を実証しています。

ソニーの目標は、ゲーム内で手話のリアルタイム翻訳を可能にし、聴覚障害者や口のきけないプレイヤーがゲーム内での会話に参加できるようにするシステムを構築することです。この特許には、画面上に表示される仮想インジケーターまたはアバターがリアルタイムで手話でコミュニケーションできるようにする技術が記載されています。システムは、まずある手話のジェスチャーをテキストに変換し、次にそのテキストを別の指定された言語に変換し、最後に受信したデータを別の言語の手話ジェスチャーに変換します。

ソニーは特許の中で次のように説明しています。「本開示の実施形態は、あるユーザー (日本語話者など) の手話をキャプチャし、その手話を別のユーザー (英語話者など) に翻訳する方法およびシステムに関するものです。手話は地域の出身地によって異なるため、これには、1 人のユーザーの手話を適切にキャプチャし、母国語を理解し、出力として母国語を生成する必要があります。」

ソニーが提案する実装​​ソリューションの 1 つは、VR 機器またはヘッドマウント ディスプレイ (HMD) の活用です。ソニーは詳細を次のように述べています: 「いくつかの実施形態では、HMD は、有線または無線接続を介して、パーソナル コンピュータ、ゲーム コンソール、または他のコンピューティング デバイスなどのユーザー デバイスに接続されます。いくつかの実施形態では、ユーザー デバイスは、 HMD、ユーザーに仮想環境の没入型ビューを提供します ”

ソニーはさらに、あるユーザーデバイスがネットワークを介してゲームサーバー上の別のユーザーデバイスとシームレスに通信できることを提案しました。ソニーは、「いくつかの実施形態では、ゲームサーバーはビデオゲームの共有セッションを実行し、ビデオゲームとその仮想環境の正規状態を維持し、仮想環境に関するユーザーデバイスの状態はそれらと同期される。」と述べた。 🎜>

この設定を使用すると、ユーザーは共有ネットワークまたはサーバー上の同じ仮想環境 (ゲームなど) を共有し、対話することができます。ソニーはまた、システムの一部の実施形態では、ゲームサーバーは、各ユーザーデバイス間で「ビデオのレンダリングとストリーミング」ができるクラウドゲームシステムの一部である可能性があるとも付け加えています。