三菱電機株式会社は、世界で初めて※、タブレットやスマートフォン向けに、話した言葉を指でなぞった軌跡に表示できる音声認識表示技術「しゃべり描きUI(ユーザーインターフェース)」を開発しました。「しゃべり描きUI」に、お絵描きや多言語翻訳など様々な機能を組み合わせたアプリケーション「しゃべり描きアプリ」は、手話や外国語ができなくても、聴覚障がい者や外国人との円滑で多様なコミュニケーションを実現します。
- ※2016年2月9日現在(当社調べ)
開発の特長
- 世界初、話した言葉を指でなぞった軌跡に文字表示する「しゃべり描きUI」
- ・画面の好きな場所を指で長押しして話しながらなぞると、話した言葉がなぞった軌跡に文字で自由な形状で表示される
- ・指先から文字が湧き出る直感的で楽しい操作
- ・文字を書く手間がなく、筆談より手軽に会話
- ・様々な機能と組み合わせて色々な使い方ができる
- 多彩な機能で円滑で多様なコミュニケーションを実現する「しゃべり描きアプリ」
- ・「しゃべり描きUI」にお絵描き機能を組み合わせることにより、話した文字を、手描きのイラストなどと一緒に表示し、わかりやすく豊かに表現
- ・「しゃべり描きUI」に多言語翻訳機能を組み合わせることにより、表示した文字をその形状のまま翻訳でき、外国人にもわかりやすく意思表示可能
開発の概要
機能 | |
今回 | ・話した言葉を指でなぞった軌跡に文字表示する「しゃべり描きUI」 ・「しゃべり描きUI」に、その他機能を組み合わせた「しゃべり描きアプリ」 |
既存技術 | ・話した言葉を特定の場所に文字表示する音声認識機能 ・話した言葉や書いた言葉を翻訳する多言語翻訳機能 ・指で書いた文字を認識する手書き文字認識機能 |
今後の展開
2016年度中に大学などへ実証実験への協力を呼びかけ、早期の事業化を目指します。