声の字幕や手話の映像をARグラスにリアルタイム表示できるアプリがスゴイ
ASCII.jp / 2024年3月2日 14時0分
3月2日に、日本トーターグリーンドーム前橋にて、日本最大級のイノベーションプロジェクト「UPDATE EARTH」のイベントが開催されました。
スタートアップを中心としたブースではさまざまな企業や起業家が出店していて、面白そうなものばかり。最初に気になったのが「タタメルバイク」。次に気になったのが、signersの那珂慎二さんが手がける「ARグラス型補聴器」です。
ARグラスに字幕と手話をリアルタイムで投影
「音」は補聴器で、「声」はARグラスで『聴こう』――をコンセプトに開発。アプリケーションとARグラス「XREAL」を連動させて、グラスに話している内容をリアルタイムで字幕にして表示したり、手話の映像を投影したりできます。
実際に試してみました。今回はPCに接続して、PCのマイクで声を拾い、それをリアルタイムで字幕で表示させていたほか、PCのカメラを使って手話を映しているところも、左側に映像として投影させていました。
字幕の表示にもほとんどラグはなく、聴こえてきた声がリアルタイムで字幕になっていくさまには驚かされました。なお、手話の映像が必要ない場合はオフにしたり、字幕を大きくしたりすることもできるそうです。
現在はPCやスマートフォンでアプリケーションを起動して使用するのですが、那珂さんによると今後は補聴器と連動して、補聴器が取り込んだ声を字幕にするような機能も開発していきたいとのことでした。
那珂さんは、奥様の耳が不自由ということが理由で、補聴グラスを開発したいと考えるようになったそうです。補聴器はサイレンなどはしっかり聴こえるものの、人の声などは聴こえにくいそうで、それを何とかしたい……というのが開発の発端とのことでした。
また、現段階ではPCやスマートフォンとの接続が必須ですが、将来的にはグラス側にCPUを搭載させて、スタンドアローンでも動作するようになればいいなとも話してくれました。
将来的には翻訳グラスにも?
ちなみにこのアプリケーションにはリアルタイムでの文字起こし機能だけでなく、翻訳機能も搭載しているとのこと。もしかしたら将来、同じアプリケーションを利用することで、補聴グラスだけではなく翻訳グラスとしても活躍する日がくるかもしれません。
補聴グラスのアプリケーションは、まずはiOSでの提供を目指しているとのことです。こちらのアプリケーションとARグラスが普及すれば、多くの人に、より自由に声を届けることができるようになるのではないでしょうか。
この記事に関連するニュース
-
ARグラスをつないで空間ディスプレイを実現するスマホ型コンパニオンデバイス「XREAL Beam Pro」を体験
ガジェット通信 / 2024年7月2日 21時0分
-
「Vision Pro」世界展開で改めて俯瞰するXR業界 生成AIとセットで進化する空間コンピューター
東洋経済オンライン / 2024年7月2日 17時0分
-
「XREAL Beam Pro」は4万円以下で空間ビデオを撮影してスマートグラスと連携できる
ASCII.jp / 2024年6月21日 20時30分
-
「XREAL Beam Pro」実機レビュー 格安3Dカメラになるスマホ型デバイスが日本でも登場 CEOにも狙いを聞いた
ITmedia PC USER / 2024年6月19日 12時35分
-
ARグラス「XREAL Air」、4000円値下げで4万5980円に
ITmedia Mobile / 2024年6月5日 19時54分
ランキング
-
1迷惑メール転送すると送信元が行政処分される? Xでアドレス拡散、宛先の「迷惑メール相談センター」が明かす実情
J-CASTニュース / 2024年7月2日 11時0分
-
2新紙幣「一万円札と千円札の1の字が違う」SNSに違和感覚えるという声も…… 「1」のデザインが違う理由は?
ねとらぼ / 2024年7月3日 18時15分
-
3ヤマト運輸のLINEに「ありがとニャン」と返信したら…… “意外な機能”に「知らなかった」と驚き
ねとらぼ / 2024年7月4日 8時0分
-
4老後の趣味で気軽に“塗り絵”を始めて1年後…… めきめき上達した70代女性の美麗な水彩画に「本当にすごい…」「感動です」
ねとらぼ / 2024年6月29日 22時0分
-
5藤本美貴&庄司智春、真っ昼間に変装ゼロで“腕絡め”デート 大勢の注目浴びるも“モザイク9割”の結果で「笑った」
ねとらぼ / 2024年7月2日 15時1分
記事ミッション中・・・
記事にリアクションする
記事ミッション中・・・
記事にリアクションする
エラーが発生しました
ページを再読み込みして
ください