テクノロジー TECHNOLOGY

ほぼタイムラグなしで、話した言葉をテキスト化する『LiveTalk』【富士通株式会社:2020東京を支える企業】

宮本さおり

外観から分かりにくい障がいの一つ、聴覚障害。国内で聴覚障がい者として認定を受けている人は約34万人と言われている。聴力レベルが低いという人まで入れると、その数は膨れ上がり約2000万人が耳の聞こえの悪さで苦労していると推定されている。聴力が少しでも残っていれば、補聴器や人工内耳といった手だても考えられるが、費用もかかり、また、環境により音が聞き取れないこともある。耳の不自由な人たちは、こうした不便さにいわば“妥協”して生きてきた。この「不便さの妥協」を食い止めるようなものが今、富士通株式会社で開発されている。

2020東京オリパラの公式スポンサーとなった富士通では、「3Dレーザーセンサー」による採点支援など、競技に直接的に関わる分野の開発をはじめ、2020東京オリパラに向けた様々な取り組みが始まっている。聾唖者をまじえた会議などで活用が見込まれるツールとして、販売がはじまった「LiveTalk」に手軽さを加え、健常者とも気軽にコミュニケーションが可能になるというのだ。このツールを使えば、手話を知らないボランティアも、会場への交通案内をスムーズに行うことが可能となる。多言語にも対応、障がいだけでなく、言語の壁をも飛び越える画期的なツールが誕生しようとしている。

きっかけは内部からの声

開発のきっかけについて語る大谷さん

「社内には聴覚障がいを持つ社員もいます。『FUJITSU Software LiveTalk』は、社内の会議などで、円滑なコミュニケーションがとりたいという彼らの願いから生まれました。普通の会話と仕事についての会話は性質や内容が異なります。一方的に話す方もいるので、そのような状況でもコミュニケーションをとりたいとの思いから、もともと研究されていた技術を富士通で開発販売するようになりました。今、隣にいる渡邉さんも社内会議でLiveTalkを使っています」(東京オリンピック・パラリンピック推進本部/プロモーション企画・推進統括部 統括部長大谷真美さん)

実際に使い方をレクチャーしてくれる東京オリンピック・パラリンピック推進本部/ビジネス企画・推進統括部の渡邉儀一さん(左)と株式会社富士通ソーシアルサイエンスラボラトリ 公共ビジネス本部 第三システム部 尾崎 純子さん(右)

利用方法は簡単だ。ソフトウエアを購入し、パソコン端末に入れれば使えるようになる。マイクを通して発話された音声をクラウド上の音声認識エンジンが文字に変換、すばやくデータ化されてディスプレイされるという仕組みだ。話している途中でもどんどんテキスト化、しかも多言語化できるというのが富士通の技術だという。取材班も試させていただいたが、多少の誤変換はあるものの、確かに話すそばから文字化されていった。

「弊社のイベントで使った際は予め打ち込んだものが入っていると思われるほどでした。登壇者が言い間違えた時にはそれもそのまま表示されますので、その時になって、みなさん“えっ”と驚かれるくらい、そのくらいの速さで文字化されていきます」と話すのは、この開発に関わる 株式会社富士通ソーシアルサイエンスラボラトリ 公共ビジネス本部 第三システム部 尾崎 純子さん。キーボードを使った入力も可能で、コミュニケーションが取りやすいようにとスタンプも用意した。この「LiveTalk」は、富士ゼロックスサービスクリエイティブ株式会社ほか120社以上の会社や自治体ですでに利用がはじまっている。また、大学でも近年、導入する所が出てきている。

発話するとすぐさま文字化されたものがディスプレイされる
聴覚障がい者はキーボードを打つことで発言が可能に

別アプリで画像やデータを表示し、その上に字幕のように発話内容を表示することも可能

聴覚障がい者が大学に入学した場合、授業の履修で手助けとなるのがノートテイカーというボランティア。だが、ここにも“課題”があった。ノートテイカーは、聴覚障がい者の隣に座り、ノートなどに先生の話すことを書いていく人のことで、聴覚障がい者はこのノートを頼りに授業に参加する。しかし、相手が読むことができる文字を人間が手書きで書くのは1分間に70文字程度。つまり、先生の発言をそのまま文字化していくことは難しく、内容が要約されてしまうこともあるのだ。

「『LiveTalk』の場合、先生の話が瞬時にそのまま文字化されるので、“授業に参加している”という意識を強く持てると好評です。サポートの人が書くとタイムラグが生じますが、『LiveTalk』はタイムラグはほぼありません。また、発話が要約されることもないので、聴覚障がい者の方からは『情報量が広がった』との声が聞かれました。先生の話すテンポや冗談など、今まで感じ取れきれなかった場の雰囲気的な部分も含めて受け取ることができるようになります」(大谷さん)

多言語翻訳にも挑戦

聴覚障がい者のために開発された「LiveTalk」だが、富士通では今後、多言語への翻訳ツールとしての展開を考えている。
「多言語、英語や中国語など、最終的には19ヶ国語まで対応する予定です。2020東京オリパラなど、海外から沢山のお客様がいらっしゃった時に多言語でいろいろなことを表示できたり、とうぜん聴覚障がいをお持ちの方にもお使いいただけるように力を入れているところです。」(大谷さん)

これが可能となれば、世界中の人々から言語という壁が取り払われることになるだろう。また、会議の場やイベントだけではなく、病院の受付や病室での患者と看護師とのやりとりなど、さらに活用の場を広げられる様、開発に取り組んでいる。

 手軽さをプラスしたイベント型「LiveTalk」を発表

この11月にリリースになったのが「LiveTalk」をさらに手軽に使えるようにしたものだ。「これまではクライアント端末にソフトをインストールしていただく形だったので、イベントなどで使用する場合は、サブスクリーンなどに発話内容や翻訳を投影していました。しかし、この方法だと座席や対応できる言語数に制約があります。そこで、登壇者が発話に使う『LiveTalk』のクライアント端末のみを用意すれば、イベントの期間中に利用申し込みをした来場者は、QRコードから発話内容や翻訳を確認できるというサービスをはじめました。」(尾崎さん)

 「東京2020大会では、9万人のボランティア募集がかかると聞いています。そういう中で、会場では聴覚障がい者向けに手話通訳もあるとは思いますが、観光案内や会場へのルート案内など、会場以外の場面でもこうしたツールも活用すれば、より多くの人に東京2020大会を楽しんでいただけるようになると思っています」(大谷さん)

 聴覚障がいの壁だけでなく、言語の壁をも飛び越えようとする富士通の技術。“不便の妥協”を突破する技術革新を2020東京オリパラを通して私たちは目にしようとしている。

(text: 宮本さおり)

(photo: 壬生マリコ)

  • Facebookでシェアする
  • LINEで送る

RECOMMEND あなたへのおすすめ

テクノロジー TECHNOLOGY

遂に発表された『bespo』と『MIGRA』。 シーティングポジションの最適化は、新時代へ

長谷川茂雄

株式会社RDSが手掛けた新たなプロダクト『bespo』と『MIGRA』『CORE-Ler』の3つが「国際福祉機器展」にてお披露目された。『bespo』は、車いす使用時のあらゆる身体データを計測し、シーティングポジションの最適解を導き出すシミュレーター、『MIGRA』は、それらのデータを元に、実際にフィット具合を確認できる“設定可変型”車いすだ。両者は、ともにデータを共有し、常にユーザーのパファーマンスを最大化できる。『CORE-Ler』は、人の歩き方から認知症などの傾向を読みとるものだ。いずれのプロダクトもさまざまな数値の計測とデータの可視化によって、これまで難しいとされていたことを可能にすることに挑戦した。RDS 代表・杉原行里にこれらプロダクトの解説を仰ぎつつ、『bespo』のデモンストレーションに参加した元パラリンピアン・根木慎志氏にもお話を伺った。

SS01より間口が広く、
対応力が高い、それが『bespo』

RDSが、パラアスリート・伊藤智也氏と二人三脚で車いすのシーティングポジションを研究し、その最適解を導き出すシミュレーター『SS01』を完成させたのは2019年。

それをブラッシュアップさせるべく、国立障害者リハビリテーションセンター研究所(以下:国リハ)や千葉工業大学未来ロボット技術研究センター(fuRo)との共同研究を推し進め、誕生したのが『bespo』だ。

会場でも一際目を引いたRDSのブース

杉原:SS01から大きく進化した点は、胸椎損傷、頚椎損傷の方を問わず対応可能になったこと、そしてトルクや重心位置の計測精度が圧倒的に上がったことです。

加えて、我々が独自に作ったウェルグラフというシステムと連携することで、データの取り込みがさらに効率化され、またデータをより多くの人と共有できるようになりました。

今後は、bespoが機械学習をして、ユーザーのデータを入れると、狙い撃ちで最適なシーティングポジションを割り出してくれる、そんな機能を見据えています。

根木慎志氏が『bespo』にて、シーティングポジションを測定

『SS01』は、ヴィジュアルインパクトに加えて実際のプロダクトも大きかったが、『bespo』はよりコンパクトになった印象がある。とはいえ近未来的なデザインは受け継がれ、洗練されている。

杉原:実際に、SS01の無駄やオーバースペックを取り除いて、よりスマートになりました。ハンドリムは取り外しが可能になって、後ろに3セット分付属しているので、ユーザーの好みやデータに合わせて組み替えも可能です。

一目でわかるバランスや数値に興味津々の根木氏

シーティングの角度、重心、バランス、リムを回した時のトルクなど、全てが瞬時に数値化される

“より一般ユーザー目線を重視した『SS01』”。『bespo』は、まさにそれを体現している。国リハで繰り返された臨床研究や知見を活かし、幅広いニーズに対応するために、細部まで改良されたのだ。

杉原:座面と背もたれを一定の角度を保ったまま倒すチルト角や、フットレストの角度の可動域も広がりました。『SS01』は、レースも意識していたので、どうしてもアスリート目線に偏った部分がありましたが、『bespo』は、一般ユーザーのちょっとした使い勝手まで配慮しています。

とはいえ、レースを目指したアスリートの方のパフォーマンス向上にも役立ちます。単純に用途の枠が広がったイメージですね。

初出展で気分も上がり気味の杉原

最適なシーティングポジションを見つけ出すことは、ユーザーが誰であれ有意義なことだ。間口が広がったことで、今後より一層、病院や施設での導入機会は増えそうだ。

重心やバランスを数値化して理解すれば、
車いすとの付き合い方は変わる

実際に『bespo』のデモンストレーションに参加した根木慎志氏に、体験した感想を伺った。

根木:18歳で車いすユーザーになってから約40年が経ちますが、これまで自分が最適だと思っていたシーティングポジションは、そうではなかったのかもしれません。今日は、それがわかっただけでも大きな収穫でした。自分の体の傾きやバランスが一目でわかるのは、大きなことだと感じました。

シドニーパラリンピック 車いすバスケットボールで日本代表のキャプテンを務めた根木氏。

車いすバスケの元競技者としても、これまで様々な車いすを使用してきた根木氏。『bespo』の登場によって、抽象論で語られた車いすの快適性が、今後数値化されていくことは革新的だと語る。

根木:アスリートの活用はもちろんですが、これだけ細かなデータが可視化できるのであれば、損傷の度合いや、年齢に合わせて具体的な調整ができる。まず、自分の現状を数値で知ることから始めて、それを改善すれば、生活の質は間違いなく上げていけると思います。

無駄を削ぎ落としたスタイリッシュなデザインの『MIGRA』

確かに『bespo』は、多くのユーザーの新たな快適性の基準を作る上で、重要な役割を担うかもしれない。

そして『bespo』で得たデータを、生活の中でリアルに活かすための実践的な車いすとして、同時に発表されたのが、『MIGRA』だ。

“設定可変型車いす”と呼ばれるこのプロダクトは、『bespo』と合わせて活用することで、ユーザーを強力にサポートする。

『bespo』と『MIGRA』がリンクすることで
データの精度は劇的に上がる

杉原:『bespo』よりも簡便的に、でもリッチデータを取ることもできるのが『MIGRA』です。画期的なのは、『bespo』で得たデータを元に、工具レスで設定を変化させてシーティングポジションが最適化することができるとことです。

より汎用性が高い車いすでありながら、『MIGRA』にもセンサーが内蔵されているため、重心の位置や加速度といった必要最小限のデータ採取ができる。

杉原:しかもユニークなのが、『MIGRA』にはアプリケーションが入っていまして、これまでご自身が乗っていた車いすを撮影すると、設定が可視化され、そのデータを元に『MIGRA』に反映することができるのです。

専用アプリをダウンロードしてタブレットで撮影をすれば、シーティングデータが得られる

加えて、『MIGRA』で取ったデータは、『bespo』と同じサーバに溜まっていく。すなわち両者のデータは共有され、違いにアップデートしながら、最適なシーティングポジションを見つけ出していくことができるのだ。

杉原:伊藤選手と『SS01』を作った時に、シミュレーションで出した数値をどこまで信頼していいのか? という疑問は常にありました。実機である『MIGRA』を作ったことで、その疑問は解消されると思っています。

『MIGRA』は、あらゆる調整が工具レスで行える構造

今後、『bespo』で取ったデータを『MIGRA』で実践し、その齟齬や『MIGRA』で得られたデータは『bespo』にフィードバックされる。それにより、シーティングポジションの最適解の精度は劇的に上がることになる。

杉原:『bespo』と『MIGRA』があれば、トライ&エラーに時間とコストがかかるリハビリの現場で、より有意義なデータ採取ができて、リハビリの新しいアイデアも生まれていくと考えています。

さらに、車いすというプロダクトを作る上での職人的な技術や感覚を数値として可視化することもできます。いわゆる“技術継承”にも活用ができれば本望ですね。

さらに会場で人目を惹いていたのが『CORE-Ler』。一見すると何をするものなのかが分からないが、説明を聞いた来場者は一様に感嘆の声を上げていた。

当日の会場で流されていた『CORE-Ler』のプロモーション映像。

 

会場には伊藤智也選手(一番左)も駆けつけた

多くの高齢者が悩まされる認知症。歩行解析から認知症リスクを読みとり、対策を行なうことで発症を遅らせることができるとすれば、健康寿命を伸ばすことも不可能ではない。また、車いすの最適なシーティングポジションを追求することは、ユーザーが質の高いライフスタイルを実践することの近道となる。『bespo』と『MIGRA』の登場により、その道筋はまた少し鮮明になった。

これまで、車いすの快適性は抽象的、感覚的なものとして捉えられていたが、それが数値により明確化することが当たり前になる。そんな未来は近いのかもしれない。

(text: 長谷川茂雄)

(photo: 増元幸司)

  • Facebookでシェアする
  • LINEで送る

PICK UP 注目記事

CATEGORY カテゴリー