東京オリンピック・パラリンピックのチケット抽選申込受付も始まり、開催までいよいよか、とカウントダウンを感じられるようになった。そんななか、近年ではスポーツ観戦の楽しみ方が多様化し、最新テクノロジーによる全く新しい体験が新機軸として注目を集めている。NTTドコモは、2017年にスマートライフ推進部にスポーツ＆ライブビジネス推進室を発足し、スポーツやエンタテイメントの領域を市場として広げる施策に取り組んでいる。AR、VR など HERO X ではすでにお馴染みとなった最新技術は、スポーツ観戦でどのように取り入れられ、どんなシナジーが生み出されるのか。同部署の企画開発担当部長 滝澤 暢氏に話を伺った。

高速大容量、低遅延、多端末接続。
5Gの回線だから楽しめる新しいスポーツ体験を提案中

NTTドコモが提供する新しい体験を語る上で欠かせないのが、2020年に本格的にサービス開始予定の5G (第5世代移動通信システム)。すでに米国と韓国では商用化が始まっており、環境次第では、現行 (4G）の何十倍もの伝送速度が出せると言われている。

「5Gで実現するのは高速大容量、低遅延、多端末接続。同じエリアでも多くの端末が繋げることで、サービス内容がより豊かになっていくと思われます」（滝澤氏）

同社では、5Gの回線を活用した施策を試験的に行い続けており、2017年12月には、ラグビーチーム・NTTドコモ レッドハリケーンズとNEC グリーンロケッツの試合で実証実験を行った。その際活用された「ARライブ映像視聴システム」は、今後の普及に大きく期待が寄せられている。

「ARライブ映像視聴システム」とは、新しいスポーツ観戦スタイルを提供するシステム。スマートグラス上に投影されているコンテンツを、手の動きで自由な位置に動かしたり、動かしたコンテンツの表示位置に応じて大きさを変えることができる。実証実験では5Gを活用して、高速大容量化とタイムラグのない複数カメラ映像の同時配信を実現し、観戦時、肉眼だけでなく同時に映像や解説、選手情報などのコンテンツを楽しめる環境を構築した。

スタジアムの来場者がスマートグラスを装着すると、中継カメラで撮影したフィードが映し出される。自身が肉眼で見ているものとは違った視点での観戦が同時に楽しめるというわけだ。また、スマートグラスに表示されるのは、生中継映像だけでなく、選手のプロフィールや試合内容を解説するテキストなど、観戦がより充実するコンテンツ群。この表示されるコンテンツをリモコンなどの端末ではなく、手を直感的に動かしながら操作できることもこのシステムの大きな特徴で、これは「空間インターフェース」という同社の特許技術である。

さらに、映像をリプレイすれば、見逃した部分を即時にキャッチアップすることもできて、競技やルールに詳しくなくても観戦を楽しめる仕組みになっており、もし来場者がライトファンだとしても簡単に楽しめそうだ。

「AR技術はラグビーのほかにもバレーボールや水泳などでも実証実験を行っておりますので、スマートグラスに表示するコンテンツがどんなものだったら、その競技をより楽しめるものにできるのかが、今後工夫を加えていくべきところですね。ライブ映像が良いのか、リプレイが良いのか、それとも選手の出した記録が世界記録と比べてどうだったというデータを出すのが良いのか…。競技によって異なる楽しみ方を見出していきたいです。

また、映像が突然目の前に現れてはびっくりするでしょうから、ユーザーが希望するタイミングで表示できるとか、邪魔にならない見せ方についても、これから工夫が必要になるはずです」（滝澤氏）

フェンシングにおける日本人初のメダリスト、太田雄貴選手とリオ2016パラリンピック女子車いすフェンシング金メダリストであるベアトリーチェ・マリア・ヴィオ選手のエキシビションマッチでは、複数台のカメラで様々な視点から撮影した映像を、東京スカイツリー スカイアリーナにある多様なモニターに同時に伝送して映し出し、まるでその場でフェンシングの試合が行われているかのようなマルチアングルでの観戦を提案した。

特設のタッチパネルで、観たいアングルの映像を自由にスイッチングしながら観戦を楽しむという、来場者にとっても新たな視聴体験となったこの施策は同社のプロジェクト「FUTURE-EXPERIMENT」でもフィーチャーされている。

 会場と観客、観客同士、会場とまた別の会場…
数万人が一斉に繋がることで新たな楽しみ方が生まれる

NTTグループの最先端通信テクノロジーを活用してスポーツやライブなどエンタテインメント全般の新体験を追求する本プロジェクトの最新事例は、2018年の年末に横浜アリーナで開催されたPerfumeのライブ。NTTドコモとPerfumeがコラボレーションしたスペシャルコンテンツ「FUTURE-EXPERIMENT VOL.04　その瞬間を共有せよ。」だ。

観客のスマートフォンからアンケートの回答を集め、リアルタイムでステージ上モニターに反映、Perfumeがその場で書いたメッセージを観客のスマートフォンにリアルタイムで届けるという、双方向のコミュニケーションを実現したこの日のライブにもやはり「5G」と高効率Wi-Fiの存在があった。

「通信でステージ上のアーティストと観客が繋がっていることを前提とした企画ですから、多端末の接続に対応している必要があります。ただ、現状では、イベントの様子をSNSにアップするだけでも接続が快適なところと、そうでない場所があります。ステージと観客、観客同士、またひとつの会場と異なる会場など、何万人もの端末を一斉に繋ぐことが可能になれば、会場でも自宅でもない場所、たとえばパブリックビューイングやライブビューイングでの楽しみ方を広げていけるのではないかと思っています」（滝澤氏）

 ARやVRが人間の目の感覚に追いつくのはまだ先。
技術とコンテンツのブラッシュアップに期待

いくつものトライアルを重ね、サービスのブラッシュアップは今後も続きそうだが、すでに体験してみたユーザーからはどのような反応が返ってきているのだろうか。これからARスポーツ観戦をしてみたい！という人にとっても気になるポイントだろう。

「概ね高評価をいただいていますが、実際にいくつか課題はあります。ARのスマートグラスにしても、全く装着感がないとまではいかず、重さや視野角などデバイスについての意見もあります。スタジアムのどの位置で観戦するかにもよるのですが、太陽の方向を向いた状態でスマートグラスを装着していると、その上に半透明の映像が重なると、眩しさや見えづらさを感じてしまうこともあり、画質や明るさについてはこれからの課題だと考えています。

一方、目で見るだけや数字の情報だけでは分からなかったものが、ARグラスに映し出すことで体感できるようになり、これまでは不可能だったことが可能になってきているということもあります。とはいえ、実際見ているもののほうが鮮明で綺麗ですから、グラスによってさらに体験価値を上げることができるように、今後も技術、コンテンツ面もさらに精度を高めていきたいと思います」（滝澤氏）

5Gのサービス開始と、東京オリンピック・パラリンピックを控える2020年が、テクノロジーのエポックイヤーとなることは間違いなさそうだ。

あと1年で、どれだけ技術が進歩するのか追っていきたい。

メガネの販売本数日本一を誇るJINSが、世界初となる「メガネをかけたままバーチャルにメガネを試着できる」サービスを、JINS 渋谷パルコ店でスタートさせた。メガネ着用者にとって長年の悩みだった、「メガネ試着時に（視力矯正されていないため）自分の姿が見えない」という問題を解決するサービスは、どのように生まれたのだろうか。

AIが高速でレタッチして
メガネを顔から消す技術

店頭に陳列されているメガネの中から気になるメガネを選んだら、フレームに付けられたQRコードを機械に読み取らせる。その後、ディスプレイに表示される枠に顔をおさめると、元々着用していたメガネが消え、試着したいメガネが自分の顔に装着されて映し出される。それと同時に、AIがメガネの似合い度を100点満点で採点してくれるというサービスが登場。『MEGANE on MEGANE（メガネ オン メガネ）』と名付けられたこのマシーンは、2019年11月にオープンした次世代型店舗「JINS 渋谷パルコ店」の目玉となっている。

「『MEGANE on MEGANE』の開発に向けて動き出したのは2018年で、約1年かけて完成しました。ポイントは、かけているメガネを消すという技術。これは、AIに同人物のメガネをかけている画像とかけていない画像を1セットとして大量に覚えさせ、メガネをかけている画像からかけていない画像を推察させてレタッチしています。つまり、ディープラーニングさせたAIが、高速でレタッチをおこなっているんです」

そう語るのは、ジンズのCX戦略本部 本部長である向殿文雄氏。CXとはカスタマーエクスペリエンスを略したもので、付加価値のある新しい顧客体験の設計を主な業務としている。

瞳孔間距離を計測し、
そこにフレームを合わせることでフィット感をアップ

メガネを消したあとにメガネをバーチャルでかけさせる技術に関しては、スナップチャットなどの着せ替えアプリと同じようなAR技術を使っているとか。しかし、さまざまな顔にしっかりフィットさせるのは難しいことでもあったようだ。

「バーチャル試着への挑戦というのは、実は10年ほど前からいろいろやってきているんです。そこで問題になったのがメガネのサイズが顔にうまくフィットしないこと。今回は、瞳孔の位置を認識させることでその点を改善させました」

メガネのフレーム設計は、「このエリアに瞳孔がくる」と想定して作られる。もちろん、瞳孔間距離（PDと言われる黒目と黒目の間の距離）は人によって違うので、その距離を『MEGANE on MEGANE』で計測しつつ、平均値と組み合わせながらフレームを顔の最適な場所にフィットさせているのだ。また、このサービスでは顔を左右に動かしても追従してくれるので試着時の横顔も確認できるというのも嬉しい。

「もうひとつの機能として、似合っているかどうかを判定するAIを搭載しています。これは2016年に『JINS BRAIN（ジンズ・ブレイン）』という名でローンチしたAIを入れています。これもまた画像認識によるディープラーニングが軸となっています。仕組みとしては、JINSのスタッフ3000人に約30万枚のメガネ着用カットをチェックしてもらい、似合う似合わないを判定。それをAIにディープラーニングさせ、JINSスタッフによる平均評価値を点数表示しています」

説明なしにお客さんが
自然と使ってくれている

『MEGANE on MEGANE』は渋谷パルコの新装開業の話題性とプラスされ、当初はテレビ取材なども入り大きな賑わいを見せたとか。それから約3ヶ月が経ち、目新しさが消えた現在は、自然に定着してお客さんがフツーに使っているという点で大きな成功だったといえる。

「こういうサービスは企業の独りよがりになりがちなんです。しかし、『MEGANE on MEGANE』はスタッフがとくに説明しなくとも、お客さまが無意識に使ってくださっている。そういうソリューションを常に目指しているので、手応えを感じています」

視力がいい人にはわからない、メガネ常用者でないとわからない悩みの解決。それはお客さんのみならず、眼鏡屋さんの課題でもあったとか。ゆえに、前述のとおりJINSでも以前から試行錯誤をおこなってきていた。

「2009年、まだガラケーの時代には、お客さまにご自分の顔写真を送ってもらい、メガネをかけた正面画像を送り返すというサービスをECでしたこともありました。その後、webブラウザー上で試着できるというサービスも。さらにはアプリを使えば特定の商品が試着できるということもやりました。今回、ここまでのクオリティのものができたのは、日進月歩で進化している技術のおかげともいえます。また、これが成功した一因として、お客さまがバーチャルなものに抵抗がなくなっているという側面もあると思います」

アイウエア界のイノベーターであるJINS

バーチャル試着のみならず、JINSではブルーライトを軽減させる『JINS PC（現JINS SCREEN）』（2011年）、瞳とフレームの隙間最小化を図り花粉を現在では98パーセントカットする『JINS 花粉CUT』（2012年）、アプリでオリジナルデザインのメガネを注文できるサービス『JINS PAINT』（2015年）、世界で初めて三点式眼電位センサーをアイウエアに搭載したセンシング・アイウエア『JINS MEME』（2015年）など、技術革新に積極的な企業として知られている。

「アイウエア業界において、真っ先に新しいことにチャレンジしていくという使命感はあります。『MEGANE on MEGANE』に関しても、現在はJINS 渋谷パルコ店だけのサービスですし、同店舗で扱っているフレームのみが試着可能と限定的です。まだまだ、今後も技術革新を続けていきたいと考えています」