人と人とのコミュニケーションに必要なものは、言語だけにあらず。視線やジェスチャー、表情といった非言語情報も不可欠であることはいうまでもない。岡田将吾氏は、それを社会的信号処理という新しい領域に基づいた研究を通して読み取ることを実践する先駆者のひとり。前編では、氏がこのAIの研究に至った経緯や実情について伺った。後編では、認知症の初期症状などを読み取るために、研究の成果がどう活かされているのか？　気になる具体例やそれがもたらす今後の展望を語っていただいた。編集長・杉原が描く未来との共通点とは？

複数の行動データから認知症傾向を読み取る

杉原：岡田さんのプロジェクトのひとつは、認知症の症状を読み取るというものですよね。

岡田：そうですね。老人ホームのどの場所でよく生活していたのかという行動のデータを取りながら、高齢者にロボットと対話してもらったりして、行動履歴・対話履歴といったデータを掛け合わせたものを分析すると、認知症予備軍といいますか、認知症傾向にある方がある程度判断できることを示しました。ただ、限られた人数での実験結果なので、結果の解釈には注意が必要です。

杉原：それは、（認知症の）進行度とかがわかるということですかね。

岡田：ある程度はそうですね。データがもっと増えてくれば、そういうことがより可能になってくると思います。ただ、難しいところが感情と一緒で、認知症かどうかの診断っていうのは、お医者さんがいろんな検査をした上で統合的に判断するものなので、認知症傾向を検出できるというと、言い過ぎになってしまうんです。僕らの研究での正解データは、認知症の傾向を測る簡易的なスクリーニングテストの点数ですから、あくまで行動データからAIがスクリーニングテストの結果の傾向を推定しました、ということになるんですよ。

「超高齢化社会こそ、テクノロジーにとっては多くのチャンスがある時代」だと常々言っている杉原。認知症検知のシステムには、これからを生き抜くヒントがあると感じている。

杉原：医療行為ではないってことですよね。あくまで予測、予防のアドバイス的な役割を果たすのが岡田さんの研究ということですね。

岡田：そうですね。「こういう可能性があるのですが、大丈夫ですか？」というようなことですね。あくまで診断ではなくて。

杉原： AIなので、どれだけデータを溜められるのかも重要ですよね。結構な日数のデータを採らないと所見というのはわかりませんし、行動に合わせてその変化を見ていくことも重要になりますよね。

岡田：まさに、そうですね。

杉原：取ったデータをAIで解析する出口としては、認知症に限らず何でもありなんですかね。

岡田：そういうことは言えると思います。ただ、自分が専門とする分野は、AIのなかでも機械学習というものと、あとはセンサーの時系列解析というものを合わせて、例えば認知症テストの点数の良し悪しを推定する技術までなんです。データの結果をどうやって活かしていくかということになると、いろんなものが考えられますが、ちゃんとしたサービスと考えると、まだ明確なものはできていないので、これからですね。

2019年、英・ケンブリッジ大学で開催された著名な国際学会“ACII”では、ジョージ・アンド・ショーン株式会社と岡田研究室の共著論文「ライフログを活用した認知症の早期検知」が採択された。

 熟練者から得たデータはいわば遺言みたいなもの!?

杉原：まだしっかりとした形になってはいなくても、いくつかお話していただけるプロジェクトはありますか？

岡田：例えば美容アドバイザーのコンサルティングのテクニックをモデル化するというフューチャー株式会社さんとの共同研究の試みにも携わっています。美容コンサルタントの第一人者で、非常に有名な小林照子さんというアドバイザーの方がいらっしゃいますが、小林さんは、クライアントに対して化粧の仕方だけでなく、これから何になりたくてどこに向かって行きたいのか？　というようなライフスタイルのヴィジョンまで聞き出したり、提案したりするんですね。その小林さんのアドバイスのオリジナルメソッドを、AIを通して後世に伝えていけないだろうかと、いま試行錯誤しているところです。

杉原：それは面白いですね。

岡田：それでお弟子さんと小林照子さんのコンサルの仕方を、音声やジェスチャー、目線などのデータとして読み取って、“上手なコンサル”のノウハウみたいなものを積み上げていこうとしています。

岡田氏は、「人間の内面を数値化、可視化できれば、これまでできなかった試みがいろいろできるようになる」という。

杉原：そのデータが溜まってくれば、小林照子さんがこれまで感覚的にやってきたものが、数値として見えるようになる。まさにテクノロジーでわかりやすく提示するということですね。

岡田：そういうことを実現していければいいですよね。

杉原：そういうデータの集積っていうものは、成功された方や、その道の第一人者の方々の「遺言」みたいな感じになりそうですね（笑）。

岡田：そういうものの最初の例みたいになったらいいですね（笑）。確かに自分の遺言になるようなものを後世に残したい気持ちはあります。

杉原：例えばウォルト・ディズニーがまだ生きていたら、彼の感覚的な部分や、言葉のチョイスだったりをAI化していくと考えたらすごいですよね。それが精度の高いものであれば、ウォルト・ディズニーが永遠にコンサルできるってことですよね（笑）。

岡田：何年経ってもアニメーターに厳しく的確な指示を出し続ける。そんなことができるかもしれません（笑）。

コミュニケーションスキルの問題点もデータから紐解く

杉原：自分の会社も先代がもう亡くなっていますが、会社経営って意味では、蘇ったらめちゃくちゃ嫌ですけどね（笑）。それはスポーツの世界にも活用できそうですね。

岡田：そうですね。チャンスがあれば、何か一緒に取り組めたら面白いですね。

杉原：例えば、過疎が進んでいる場所とかもそうですし、そうではなくても、いまは子供たちが自由にスポーツできる場所も少なくなってきています。そうすると良質の指導を受ける機会も減りますよね。

岡田：スポーツがのびのびできる場所は、確かに昔より少ないかもしれません。

杉原：そういった状況に対して、チュートリアル的な取り組みも可能になっていくということですね。極端に言えば、イチロー選手のメソッドがあって、そのメソッドを、AIを通して効率よく伝えていければ、イチローさんを知らない子供たちがイチローさんの弟子になるみたいな感じですね。

岡田：そうですね。例えば若い担い手の少ない伝統芸術の職人さんなどの技術やメソッドを、情報化して伝えていければ面白いかなと思います。アメリカの南カリフォルニア大の研究グループは、戦争の体験者の姿をVirtual Reality（VR）の技術で再現し、また体験に関する証言もコンピュータに蓄積することで、戦争の体験に関してVR上の体験者と実際に質問応答の対話ができるシステムを作りました。実際のミュージアムでこのシステムが展示されたようです。

杉原：確かに人々が防げるものを事前にアドバイスできれば、それを回避することができますよね。認知症もそのひとつですね。あとは先ほどの小林照子さんのような技術を紡いで継承していくようなもの。そのほかに岡田さんの研究が活かせるものは何かありますか？

岡田：あとはコミュニケーションのスキルですかね。例えばプレゼントとかで、説明の質を上げることにも活用できます。わかりやすい説明だったか？　流暢に喋れたか？　などをあらゆるデータから自動推定して、あなたのプレゼンのこの部分がちょっとわかりづらいみたいなものを割り出す研究もしています。

杉原：それは助かるなぁ（笑）。ゲーム感覚にもなりますね。自分で100%だと思ったとしても、例えば70%だと判定されれば、こことここは直さないといけないってなりますよね。

岡田：そこで逆に、AIに指摘されたところだけがうまくなってしまうこともありそうですけど（笑）。

杉原：それだけ様々な出口がある岡田さんの研究ですけど、一歩先の未来を考えたとき、どんな分野に一番応用されそうですか？

岡田：どれもまだ一歩足りないんですが、やはり高齢者関連は大事だと感じています。例えば老人ホームを利用している高齢者が、実際に普段はどんな生活をしているかというライフログを、ご家族がまとめて見たいというニーズは高まっています。推定するだけじゃなくて、そういう行動を可視化するだけで、様々な対応ができるようになりますから、高齢者自体のライフスタイルの質も、その家族の気持ちも、全然変わりますよね。

杉原：確かにそうですね。僕も超高齢化社会は逆にチャンスだと感じていますから、これから面白いことがいろいろできる未来がやってくると思っているんですよ。

岡田：僕もこういう時代だからこそ楽しんで、やはり若いときのテンションやパッションを持ったまま、年老いて死んでいきたいと思っています（笑）。そのために若い頃の感覚・新鮮さを忘れないように心がけていますし、社会的にもそんな自分の思いや経験を行動として伝承できる技術を作りたいという思いが、常にあります。

杉原：そういう未来は、自分で作るしかないですね。

岡田：待っていても歳はとっちゃいますからね（笑）。

前編はこちら

岡田将吾（おかだ・しょうご）
国立大学法人北陸先端科学技術大学院大学（JAIST）准教授。2008年東京工業大学大学院知能システム科学専攻博士課程修了。京都大学特定助教、東京工業大学大学院助教、IDIAP research institute 滞在研究員等を経て、2017年より現職。「社会的信号処理に基づく人間の行動やコミュニケーションの理解」を主要テーマに、AIの新たな領域の研究に取り組む。専門は、マルチモーダルインタラクション、データマイニング、機械学習、パターン認識ほか。

近年、大きな社会問題になっている数々のハラスメント。とりわけスポーツ界では、監督やコーチと選手間の異常な主従関係や、暴力的な行為が問題視されることが多い。度々メディアでも報じられるこうした歪みの裏側には、記録やパフォーマンスの向上を目指す指導者側の感情的な空回りや、埃をかぶった根性論などが横たわっている。スポーツ科学とセンシングテクノロジーは、それをポジティブなコミュニケーションへと変える。第一人者である長谷川 裕氏をお招きし、編集長・杉原と最新のスポーツ指導の在り方、そして未来について語り尽くしていただいた。

スポーツに直接役立つ科学技術の追求

杉原「まず、スポーツ科学、そしてセンシングというものは、大きく言うとどういうものなのか、簡単にお聞きしたいのですが」

長谷川「スポーツ科学と一口に言っても、細かくはスポーツサイエンスとエクササイズサイエンスという２つがあります。例えば、マラソンランナーがランニングマシンの上で走っている時に呼気を計測しているとしたら、スポーツサイエンティストとエクササイズサイエンティストは、各々違うことをやっているんですよ」

杉原「なかなか違いが難しいですね（笑）」

長谷川「簡単にいうと、スポーツのためにトレーニング技術を開発したり、選手の問題点を発見したり、怪我しない方法を考えたり……、パフォーマンスを向上するための方法を見つけるために、科学的な手法や基礎科学を使っていくのがスポーツサイエンス。そのために筋力や心拍数のみならず、事細かなデータを計測するのがセンシングという技術です。逆にスポーツを使って、身体運動や健康に繋がるような人間のなんらかのしくみを発見するとか、メカニズムがどうなっているのかを調べるのが運動科学、すなわちエクササイズサイエンス。僕自身は、スポーツサイエンティストでありたいと思っています」

杉原「なるほど、長谷川さんは、スポーツに直接役立つ科学的な技術やしくみを研究されているということですね。世間一般が対象ではなく、スポーツに特化した世界がフィールドであると」

長谷川「そうです。でもスポーツに特化した研究というのは、ごく一部のエリート選手のためのものではないか？　とよく言われるのですが、私がやっている研究は、一般の方の健康にも役立つんですよ」

杉原「世間一般にも役立つか否かで、正直、大学の研究費も変わってきそうですよね（笑）」

長谷川「確かにそれはあります。かつてアメリカでは、シューズでもギアでも、開発するとなれば、大きな企業から巨額の研究費が調達できたのですが、各々の企業は自分たちで研究所を持つようになりましたから、大学の研究所には、お金が回らなくなってしまいました。製薬会社や医療機関は、今でも肥満対策や高齢者の転倒防止、安全な子供の食事、そういうものに対しては研究費を出してくれますが、それではスポーツの研究はできませんよね」

杉原「そうなると厳しいですね」

日本にスポーツサイエンスは根付いていない？

長谷川「でもヨーロッパのスポーツ科学は、そうではありません。いかにこのチームを勝たせるか？　端的にそういう研究をしています。プロスポーツのチームには研究所があるのが普通です。サッカーでいえば、マンチェスター・ユナイテッドも、チェルシーも、バルサも、研究所では10人以上の専門職がスポーツサイエンスを研究しています。アメリカには、それがないんですよ」

杉原「それはイギリスが中心ですか？　それともヨーロッパ全体？」

長谷川「ヨーロッパの国々は、どこもそういう環境が整っていますよ。あとはオセアニアですかね」

杉原「ちなみに日本はどうなんですか？」

長谷川「日本は、そういうことをしているプロスポーツのチームはありません。自分がアドバイザーとして携わったJリーグの（名古屋）グランパスは、2004〜2008年頃にスポーツサイエンスを選手育成に導入しようとしていました。でも残念ながらそのプランは、すぐに変更されましたね」

杉原「そうなんですね。確かにヨーロッパと日本では、スポーツ文化の根付き方も違いますし、スポーツ自体の熱狂度も違います。科学を積極的に使っていこうという動きは、まだ日本には根付きにくいのかもしれません」

長谷川「そうだと思います。これはヨーロッパだけに限らないのですが、スポーツサイエンスが進んでいる地域では、サッカーの試合全体を、スタジアムに設置した８台ぐらいのカメラでカバーして、どのプレーも必ず２台以上のカメラで記録するプロゾーンというシステムがあります。それで計測したデータは、俯瞰で見たアニメーションにして、選手の能力を約4000項目も分析できるんです。自分はそのシステムに魅せられて、イギリスのリーズまで行って交渉して、日本で会社を作って広めようとしました」

杉原「それは画期的なシステムですね」

長谷川「それでサッカーの日本代表にも提案をしました。でも、当時の監督には、“こんなものに頼っている指導者はダメだ”とはっきり言われましたよ。そこで自分も“では、なぜプレミアリーグの全チームがこれを導入しているのですか？” と応戦したのですが、“向こうの選手はこういうものがないと、いうことを聞かないからだろ”と、突き返されました（笑）」

杉原「もう、それは論点が違いますね」

長谷川「そうなんです。日本では、まだまだ監督の存在は絶対で、選手は監督にモノをいうのはおかしいという風潮が根深い。でも、ヨーロッパでもアメリカでも、選手は監督にいろいろと聞いてきます。そういうコミュニケーションを取るときに、感覚論で曖昧な答えをしても選手は納得しませんから、いろいろなセンシングのデータを見せる必要があるんです」

感覚を可視化すれば
すべてがわかりやすくなる

杉原「自分もレース用車いすの開発をしていますが、やはり感覚で話しをされると同じ土俵で話すのが大変。感覚とは、毎日違うものだから難しい。だから感覚を出来る限り可視化して開発していく必要があるといつも感じています」

長谷川「可視化したデータを重視するというのは、スポーツサイエンスと一緒ですね」

杉原「例えば、一緒に開発をしているアスリートが、座っている車いすの“ここが硬い”、“ここがやりにくい”と言ったら、まずスタッフはそれを反映させようとする。でも自分は止めるんです。なぜなら、それって感覚だから。感覚ほど曖昧なものはない。だから計測をして、硬いと感じる原因を探る必要があるんです」

長谷川「確かにそうですよね。本来、データで判断すべきものってことですね」

杉原「はい。そこで僕たちは、モーションキャプチャーや加速度センサー、触覚センサーなどいろいろ使って計測して、アスリートの違和感を可視化するんです。そうすると、“結局、あなたが言ってたのは、このことか！”と、初めてみんなで納得できるようになる」

車いすの開発も、センシングと同様に、計測と可視化がカギを握る。

長谷川「そうそう、そういうことです。それだと選手に問題点がちゃんと伝わりますよね。データを解析して、ノウハウにしていくことも大切ですし。トレーニングも感覚でやっていくと、わかったつもり、できたつもりになる。それが一番よくないです」

杉原「海外のサッカーだと、コーチやマネージャーが、サッカー経験者じゃないケースも多々ありますよね。日本ではまだ少ない気がします。経験の有無だけじゃなくて、指導者は解析がどれだけできるか、それを利用してどれだけいい戦略が練れるのか、そういうところも評価されるべきだと思うんです」

長谷川「ある競技のコーチやスタッフが、その競技の経験者ではない場合、その人が選手から信頼されたり慕われたりすると、その畑で育った指導者は、ものすごく毛嫌いしますよね」

杉原「そうですよね。あとセンシングで選手の状態を常にデータ化しておけば、怪我をしたときにも、壊した身体の状態を過去のデータと照らし合わせられますよね。カルテ共有ができれば、対処も早くなるはずです」

長谷川「確かにそうです。プレミアリーグでも、選手が移籍をしたら、それまでどんなトレーニングをしていたのか、怪我や筋力の状況、スプリントやパワーなどのデータを受け継ぐのが普通です。そうやって選手個々の健康を守って、リーグ全体のレベルを引き上げているわけですよ」

杉原「プレミア全体のレベルが上がったのは、センシングやデータ解析などの技術が反映しているからかもしれないですね。ただ、僕が好きなアーセナルは、いつも怪我人が多いですが、スポーツサイエンスのレベルが低いんですかね（笑）」

長谷川「いやいや、アーセナルの研究レベルは、かなり高いはずですよ（笑）」

後編へつづく

長谷川 裕（はせがわ・ひろし）
1956年京都府生まれ。龍谷大学経営学部教授（スポーツサイエンスコース担当）。日本トレーニング指導者協会（JATI）理事。スポーツパフォーマンス分析協会代表理事。エスアンドシー株式会社代表。筑波大学体育専門学群卒業、広島大学大学院教育学研究科博士課程前期終了。龍谷大学サッカー部部長・監督、ペンシルバニア州立大学客員研究員兼男子サッカーチームコンディションコーチ、名古屋グランパスエイトコンディショニングアドバイザー等を経て、スポーツセンシング技術等を利用した科学的トレーニング理論の実践的研究を続ける。著者は『アスリートとして知っておきたいスポーツ動作と体のしくみ』、『サッカー選手として知っておきたい身体の仕組み・動作・トレーニング』ほか多数。