人と人とのコミュニケーションに必要なものは、言語だけにあらず。視線やジェスチャー、表情といった非言語情報も不可欠であることはいうまでもない。岡田将吾氏は、それを社会的信号処理という新しい領域に基づいた研究を通して読み取ることを実践する先駆者のひとり。前編では、氏がこのAIの研究に至った経緯や実情について伺った。後編では、認知症の初期症状などを読み取るために、研究の成果がどう活かされているのか？　気になる具体例やそれがもたらす今後の展望を語っていただいた。編集長・杉原が描く未来との共通点とは？

複数の行動データから認知症傾向を読み取る

杉原：岡田さんのプロジェクトのひとつは、認知症の症状を読み取るというものですよね。

岡田：そうですね。老人ホームのどの場所でよく生活していたのかという行動のデータを取りながら、高齢者にロボットと対話してもらったりして、行動履歴・対話履歴といったデータを掛け合わせたものを分析すると、認知症予備軍といいますか、認知症傾向にある方がある程度判断できることを示しました。ただ、限られた人数での実験結果なので、結果の解釈には注意が必要です。

杉原：それは、（認知症の）進行度とかがわかるということですかね。

岡田：ある程度はそうですね。データがもっと増えてくれば、そういうことがより可能になってくると思います。ただ、難しいところが感情と一緒で、認知症かどうかの診断っていうのは、お医者さんがいろんな検査をした上で統合的に判断するものなので、認知症傾向を検出できるというと、言い過ぎになってしまうんです。僕らの研究での正解データは、認知症の傾向を測る簡易的なスクリーニングテストの点数ですから、あくまで行動データからAIがスクリーニングテストの結果の傾向を推定しました、ということになるんですよ。

「超高齢化社会こそ、テクノロジーにとっては多くのチャンスがある時代」だと常々言っている杉原。認知症検知のシステムには、これからを生き抜くヒントがあると感じている。

杉原：医療行為ではないってことですよね。あくまで予測、予防のアドバイス的な役割を果たすのが岡田さんの研究ということですね。

岡田：そうですね。「こういう可能性があるのですが、大丈夫ですか？」というようなことですね。あくまで診断ではなくて。

杉原： AIなので、どれだけデータを溜められるのかも重要ですよね。結構な日数のデータを採らないと所見というのはわかりませんし、行動に合わせてその変化を見ていくことも重要になりますよね。

岡田：まさに、そうですね。

杉原：取ったデータをAIで解析する出口としては、認知症に限らず何でもありなんですかね。

岡田：そういうことは言えると思います。ただ、自分が専門とする分野は、AIのなかでも機械学習というものと、あとはセンサーの時系列解析というものを合わせて、例えば認知症テストの点数の良し悪しを推定する技術までなんです。データの結果をどうやって活かしていくかということになると、いろんなものが考えられますが、ちゃんとしたサービスと考えると、まだ明確なものはできていないので、これからですね。

2019年、英・ケンブリッジ大学で開催された著名な国際学会“ACII”では、ジョージ・アンド・ショーン株式会社と岡田研究室の共著論文「ライフログを活用した認知症の早期検知」が採択された。

 熟練者から得たデータはいわば遺言みたいなもの!?

杉原：まだしっかりとした形になってはいなくても、いくつかお話していただけるプロジェクトはありますか？

岡田：例えば美容アドバイザーのコンサルティングのテクニックをモデル化するというフューチャー株式会社さんとの共同研究の試みにも携わっています。美容コンサルタントの第一人者で、非常に有名な小林照子さんというアドバイザーの方がいらっしゃいますが、小林さんは、クライアントに対して化粧の仕方だけでなく、これから何になりたくてどこに向かって行きたいのか？　というようなライフスタイルのヴィジョンまで聞き出したり、提案したりするんですね。その小林さんのアドバイスのオリジナルメソッドを、AIを通して後世に伝えていけないだろうかと、いま試行錯誤しているところです。

杉原：それは面白いですね。

岡田：それでお弟子さんと小林照子さんのコンサルの仕方を、音声やジェスチャー、目線などのデータとして読み取って、“上手なコンサル”のノウハウみたいなものを積み上げていこうとしています。

岡田氏は、「人間の内面を数値化、可視化できれば、これまでできなかった試みがいろいろできるようになる」という。

杉原：そのデータが溜まってくれば、小林照子さんがこれまで感覚的にやってきたものが、数値として見えるようになる。まさにテクノロジーでわかりやすく提示するということですね。

岡田：そういうことを実現していければいいですよね。

杉原：そういうデータの集積っていうものは、成功された方や、その道の第一人者の方々の「遺言」みたいな感じになりそうですね（笑）。

岡田：そういうものの最初の例みたいになったらいいですね（笑）。確かに自分の遺言になるようなものを後世に残したい気持ちはあります。

杉原：例えばウォルト・ディズニーがまだ生きていたら、彼の感覚的な部分や、言葉のチョイスだったりをAI化していくと考えたらすごいですよね。それが精度の高いものであれば、ウォルト・ディズニーが永遠にコンサルできるってことですよね（笑）。

岡田：何年経ってもアニメーターに厳しく的確な指示を出し続ける。そんなことができるかもしれません（笑）。

コミュニケーションスキルの問題点もデータから紐解く

杉原：自分の会社も先代がもう亡くなっていますが、会社経営って意味では、蘇ったらめちゃくちゃ嫌ですけどね（笑）。それはスポーツの世界にも活用できそうですね。

岡田：そうですね。チャンスがあれば、何か一緒に取り組めたら面白いですね。

杉原：例えば、過疎が進んでいる場所とかもそうですし、そうではなくても、いまは子供たちが自由にスポーツできる場所も少なくなってきています。そうすると良質の指導を受ける機会も減りますよね。

岡田：スポーツがのびのびできる場所は、確かに昔より少ないかもしれません。

杉原：そういった状況に対して、チュートリアル的な取り組みも可能になっていくということですね。極端に言えば、イチロー選手のメソッドがあって、そのメソッドを、AIを通して効率よく伝えていければ、イチローさんを知らない子供たちがイチローさんの弟子になるみたいな感じですね。

岡田：そうですね。例えば若い担い手の少ない伝統芸術の職人さんなどの技術やメソッドを、情報化して伝えていければ面白いかなと思います。アメリカの南カリフォルニア大の研究グループは、戦争の体験者の姿をVirtual Reality（VR）の技術で再現し、また体験に関する証言もコンピュータに蓄積することで、戦争の体験に関してVR上の体験者と実際に質問応答の対話ができるシステムを作りました。実際のミュージアムでこのシステムが展示されたようです。

杉原：確かに人々が防げるものを事前にアドバイスできれば、それを回避することができますよね。認知症もそのひとつですね。あとは先ほどの小林照子さんのような技術を紡いで継承していくようなもの。そのほかに岡田さんの研究が活かせるものは何かありますか？

岡田：あとはコミュニケーションのスキルですかね。例えばプレゼントとかで、説明の質を上げることにも活用できます。わかりやすい説明だったか？　流暢に喋れたか？　などをあらゆるデータから自動推定して、あなたのプレゼンのこの部分がちょっとわかりづらいみたいなものを割り出す研究もしています。

杉原：それは助かるなぁ（笑）。ゲーム感覚にもなりますね。自分で100%だと思ったとしても、例えば70%だと判定されれば、こことここは直さないといけないってなりますよね。

岡田：そこで逆に、AIに指摘されたところだけがうまくなってしまうこともありそうですけど（笑）。

杉原：それだけ様々な出口がある岡田さんの研究ですけど、一歩先の未来を考えたとき、どんな分野に一番応用されそうですか？

岡田：どれもまだ一歩足りないんですが、やはり高齢者関連は大事だと感じています。例えば老人ホームを利用している高齢者が、実際に普段はどんな生活をしているかというライフログを、ご家族がまとめて見たいというニーズは高まっています。推定するだけじゃなくて、そういう行動を可視化するだけで、様々な対応ができるようになりますから、高齢者自体のライフスタイルの質も、その家族の気持ちも、全然変わりますよね。

杉原：確かにそうですね。僕も超高齢化社会は逆にチャンスだと感じていますから、これから面白いことがいろいろできる未来がやってくると思っているんですよ。

岡田：僕もこういう時代だからこそ楽しんで、やはり若いときのテンションやパッションを持ったまま、年老いて死んでいきたいと思っています（笑）。そのために若い頃の感覚・新鮮さを忘れないように心がけていますし、社会的にもそんな自分の思いや経験を行動として伝承できる技術を作りたいという思いが、常にあります。

杉原：そういう未来は、自分で作るしかないですね。

岡田：待っていても歳はとっちゃいますからね（笑）。

前編はこちら

岡田将吾（おかだ・しょうご）
国立大学法人北陸先端科学技術大学院大学（JAIST）准教授。2008年東京工業大学大学院知能システム科学専攻博士課程修了。京都大学特定助教、東京工業大学大学院助教、IDIAP research institute 滞在研究員等を経て、2017年より現職。「社会的信号処理に基づく人間の行動やコミュニケーションの理解」を主要テーマに、AIの新たな領域の研究に取り組む。専門は、マルチモーダルインタラクション、データマイニング、機械学習、パターン認識ほか。

1974年以来、高橋尚子、野口みずきといったマラソンの五輪金メダリストを始めとし、多くのトップアスリートのシューズを作り続けてきた、三村仁司氏。2004年には『現代の名工』にも選ばれ、2009年には自身の工房『M.Lab（ミムラボ）』を設立。2018年からはニューバランスとの専属アドバイザー契約を締結。現在に至るまで、シューズ作り一筋だ。身体において“第2の心臓”とも言われる足を見続けて44年。磨き続けた感性は確信へと変わり、トップアスリートのみならず、足に悩みを抱える人々を文字通り足元から支えてきた。そんな三村氏に、パラリンピックアスリートのギア開発にも関わるHERO X編集長の杉原行里（あんり）が、話を伺った。前編では、整形靴の現状、ITでは代用できない感性や “三村イズム” についてお話しいただいたが、後編ではさらに、身体や未来を拡張させる「靴」の存在について、語っていただいた。

“靴”を変える前に“意識”を変える

杉原：僕は、日本は色々な意味で後進的な部分も少なくないと思っています。それは、テクノロジーというよりも、人々の考え方による面も大きいと思う。それが少しでも変われば良いかなと思っているんです。また、僕自身もプロダクトデザインを出発点として、医療に興味を持ち始めた。それこそ今日、三村さんにお会いして、靴や歩き方の重要性を知りました。それも予測医療の一端だなと思っています。これをどのように伝えていくかというのはなかなか難しいんですけど。

三村：昔から言われている通り、『足は第2の心臓』と言われていますからね。その足を支えるのは靴です。その人の足に合うアライメント、固さ、柔らかさというのは、骨格や足の角度の違いに応じて無数のパターンがあるんですよ。本当に自分に合った靴か、それに近いものが見つかれば良いとは思います。実際には、全員がオーダーメイドで作って貰うのは難しいと思いますから。

杉原：“合っている”というのは自分には分かるんですか？

三村：そこまでは分からないですよ。だから、靴を履いていて凄く疲れたとか、痛くなる箇所があったとか、それがなければ、それは自分にとっての良い靴ということになります。それが見つかるまでは、履き比べながら、徐々に自分に合った靴を求めていく。それしかないんじゃないでしょうか。疲れとか、痛みは足から来てますからね。足から膝、腰、背中、肩に来て。そんな風に身体の下から疲れが溜まってくるということは、下を大事にしないといけない、ということですよ。

杉原：じゃあ健康な生活を送るには、まずは靴から変えろと。

三村：靴からというより、足のケアですよね、例えば、アーチの部分は、足では一番疲れが溜まる所なんですよ。疲れが溜まってきたら痛みが出る。それで、病院に行けば「足底筋膜炎だから安静にするように」と言われる。それじゃ今の医学はアカンでしょ。

杉原：医学と三村さんの見解や技術が上手く融合すれば、医療の新たな道が開ける可能性はありますよね。身体の測定とか解析についても、病院同士で連携はあまりできていませんよね？

三村：現時点ではそうですね。

杉原：『医師界』と『リハビリ界』もややこしくて、結局、誰の為の話なのかがよく分からない。個々人では色々頑張っている方もいらっしゃるのかもしれないですけど。例えば、ビッグデータに基づいて薬の処方におけるマッチングを迅速に行うという取り組みもあります。受診に関しても、痛めたり、病気に罹った時に行っても遅いという場合もありますよね。だからこそ自分の身体を知るという考えが一般的になることで、次世代に何か残せるんじゃないかと思うんですね。

三村：そうですね。各自がそういった願望の強い人だったら話も早いわけですが、あなたみたいな人は少ないですよ（笑）。

杉原：それぞれが自分の為だと思ったらやりますよね。例えば、健康体でいるという意識が靴から生まれたら面白いなと思います。

三村：それは靴というより、各自の意識を変えないといかんのではないですか？

杉原：靴はあくまでもツールだと。

三村：そう。手助けをしてくれる、補助するものですよね。

杉原：でも、三村さんの話しを聞いていると、“補助”というより“拡張”に聞こえます。

三村：私は、ある程度、確信を持ったものづくりをしたいから。その為には、自信がなかったらできませんよ。

普通のことを普通にやっているだけ

杉原：東京2020にも、三村さんは関わっていかれるんですか？

三村：そうなると思いますけどね。パラスポーツでも、自分が足を見ている谷口真大というブラインドのランナーもフルマラソンを2時間39分位で走りますから。視覚障がい者のランナーではメダル候補じゃないでしょうか？

杉原：それは三村さんのフィッティングした靴を履いていると。

三村：そうですね。1年に1回位しか計測はしませんが。それでも足の状態は都度変わっているのが分かります。足を見れば良い選手かはすぐに分かりますよ。分からない限りはエエもん作れないじゃないですか。選手にも何も言えませんし。「あなたはここが弱いぞ、ここが悪いぞ」と。だから、靴を作る人は選手の足が分かって当然だと思います。普通のことを普通にやっているだけ。皆さんは凄いと思っているかもしれませんが、選手から見たら、私のことは普通だと思っているはずですよ。

杉原：僕らにも三村さんが仰ったことと似た思いがあります。3月のピョンチャンパラリンピックでは、日本が取った10個のメダルの内6個に僕らが関わっています。スタートラインに立つのは僕らではありませんが、選手の力を最大限に引き出すのは、こちら側の責任だと思っています。身体を計測してベストな方法を模索する。僕はまだ何十年も経験があるわけではないので、今はまだ手探りです。でも、少しでも人間の感性というものをデータ化できたら、次の世代に渡せるものになるんじゃないか、とも思っています。

三村：「後世に渡す」。それはアホな私にはできないからね（笑）

杉原：何言ってるんですか（笑）。シューフィッティングの技術で、三村さんの思い描く測定とか、解析ができる仕組みが生まれると良いですよね。僕もレース用車いすで世界最速を目指しています。1人の選手は54歳なんですが、人は歳をとれば衰えていくと思われているところを、ちょっと変えてみたいなと思っているんです。

三村：そうですね。それは私も思っていますし、できる限り後世の役に立ったら嬉しいですよ。やる気の問題ですから、そういう気持ちをずっと持っていない限り変わらないと思いますし、夢はいつも持っておかないとね。

杉原：是非いつか僕の靴を作ってください！

三村：お待ちしています。

前編はこちら

三村仁司（Hitoshi Mimura）
1948年兵庫県生まれ。学生時代に陸上選手として活躍後、1966年国内スポーツブランドに入社。シューズ製造に携わり、1974年からはアスリート向けの別注シューズ製造をスタートする。2009年より自身の工房「M.Lab（ミムラボ）」を立ち上げ、これまでに様々な分野のトップアスリートたちのシューズ・インソール開発に携わり彼らの大舞台でのチャレンジをサポートし続けてきた。2004年厚生労働省「現代の名工」表彰、2006年黄綬褒章を受章。2018年1月1日よりニューバランスと「M.Lab」がグローバル・パートナーシップを締結。専属アドバイザーに就任。