人と人とのコミュニケーションに必要なものは、言語だけにあらず。視線やジェスチャー、表情といった非言語情報も不可欠であることはいうまでもない。岡田将吾氏は、それを社会的信号処理という新しい領域に基づいた研究を通して読み取ることを実践する先駆者のひとり。前編では、氏がこのAIの研究に至った経緯や実情について伺った。後編では、認知症の初期症状などを読み取るために、研究の成果がどう活かされているのか？　気になる具体例やそれがもたらす今後の展望を語っていただいた。編集長・杉原が描く未来との共通点とは？

複数の行動データから認知症傾向を読み取る

杉原：岡田さんのプロジェクトのひとつは、認知症の症状を読み取るというものですよね。

岡田：そうですね。老人ホームのどの場所でよく生活していたのかという行動のデータを取りながら、高齢者にロボットと対話してもらったりして、行動履歴・対話履歴といったデータを掛け合わせたものを分析すると、認知症予備軍といいますか、認知症傾向にある方がある程度判断できることを示しました。ただ、限られた人数での実験結果なので、結果の解釈には注意が必要です。

杉原：それは、（認知症の）進行度とかがわかるということですかね。

岡田：ある程度はそうですね。データがもっと増えてくれば、そういうことがより可能になってくると思います。ただ、難しいところが感情と一緒で、認知症かどうかの診断っていうのは、お医者さんがいろんな検査をした上で統合的に判断するものなので、認知症傾向を検出できるというと、言い過ぎになってしまうんです。僕らの研究での正解データは、認知症の傾向を測る簡易的なスクリーニングテストの点数ですから、あくまで行動データからAIがスクリーニングテストの結果の傾向を推定しました、ということになるんですよ。

「超高齢化社会こそ、テクノロジーにとっては多くのチャンスがある時代」だと常々言っている杉原。認知症検知のシステムには、これからを生き抜くヒントがあると感じている。

杉原：医療行為ではないってことですよね。あくまで予測、予防のアドバイス的な役割を果たすのが岡田さんの研究ということですね。

岡田：そうですね。「こういう可能性があるのですが、大丈夫ですか？」というようなことですね。あくまで診断ではなくて。

杉原： AIなので、どれだけデータを溜められるのかも重要ですよね。結構な日数のデータを採らないと所見というのはわかりませんし、行動に合わせてその変化を見ていくことも重要になりますよね。

岡田：まさに、そうですね。

杉原：取ったデータをAIで解析する出口としては、認知症に限らず何でもありなんですかね。

岡田：そういうことは言えると思います。ただ、自分が専門とする分野は、AIのなかでも機械学習というものと、あとはセンサーの時系列解析というものを合わせて、例えば認知症テストの点数の良し悪しを推定する技術までなんです。データの結果をどうやって活かしていくかということになると、いろんなものが考えられますが、ちゃんとしたサービスと考えると、まだ明確なものはできていないので、これからですね。

2019年、英・ケンブリッジ大学で開催された著名な国際学会“ACII”では、ジョージ・アンド・ショーン株式会社と岡田研究室の共著論文「ライフログを活用した認知症の早期検知」が採択された。

 熟練者から得たデータはいわば遺言みたいなもの!?

杉原：まだしっかりとした形になってはいなくても、いくつかお話していただけるプロジェクトはありますか？

岡田：例えば美容アドバイザーのコンサルティングのテクニックをモデル化するというフューチャー株式会社さんとの共同研究の試みにも携わっています。美容コンサルタントの第一人者で、非常に有名な小林照子さんというアドバイザーの方がいらっしゃいますが、小林さんは、クライアントに対して化粧の仕方だけでなく、これから何になりたくてどこに向かって行きたいのか？　というようなライフスタイルのヴィジョンまで聞き出したり、提案したりするんですね。その小林さんのアドバイスのオリジナルメソッドを、AIを通して後世に伝えていけないだろうかと、いま試行錯誤しているところです。

杉原：それは面白いですね。

岡田：それでお弟子さんと小林照子さんのコンサルの仕方を、音声やジェスチャー、目線などのデータとして読み取って、“上手なコンサル”のノウハウみたいなものを積み上げていこうとしています。

岡田氏は、「人間の内面を数値化、可視化できれば、これまでできなかった試みがいろいろできるようになる」という。

杉原：そのデータが溜まってくれば、小林照子さんがこれまで感覚的にやってきたものが、数値として見えるようになる。まさにテクノロジーでわかりやすく提示するということですね。

岡田：そういうことを実現していければいいですよね。

杉原：そういうデータの集積っていうものは、成功された方や、その道の第一人者の方々の「遺言」みたいな感じになりそうですね（笑）。

岡田：そういうものの最初の例みたいになったらいいですね（笑）。確かに自分の遺言になるようなものを後世に残したい気持ちはあります。

杉原：例えばウォルト・ディズニーがまだ生きていたら、彼の感覚的な部分や、言葉のチョイスだったりをAI化していくと考えたらすごいですよね。それが精度の高いものであれば、ウォルト・ディズニーが永遠にコンサルできるってことですよね（笑）。

岡田：何年経ってもアニメーターに厳しく的確な指示を出し続ける。そんなことができるかもしれません（笑）。

コミュニケーションスキルの問題点もデータから紐解く

杉原：自分の会社も先代がもう亡くなっていますが、会社経営って意味では、蘇ったらめちゃくちゃ嫌ですけどね（笑）。それはスポーツの世界にも活用できそうですね。

岡田：そうですね。チャンスがあれば、何か一緒に取り組めたら面白いですね。

杉原：例えば、過疎が進んでいる場所とかもそうですし、そうではなくても、いまは子供たちが自由にスポーツできる場所も少なくなってきています。そうすると良質の指導を受ける機会も減りますよね。

岡田：スポーツがのびのびできる場所は、確かに昔より少ないかもしれません。

杉原：そういった状況に対して、チュートリアル的な取り組みも可能になっていくということですね。極端に言えば、イチロー選手のメソッドがあって、そのメソッドを、AIを通して効率よく伝えていければ、イチローさんを知らない子供たちがイチローさんの弟子になるみたいな感じですね。

岡田：そうですね。例えば若い担い手の少ない伝統芸術の職人さんなどの技術やメソッドを、情報化して伝えていければ面白いかなと思います。アメリカの南カリフォルニア大の研究グループは、戦争の体験者の姿をVirtual Reality（VR）の技術で再現し、また体験に関する証言もコンピュータに蓄積することで、戦争の体験に関してVR上の体験者と実際に質問応答の対話ができるシステムを作りました。実際のミュージアムでこのシステムが展示されたようです。

杉原：確かに人々が防げるものを事前にアドバイスできれば、それを回避することができますよね。認知症もそのひとつですね。あとは先ほどの小林照子さんのような技術を紡いで継承していくようなもの。そのほかに岡田さんの研究が活かせるものは何かありますか？

岡田：あとはコミュニケーションのスキルですかね。例えばプレゼントとかで、説明の質を上げることにも活用できます。わかりやすい説明だったか？　流暢に喋れたか？　などをあらゆるデータから自動推定して、あなたのプレゼンのこの部分がちょっとわかりづらいみたいなものを割り出す研究もしています。

杉原：それは助かるなぁ（笑）。ゲーム感覚にもなりますね。自分で100%だと思ったとしても、例えば70%だと判定されれば、こことここは直さないといけないってなりますよね。

岡田：そこで逆に、AIに指摘されたところだけがうまくなってしまうこともありそうですけど（笑）。

杉原：それだけ様々な出口がある岡田さんの研究ですけど、一歩先の未来を考えたとき、どんな分野に一番応用されそうですか？

岡田：どれもまだ一歩足りないんですが、やはり高齢者関連は大事だと感じています。例えば老人ホームを利用している高齢者が、実際に普段はどんな生活をしているかというライフログを、ご家族がまとめて見たいというニーズは高まっています。推定するだけじゃなくて、そういう行動を可視化するだけで、様々な対応ができるようになりますから、高齢者自体のライフスタイルの質も、その家族の気持ちも、全然変わりますよね。

杉原：確かにそうですね。僕も超高齢化社会は逆にチャンスだと感じていますから、これから面白いことがいろいろできる未来がやってくると思っているんですよ。

岡田：僕もこういう時代だからこそ楽しんで、やはり若いときのテンションやパッションを持ったまま、年老いて死んでいきたいと思っています（笑）。そのために若い頃の感覚・新鮮さを忘れないように心がけていますし、社会的にもそんな自分の思いや経験を行動として伝承できる技術を作りたいという思いが、常にあります。

杉原：そういう未来は、自分で作るしかないですね。

岡田：待っていても歳はとっちゃいますからね（笑）。

前編はこちら

岡田将吾（おかだ・しょうご）
国立大学法人北陸先端科学技術大学院大学（JAIST）准教授。2008年東京工業大学大学院知能システム科学専攻博士課程修了。京都大学特定助教、東京工業大学大学院助教、IDIAP research institute 滞在研究員等を経て、2017年より現職。「社会的信号処理に基づく人間の行動やコミュニケーションの理解」を主要テーマに、AIの新たな領域の研究に取り組む。専門は、マルチモーダルインタラクション、データマイニング、機械学習、パターン認識ほか。

1974年以来、高橋尚子、野口みずきといったマラソンの五輪金メダリストを始めとし、多くのトップアスリートのシューズを作り続けてきた、三村仁司氏。2004年には『現代の名工』にも選ばれ、2009年には自身の工房『M.Lab（ミムラボ）』を設立。現在に至るまで、シューズ作り一筋だ。身体において“第2の心臓”とも言われる足を見続けて44年。磨き続けた感性は確信へと変わり、トップアスリートのみならず、足に悩みを抱える人々を文字通り足元から支えてきた。そんな三村氏に、パラリンピックアスリートのギア開発にも関わるHERO X編集長の杉原行里（あんり）が、話を伺った。

履く本人が自分の足を知らない

杉原：僕のRDSという会社は、元々レース用のマシンを作ったりとか自動車の先行開発を手がけたりする会社なのですが、そこにパラアルペンスキーのチェアスキーヤーたちが訪れて、ギアが身体にフィットすることの重要性を説いていたんですね。なぜ彼らが僕の所に来たのかというと、2013年に、個人所有を目的とした、使用者に合った松葉杖を開発したことがきっかけだったんです。従来の松葉杖は予め決められたサイズを自分で調整する、人がモノに合わせるのが一般的だった。それに対して僕らが考えたのはセミオーダー。ユーザーさんの手の形状とか、脇下から手までの距離、身長を考慮して、その人の為の松葉杖を開発したんです。それまで僕たちは福祉に関わる部分はやっていなかったんですけど、調べていくと、身体に合ったものを使うという考えがそこまで浸透していないのかなと。

三村：そうですね。靴も同じですが、履く本人が自分の足を知らないということです。だからどんな靴が良いか分からない。各シューズメーカーさんから、「これはウチが開発した良いシューズだから履いてください」と勧められる。それを良いと思って履く。でも、自分には合っていなくて、疲れやすくなったり、故障したりする。そんなことは往々にしてあるんです。履いてくださいと言うなら、メーカーも責任を持って対応しないといけないでしょう。それができてないわけです。

杉原：僕らは（車いすやチェアスキーヤーの）お尻の計測とかをしていますが、身体をデジタル計測するというのは少ないように感じられます。どうして皆、自分の身体を知ろうとしないのかな、と。

三村：今は3D計測やコンピュータ解析が発達してますから、だれでも測定自体はできるんです。ただ、この選手の為にはこういう靴が良い、足のここが悪い、弱いから調整という提案まではコンピュータはしてくれない。それは人間が判断するわけです。ただ、それをやっていないから、足の故障が増えるわけです。

「日本は整形靴の分野が遅れています」

杉原：例えば、アメリカやドイツではドクターが足を見るじゃないですか。ドイツの展示会ではすでに２０年前から足にフィットしたシューズの重要性を皆が説いていたと聞いています。でも日本に帰ってくると、皆、既成品を買って履いている。

三村：日本は整形靴の分野が遅れてますよね。先日もそのあたりを教えて欲しいということで、整形外科の学会でお話ししてくださいと言われたんです。なんで私がそんな偉い先生の集まりで喋らないといけないのか。何か変わるなら良いけれど、変わらないなら行っても行かなくても一緒ですよ、と。

杉原：医療に関して言えば、予防医療とか、予防治療という領域がありますね。

三村：それはシューズで言えばインナーソールにあたりますね。『アライメント』といって足の形態を計測して、アーチ（土踏まず）を上げるとか、外足部を上げるとか。感性で判断していく。ただ、それができる人は日本では少ない。整形外科ではゼロです。というのは、整形外科の先生はアライメントなんか測らないから。見るだけ。良くて石膏で足型を取るぐらいで、そこまでやる人も少ない。まともに足の骨格なんて測らないんですよ。それで、尻拭いが私の所に来る。高齢者が多いんですけどね。「全然靴が合わない。足が痛くならないようなインナーソールを作って欲しい」と。そんなことも多いですよ。

杉原：最近だと3Dスキャナーやコンピュータによる身体の計測、解析も一般的になってきています。ミムラボでは、足部の計測はどのように行っていくんですか？

三村：まず足型を取りますよね。それからアライメントと、腰から下のバランスを測ります。

杉原：それは3Dスキャナーですか？

三村：いや、それは治工具で取る。定規とかメジャーです。その後は3Dスキャナーで足裏を測ったり、ワイズ（足幅）を測ったり。それを総合して、足の弱点を見つける。それは選手も一般の方も同じです。

けれども、計測して足のデータが出ても、どう判断するかの根拠が無いといけない。例えばアーチが低い人。その場合、アーチを何ミリ上げたらその選手にとって良いのか。それは整形外科の根拠の無い判断からきていることも多いです。「足のこの部分がこういう状態だから、この選手はアーチを約3ミリ上げる」といった具合に理由があるなら良い。理由がはっきりしないのに、「3ミリ上げましょう」、「5ミリ上げましょう」。そんなことで足に合うわけがない。それに、その先生がインナーソールを製作するのではなくて、装具士さんが作るわけです。でも、装具士さんも、本人の足を見ていない。整形の先生の言われた通りに作るだけ。そんなことで良いものができるはずがないです。靴で直す範囲が多い中で、整形外科の先生たちは靴を作れるんでしょうか？　それは無理ですよ。

杉原：なら、例えば、医師と装具士の連携が図れるような仕組みができたら、良いものが生まれる可能性はあると？

三村：そうですね。3Dスキャナーも、左右の力の掛け具合によって計測データが全然変わってくる。「左右均等に計測器に乗ってくれ」と言っても、殆どの場合利き足に体重が乗るんです。そしたら左右でデータが変わってくる。

杉原：人の重心は皆違いますからね。それはやはり左右均等が一番ベストだと。それを靴で解決していくのがミムラボということですね？

三村：そうです。足の着地から蹴り出しまで左右均等でいくように、ということを大事にしているんです。

杉原：僕らは、歩くことやシューズを作ることは素人ですけど、“歩き方”って人から教わらないじゃないですか。意外に“走り方”は教わるんですけど。

三村：それは、そもそも教える人も分かっていないから、だと思いますよ。

「感性でITには負けたくないんです」

杉原：とはいえ、これから高齢社会を迎える上で、歩くことの大切さも問われているんじゃないでしょうか？

三村：そうですね。今まで寝たきりの老夫婦が、私が作ったシューズを履いてから歩くことができるようになったという例もあります。「おかげで外に出られるようになった」という手紙も頂きました。

杉原：それは靴の違いなんでしょうか。

三村：そうでしょうね。「この靴がなければ生活できない」と。

杉原：凄いですね。歩くことは、一番と決めつけてはいけないのかもしれないけど、人間にとって非常に大事な行為じゃないですか。

三村：歩くことが一番大事ですよ。

杉原：だからこそ、靴というのは、身に付けるものの中では最も気を遣わないといけないところだと思うんです。

三村：そりゃあそうですよね。高い靴じゃなくても良いから、自分に合った靴を履かないと。例えば、足首が柔らかい人がクッション性のある靴を履いても余計に疲れるだけ。故障しやすくなります。逆に、足首が固い人は、前後でミッドソールの高低差があってクッションがあった方が良い。極端に言えば、足首の柔らかい人が砂浜を歩いても、疲れるだけ。接地面が柔らかいものは足首の固い人にしか向かないんです。

杉原：その時の、“柔らかい”、“固い”というのは、三村さんの感覚。

三村：そうですね。

杉原：僕も元よりデザインの仕事をやってきたので、“感性”というのはなかなか人に継承するのは難しいと思っているんですけれど、日本のみならず、世界的にも、三村さんの持つ感性や経験は非常に大切なのではないかと感じます。

三村：感性というのは、ある程度の基盤、基礎知識の上に成立するものですからね。ウチの工房の場合は14人程社員がいるけど、ほとんどがシューズづくりの経験者です。渋谷の『ヒコ・みづの』とか神戸三田の『神戸医療福祉専門学校』など、靴の専科に2年間通って勉強した者だから、ある程度の基礎はできている。その上で皆に言うことは、「感性というのは自分で作っていくものだ。教えて習得するものじゃない。分からないことがあれば技術的なことは聞け。けれども感性の鍛錬は、自分を信じて、失敗したって良いからやりなさい」とは言ってます。

杉原：その“感性”を少しでもテクノロジーで体現するというのは。

三村：それはできたらいいですけど、ITがいくら発達しても、どうなんでしょうか。

杉原：100%は無理だと思うんですけどね。

三村：私はね、そういうITに代わるような仕事をしたくない。将棋の世界じゃないけど、自分の感性でITには負けたくないんですよ。

杉原：ただ、データとして落とし込むことができれば、歩くという行為の中での靴の大切さが、より多くの人に伝わるんじゃないかな、と。

三村：それはね、やはり各シューズメーカーさんの技術者がもう少し、しっかりしないといけませんね。

杉原：どの辺りが変わるべきなんでしょうか。

三村：素材の改良でしょう。アッパー、ミッドソール、アウトソール。これを変えない限り良い靴はできない。

杉原：仮に素材の革新が実現したとして、とあるメーカーの靴を買いますと。ただ、それはオーダーメイドではないので、自分にあった最適な靴とは言えないのではないですか？

三村：そうですね、やはり自分にあった靴というのは、足の着地から蹴り出しまで、体重の移動が左右均等になっているかということです。あとはアライメントも、疲れにくい状態になっているか。疲れにくいということは故障しにくいということ。そういう状態までしていかない限り、自分にあった靴とは言えませんね。

杉原：そこで、テクノロジーを通じて、“三村イズム”がより多くの人に伝わると良いですよね。

三村：だけど、ここ5年や10年で、そこまで変わるとは私には思えないんですよ。医師5、60人の前で講演したことがありますけど、私の言ったことがわからない人が多かった。

杉原：医療の現場では、これまであまりされてこなかったアプローチ法だからでしょうか？

三村：レントゲンを撮って、足が折れている、ヒビが入っている。これは分かりますよね？　問題はその後です。また同じ状態にならないようにするにはどうすれば良いのか。「あなたの足は今こういう状態だから、こう修正すれば良い」と、はっきりした根拠で、患者さんや選手に伝えてあげたら凄くラクだと思うんですよ。

後編につづく

三村仁司（Hitoshi Mimura）
1948年兵庫県生まれ。学生時代に陸上選手として活躍後、1966年国内スポーツブランドに入社。シューズ製造に携わり、1974年からはアスリート向けの別注シューズ製造をスタートする。2009年より自身の工房「M.Lab（ミムラボ）」を立ち上げ、これまでに様々な分野のトップアスリートたちのシューズ・インソール開発に携わり彼らの大舞台でのチャレンジをサポートし続けてきた。2004年厚生労働省「現代の名工」表彰、2006年黄綬褒章を受章。2018年1月1日よりニューバランスと「M.Lab」がグローバル・パートナーシップを締結。専属アドバイザーに就任。