人と人とのコミュニケーションに必要なものは、言語だけにあらず。視線やジェスチャー、表情といった非言語情報も不可欠であることはいうまでもない。岡田将吾氏は、それを社会的信号処理という新しい領域に基づいた研究を通して読み取ることを実践する先駆者のひとり。同氏の試みは、人間の内面の状態を理解するためのAIの新分野として世界から注目を浴びる。これらの研究は認知症の初期症状などを読み取る手がかりにもなるという。編集長・杉原が、最先端の研究の現状とその先に広がる未来について伺った。

人の行動から内面状態を理解するという試み

杉原：もともと岡田さんは、大学でいわゆるAIに関する研究をされていたんですか？

岡田：そうですね。人工知能を基本に、修士、学士と約５年間研究をしまして、少しずつ人の行動を予測するとか、人の行動からコンテキストを推定するということにフォーカスするようになりました。　例えば、この人のしゃべり方や使う言葉の特徴がこうなら、この人はロボットとのおしゃべりを楽しんでいるとか、いくつかの行動から、人の内面を予測するというような研究です。

杉原：今日は、話していて僕の思惑がバレるかもしれないから、サングラスか何か掛けたい気分です（笑）。

岡田：いや、僕自身は（内面を予測することは）できないですよ（笑）。システムにはできてしまうことがありますけどね。

人の行動から内面を読み取るという研究を続ける岡田氏。「最近は、手の動きと感情の関係性が気になる」という。

杉原：ならよかったです（笑）。岡田さんのそういった研究は、AIなどを通じて出口がたくさん出てきたという段階ですか？

岡田：そうですね。最近は動作を測るセンサーが安くなったりもして、状況が変わってきましたし、企業でも自分たちのような研究をしているところが出てきました。そういうプロジェクトに自分が加わることも増えてきて、出口は広がったと感じています。

杉原：もともと岡田さんがAIに興味を持ったのは、どういった経緯でしょうか？

岡田：最初は大学で物理をやっていたのですが、物理の世界っていろいろと難しくて挫折してしまいました。それで物理の先生にはちょっと失礼なんですが（笑）、もう少し目に見えてわかりやすいことがやりたいと思って、ロボットに顔の認識や画像の認識をさせて動かすという研究をやっている研究室に入ったんです。AIを研究し始めたのは、そこからですね。

杉原：岡田さんのような分野の研究者は、日本にどのくらいいらっしゃるんですか？

岡田：もちろん産官学で人工知能の研究をされているグループは山ほどありますけど、ピンポイントで、人の行動から内面状態を理解するみたいなことに焦点を当てているのは、僕たちと数えるくらいしかないです。

こちらは、2018年にジョージ・アンド・ショーン合同会社（現株式会社）と岡田研究室が共同で開設したG&S Labのイメージビジュアル。IoTデバイスであるbiblle（ビブル）を活用して、行動学習に特化した機械学習プログラムの開発を行っている。

もう多くの企業ではAIが採用面接をしている!?

杉原：表情から何かを読み取るということは、なんとなく僕もイメージできるんですが、そこから購買意欲だったり、そこに出口を見つけていくというのは、なんだか大学でやる研究っぽくないなと思いますね（笑）。

岡田：そう言われれば、そうかもしれないですね。

杉原：僕自身のイメージでは、大学の先生は研究を突き詰めて、あとはアウトプットを第三者に見つけてもらう、そんなスタイルが多いなと常々感じているんですよ。それが出口までしっかりとしていて、岡田さんの研究は面白いなと思います。

岡田：そう言っていただけるとありがたいです（笑）。確かにそれは狙っていて、研究室でコンピューターの前に座って突き詰めるのではなく、実際のインパクトのあるデータに対して、なんらかの回答を出していくほうが、世の中的にも出口がわかりやすいですし、そういうことは意識していますね。

岡田氏の研究に興味津々の杉原。感情という抽象的なものを数値化するという試みには、シンパシーを感じているようだ。

杉原：世界的にはどうなんですか？

岡田：コンピューティング分野の国際会議のような場には、アメリカ、ヨーロッパの有名大学の研究者が集まってきますが、そこでは感情を理解するという研究が一番多いように感じます。コンピューターにいろいろな感情を理解させるということが基本ですけど、話している声や内容、表情からコミュニケーションのスキルを推定するということも盛んになってきてはいます。AIによる企業の採用面接みたいなものもそうですね。

杉原：確かにそういう面接は、実際にあるようですね。

岡田：面接で一言、二言答えたことから推測して、その人（のスキル）を判定するということですよね。あらゆる企業は、もうAIを様々活用しているのですが、採用には特定の人しか受からないとか、雇用差別・公平性の問題が出てきたりもしています。自分も就職面接のように実際に多くの人を呼んで、はじめて会った学生同士でディスカッションをしてもらい、そのビデオを人材派遣の会社に送って、人事の採用担当者に点数をつけてもらうという試みをしたことがあります。同じようにAIにも判断してもらったら、熟練の採用担当者と同じように人を選ぶのかどうかを検証しました。その実験は、学会でも良い評価をもらいましたが、アプリケーションとして見た場合、考慮すべき課題が多いと感じます。ですので、そういうスキル判定の技術を使って、スキルを上達させるための訓練に活かすことを、これからはやっていきたいですね。困っている人が喜ぶようなアプリとして機能できればと思っています。

感情を数値化するには、大きな課題がいくつもある

杉原：なるほど、それは興味深いですね。もうひとつお聞きしたいのが、“感情”っていうのは数値化も可視化もしにくいのではないか、ということです。実際に研究は進んでいるんでしょうか？

岡田：そうですね、難しいところも確かにあります。いま主にやっていることは、心理学者たちがこれまでに作った評価指標に則って、実験後に、いまあなたの感情はいくつでしたか？　というように被験者に問いかけたり、第三者に被験者の映像を見せて、被験者の感情状態はどうなっていると考えられますか？　というようにアンケートを書いてもったりする手法なんです。それをもとに人工知能が答えを導き出すわけですから、そもそものアンケートの答えが間違っていると、人工知能的にはもう破綻してしまう。そこが弱点でもありますね。

杉原：まず、ちゃんとしたデータを取ることが難しいんですね。

岡田：正解のデータがしっかりと作れなければ、人工知能は動けませんから。正直、感情って自分で数値をつけるのは難しいですよね。

杉原：自分でも自分の感情が一番わからないこともありますよね（笑）。

岡田：そういうものなんですよ（笑）。

杉原：以前の心理学者の研究だったり、研究論文なんかを追っかけながら、感情を紐解く要素を分析していくという手法はもちろんわかりますが、IoTを使ったデータ集めというのは、どうなんでしょう。世界的にはビッグデータは集まってきているんですか？

岡田：それも難しいところではあるんです。GAFAは、画像・音声を含めWeb上でたくさんの情報を集めていますが、普段の人同士の会話や、自然に対面コミュニケーションしているときのデータを膨大に集めるのは、まだまだ実際には難しいですよね。例えば感情データを集めるために、誰かが怒っているところをずっとビデオで撮るわけにもいかないですし、これからデータを取るので怒ってください、っていうのもおかしいですしね（笑）。多くの人が、AI speakerと友達のように頻繁に話す未来が来たら変わるかもしれませんが、AIの対話機能レベルから言って、それはもう少し先になりそうです。

杉原：確かにそうですね。

岡田：だから、自然にそういうデータをどうやったら取れるのか？　っていうのは自分たちの研究の大きな課題ですね。

杉原：ライフログ的なところですね。とはいえ、無理やりIoT的な要素をくっつけたものを開発して使ってもらっても、結局使わなくなりますしね。

岡田：そうですよね、スマートウォッチとかもその一例だと思います。

杉原： スマートウォッチが出た当初はすぐに買いましたけど、３日後にはこれまで使っていた普通の時計が恋しくなってしまいました（笑）。でもいまは、Apple Watchなどがセンシングに使われていますよね。睡眠だったり、バイタルだったり。そういう使われ方をしているのは有意義だと思います。

岡田：そうですね、そのような使い方は興味深いです。最近私たちもスマートウォッチのようなセンサを使った研究を始めています。とはいえ自分たちの研究は、いまはデータを採取するのにビデオの前に人を座らせなきゃならないので、常に記録するのが難しい状況です。なので、毎日何かを記録すれば、健康がチェックできるとか、そういう多くの人に受け入れやすいアプリなどを通して、効率よくデータを取る方法を模索して行こうと思っています。

後編へつづく

岡田将吾（おかだ・しょうご）
国立大学法人北陸先端科学技術大学院大学（JAIST）准教授。2008年東京工業大学大学院知能システム科学専攻博士課程修了。京都大学特定助教、東京工業大学大学院助教、IDIAP research institute 滞在研究員等を経て、2017年より現職。「社会的信号処理に基づく人間の行動やコミュニケーションの理解」を主要テーマに、AIの新たな領域の研究に取り組む。専門は、マルチモーダルインタラクション、データマイニング、機械学習、パターン認識ほか。

いよいよ本日開幕のピョンチャンパラリンピック。日本屈指のチェアスキーヤー森井大輝選手の活躍に、熱い期待が寄せられている。02年ソルトレークシティ大会から、14年ソチ大会まで、パラリンピック4大会連続で出場し、通算銀メダル3個、銅メダル1個を獲得。ワールドカップ個人総合2連覇を達成した世界王者が、唯一手にしていないのが、パラリンピックの金メダル。5度目となる世界の大舞台で勝ち取るべく、アクセル全開でトレーニングに取り組む中、HERO X編集長であり、RDS社のクリエイティブ・ディレクターとして森井選手のチェアスキー開発に携わる杉原行里（あんり）が、大会直前の心境について話を伺った。“大輝くん”、“行里くん”と互いにファーストネームで呼び合うふたりは、アスリートとサプライヤーであり、5年来の友人でもある。忌憚なき本音トークをご覧いただきたい。

溢れるほどに湧いてくる
チェアスキー開発のアイデア

杉原行里（以下、杉原）：先日、大輝くん関連のある取材で、「おふたりの関係性は？」と聞かれて、何と言えば良いんだろうって、一瞬考えてから、「友だちですかね」と答えました。海外遠征に行っている時も、日本にいる時も、週に2回くらいは電話してるよね。

森井大輝選手（以下、森井）：会って、他愛もない話をしたりもしますね。大人な言い方で言うと、RDS社はサプライヤーさん。行里さんはその会社の専務さんで、HERO Xの編集長さんですよね。

杉原：何それ、超イヤな感じじゃない（笑）。

森井：行里くんと話していると、どんどんアイデアが膨らんでいくから面白い。例えば、僕が「こういうものを作りたい」と言った時、「それなら、こんな方法があるよ」、「これをもっとこうしてみよう」と、僕よりも深い知識や技術を基に意見やアイデアを与えてくれるので、プラスの方向に話が進んでいって、イメージが次から次へと湧いてくるんです。行里くんは、何かモノを作ろうとした時に、決してネガティブな発想をしない。「チェアスキーに羽根を付けてみたら？」と、たまに突拍子もない提案もありますが、本当にクリエイティブな人だなと思います。

幼い頃から現在に渡って、ありとあらゆるスポーツに親しまれてきた行里くんだからこそ、その感覚や知識が、今のチェアスキーのデザインにも活きているのかな。アイデアを湧き立たせてくれるので、話をしていて本当に楽しいです。

杉原：僕たちふたりの中では、「面白いか、面白くないか」がキーワード。面白くなかったら、「大輝くん、それ却下！」って言うよね（笑）。

森井：あと、「こんなパーツを作りたいんですけど、低コストで同じ感じのものって出来ますか？」と言うと、「そんなの（コストなんて）関係ないんだよ」って言われますよね。あくまでも、面白さが優先だから。僕、RDS社の社員ではないですけど、何か商品が作れないかなと思って、ずっと考えているんです。最近だと、チェアスキーのチューンナップに使う道具があるんですけど、それをデザインすることによって、滑りもまた全然違う感じになるのでは？と思ったり。

1日36時間あればいいのに。
今、生きている瞬間すべてがプレシャス

森井：僕がチェアスキーを始めた頃は、「マシンを開発したい」と言っても、それを実現するために必要な技術を持った企業が、手を貸してくださるような状態ではありませんでした。それを経て、今、最高の環境に身を置かせていただいていますが、いつも夢の中にいるみたいに感じるんです。

今、この瞬間もそうです。トヨタの技術者の方が、僕のために雪山まで来て、ミリ単位の設定をして、「どうですか？」と確認してくださる。給油や修理のために、レーシングカーがピットインに入るような感じで、乗り換えて、降りて、もう一回滑ってというのを何度も繰り返し、セッティングを合わせ込んでいく。そんな世界にいれることが、本当にもう嬉しくて。

今回、海外遠征から帰ってきてすぐに、あるテレビ局で撮影があって、その後に記者会見がありました。翌日の今日、チェアスキーの道具一式を積んだ車を運転してここに来ましたが、全く疲れないんですよ。行里くんをはじめ、メディアの方に来ていただくことも、色んな方にサポートしていただきながら、セッティングを出していくことも、僕にとっては夢のような時間です。1日24時間じゃなく、36時間くらいあって欲しいなと思えるくらいに、充実した日々を送ることができています。

杉原：不思議なもので、軌道に乗る時って、色んなものが一気に乗ってくるよね。この5年間、大輝くんのことを見てきたけれど、然るべきというか、ひとつずつ積み重ねてきた行動があっての結果だと、僕は思っているから。

森井：そう言っていただけると、本当に嬉しいです。RDS社やトヨタ自動車をはじめ、僕のチェアスキーの開発に携わってくださる皆さんの理解があるからこそです。入社当時から、トヨタ自動車は、パラリンピックに対する理解のある会社だなと思っていました。社長が、「オリンピック、パラリンピックを応援していこう」と常々、声を掛けてくださっていることもあり、ありがたいことに、その理解は、さらに深まってきています。出社した時に、「頑張ってね！」と社員の方に温かい言葉を掛けていただくことも増えて、またそれがモチベーションにも変わっていますね。

森井：今、日本のパラリンピアン全体に言えるのは、本当に良い環境になってきているということです。ただ、ひとつ注意しなくてはいけないのが、それを当たり前だと思ってはいけない。僕は、そう強く感じています。例えば、「パラリンピックを目指しています」と言うと、名の通った企業に、難なく入社できたり、競技に専念できる環境を与えてもらうことができる場合もあるようですが、やっぱりそれは、成績と引き換えでなければいけないと思います。言葉で言うだけではなく、そこは選手がちゃんと自覚してやっていかないとです。

杉原：大輝くんの言う通りだと思います。いよいよピョンチャンパラリンピックが、3月9日に開幕しますね。サプライヤーとして、友だちとして、金メダルを待っているので、頑張ってきてください。

森井：今の僕があるのは、チェアスキーがあったから。僕を助けてくれたチェアスキーに対して、何ができるかといったら、そのレベルを引き上げること。チェアスキーに対しては、ただ真っ直ぐでいたいです。行里くん、期待して、待っていてください。

今年1月15日、スイス・ベイゾナで行われたワールドカップの大回転で、ノルウェー選手と同タイムで優勝し、今季初勝利を挙げ、続く2月4日のジャパンパラ大会の回転も制すなど、ピョンチャン大会に向けてめきめきと本領を発揮している森井選手。その素顔を今回の取材で垣間見て、いたく感動したのは、スピード感溢れるアグレッシブなパフォーマンスとはうらはらに、真綿のように繊細な心を併せ持つ方だったこと。周囲の人の気持ちを瞬時に汲み取る力に長けた彼だからこそ、技術者をはじめとする有能なチームメンバーを吸い寄せる力も半端じゃない。今、曇り一つない彼の瞳が見つめる先はただ一つ。ピョンチャンでの健闘を切に祈るばかりだ。

前編はこちら

中編はこちら

森井大輝（Taiki Morii）
1980年、東京都あきる野市出身。4 歳からスキーを始め、アルペンスキーでインターハイを目指してトレーニングに励んでいたが、97年バイク事故で脊髄を損傷。翌年に開催された長野パラリンピックを病室のテレビで観て、チェアスキーを始める。02 年ソルトレークシティー以来、パラリンピックに4大会連続出場し、06年トリノの大回転で銀メダル、10年バンクーバーでは滑降で銀メダル、スーパー大回転で銅メダルを獲得。その後もシーズン個人総合優勝などを重ねていき、日本選手団の主将を務めた14年ソチではスーパー大回転で銀メダルを獲得。2015－16シーズンに続き、2016－17シーズンIPCアルペンスキーワールドカップで2季連続総合優勝を果たした世界王者。18年3月、5度目のパラリンピックとなるピョンチャンで悲願の金メダルを狙う。トヨタ自動車所属。