人と人とのコミュニケーションに必要なものは、言語だけにあらず。視線やジェスチャー、表情といった非言語情報も不可欠であることはいうまでもない。岡田将吾氏は、それを社会的信号処理という新しい領域に基づいた研究を通して読み取ることを実践する先駆者のひとり。同氏の試みは、人間の内面の状態を理解するためのAIの新分野として世界から注目を浴びる。これらの研究は認知症の初期症状などを読み取る手がかりにもなるという。編集長・杉原が、最先端の研究の現状とその先に広がる未来について伺った。

人の行動から内面状態を理解するという試み

杉原：もともと岡田さんは、大学でいわゆるAIに関する研究をされていたんですか？

岡田：そうですね。人工知能を基本に、修士、学士と約５年間研究をしまして、少しずつ人の行動を予測するとか、人の行動からコンテキストを推定するということにフォーカスするようになりました。　例えば、この人のしゃべり方や使う言葉の特徴がこうなら、この人はロボットとのおしゃべりを楽しんでいるとか、いくつかの行動から、人の内面を予測するというような研究です。

杉原：今日は、話していて僕の思惑がバレるかもしれないから、サングラスか何か掛けたい気分です（笑）。

岡田：いや、僕自身は（内面を予測することは）できないですよ（笑）。システムにはできてしまうことがありますけどね。

人の行動から内面を読み取るという研究を続ける岡田氏。「最近は、手の動きと感情の関係性が気になる」という。

杉原：ならよかったです（笑）。岡田さんのそういった研究は、AIなどを通じて出口がたくさん出てきたという段階ですか？

岡田：そうですね。最近は動作を測るセンサーが安くなったりもして、状況が変わってきましたし、企業でも自分たちのような研究をしているところが出てきました。そういうプロジェクトに自分が加わることも増えてきて、出口は広がったと感じています。

杉原：もともと岡田さんがAIに興味を持ったのは、どういった経緯でしょうか？

岡田：最初は大学で物理をやっていたのですが、物理の世界っていろいろと難しくて挫折してしまいました。それで物理の先生にはちょっと失礼なんですが（笑）、もう少し目に見えてわかりやすいことがやりたいと思って、ロボットに顔の認識や画像の認識をさせて動かすという研究をやっている研究室に入ったんです。AIを研究し始めたのは、そこからですね。

杉原：岡田さんのような分野の研究者は、日本にどのくらいいらっしゃるんですか？

岡田：もちろん産官学で人工知能の研究をされているグループは山ほどありますけど、ピンポイントで、人の行動から内面状態を理解するみたいなことに焦点を当てているのは、僕たちと数えるくらいしかないです。

こちらは、2018年にジョージ・アンド・ショーン合同会社（現株式会社）と岡田研究室が共同で開設したG&S Labのイメージビジュアル。IoTデバイスであるbiblle（ビブル）を活用して、行動学習に特化した機械学習プログラムの開発を行っている。

もう多くの企業ではAIが採用面接をしている!?

杉原：表情から何かを読み取るということは、なんとなく僕もイメージできるんですが、そこから購買意欲だったり、そこに出口を見つけていくというのは、なんだか大学でやる研究っぽくないなと思いますね（笑）。

岡田：そう言われれば、そうかもしれないですね。

杉原：僕自身のイメージでは、大学の先生は研究を突き詰めて、あとはアウトプットを第三者に見つけてもらう、そんなスタイルが多いなと常々感じているんですよ。それが出口までしっかりとしていて、岡田さんの研究は面白いなと思います。

岡田：そう言っていただけるとありがたいです（笑）。確かにそれは狙っていて、研究室でコンピューターの前に座って突き詰めるのではなく、実際のインパクトのあるデータに対して、なんらかの回答を出していくほうが、世の中的にも出口がわかりやすいですし、そういうことは意識していますね。

岡田氏の研究に興味津々の杉原。感情という抽象的なものを数値化するという試みには、シンパシーを感じているようだ。

杉原：世界的にはどうなんですか？

岡田：コンピューティング分野の国際会議のような場には、アメリカ、ヨーロッパの有名大学の研究者が集まってきますが、そこでは感情を理解するという研究が一番多いように感じます。コンピューターにいろいろな感情を理解させるということが基本ですけど、話している声や内容、表情からコミュニケーションのスキルを推定するということも盛んになってきてはいます。AIによる企業の採用面接みたいなものもそうですね。

杉原：確かにそういう面接は、実際にあるようですね。

岡田：面接で一言、二言答えたことから推測して、その人（のスキル）を判定するということですよね。あらゆる企業は、もうAIを様々活用しているのですが、採用には特定の人しか受からないとか、雇用差別・公平性の問題が出てきたりもしています。自分も就職面接のように実際に多くの人を呼んで、はじめて会った学生同士でディスカッションをしてもらい、そのビデオを人材派遣の会社に送って、人事の採用担当者に点数をつけてもらうという試みをしたことがあります。同じようにAIにも判断してもらったら、熟練の採用担当者と同じように人を選ぶのかどうかを検証しました。その実験は、学会でも良い評価をもらいましたが、アプリケーションとして見た場合、考慮すべき課題が多いと感じます。ですので、そういうスキル判定の技術を使って、スキルを上達させるための訓練に活かすことを、これからはやっていきたいですね。困っている人が喜ぶようなアプリとして機能できればと思っています。

感情を数値化するには、大きな課題がいくつもある

杉原：なるほど、それは興味深いですね。もうひとつお聞きしたいのが、“感情”っていうのは数値化も可視化もしにくいのではないか、ということです。実際に研究は進んでいるんでしょうか？

岡田：そうですね、難しいところも確かにあります。いま主にやっていることは、心理学者たちがこれまでに作った評価指標に則って、実験後に、いまあなたの感情はいくつでしたか？　というように被験者に問いかけたり、第三者に被験者の映像を見せて、被験者の感情状態はどうなっていると考えられますか？　というようにアンケートを書いてもったりする手法なんです。それをもとに人工知能が答えを導き出すわけですから、そもそものアンケートの答えが間違っていると、人工知能的にはもう破綻してしまう。そこが弱点でもありますね。

杉原：まず、ちゃんとしたデータを取ることが難しいんですね。

岡田：正解のデータがしっかりと作れなければ、人工知能は動けませんから。正直、感情って自分で数値をつけるのは難しいですよね。

杉原：自分でも自分の感情が一番わからないこともありますよね（笑）。

岡田：そういうものなんですよ（笑）。

杉原：以前の心理学者の研究だったり、研究論文なんかを追っかけながら、感情を紐解く要素を分析していくという手法はもちろんわかりますが、IoTを使ったデータ集めというのは、どうなんでしょう。世界的にはビッグデータは集まってきているんですか？

岡田：それも難しいところではあるんです。GAFAは、画像・音声を含めWeb上でたくさんの情報を集めていますが、普段の人同士の会話や、自然に対面コミュニケーションしているときのデータを膨大に集めるのは、まだまだ実際には難しいですよね。例えば感情データを集めるために、誰かが怒っているところをずっとビデオで撮るわけにもいかないですし、これからデータを取るので怒ってください、っていうのもおかしいですしね（笑）。多くの人が、AI speakerと友達のように頻繁に話す未来が来たら変わるかもしれませんが、AIの対話機能レベルから言って、それはもう少し先になりそうです。

杉原：確かにそうですね。

岡田：だから、自然にそういうデータをどうやったら取れるのか？　っていうのは自分たちの研究の大きな課題ですね。

杉原：ライフログ的なところですね。とはいえ、無理やりIoT的な要素をくっつけたものを開発して使ってもらっても、結局使わなくなりますしね。

岡田：そうですよね、スマートウォッチとかもその一例だと思います。

杉原： スマートウォッチが出た当初はすぐに買いましたけど、３日後にはこれまで使っていた普通の時計が恋しくなってしまいました（笑）。でもいまは、Apple Watchなどがセンシングに使われていますよね。睡眠だったり、バイタルだったり。そういう使われ方をしているのは有意義だと思います。

岡田：そうですね、そのような使い方は興味深いです。最近私たちもスマートウォッチのようなセンサを使った研究を始めています。とはいえ自分たちの研究は、いまはデータを採取するのにビデオの前に人を座らせなきゃならないので、常に記録するのが難しい状況です。なので、毎日何かを記録すれば、健康がチェックできるとか、そういう多くの人に受け入れやすいアプリなどを通して、効率よくデータを取る方法を模索して行こうと思っています。

後編へつづく

岡田将吾（おかだ・しょうご）
国立大学法人北陸先端科学技術大学院大学（JAIST）准教授。2008年東京工業大学大学院知能システム科学専攻博士課程修了。京都大学特定助教、東京工業大学大学院助教、IDIAP research institute 滞在研究員等を経て、2017年より現職。「社会的信号処理に基づく人間の行動やコミュニケーションの理解」を主要テーマに、AIの新たな領域の研究に取り組む。専門は、マルチモーダルインタラクション、データマイニング、機械学習、パターン認識ほか。

ALS（筋萎縮性側索硬化症）。体を動かす運動神経系が変性し、徐々に壊れてしまう疾患で、進行に伴って手足の稼働、発話、嚥下といった動作が難しくなっていく。最終的には呼吸障害が生じ、延命の為、人工呼吸器の装着が必要になる。現時点で有効な治療法が確立されていないこの難病の当事者として、“テクノロジー”と“コミュニケーション”を軸に音楽、ファッション、モビリティなど多彩な活動を展開する『WITH ALS』代表、武藤将胤氏。そんな武藤氏に、HERO X編集長の杉原行里が話を伺った。人間の能力を“補完”だけでなく“拡張”しうるテクノロジーの役割。軌を一にする二人の議論に花が咲いた。

コミュニケーションの幅を狭めない

杉原：僕はボーダレスという曖昧な世界観を『スポーツ』、『テクノロジー』、『メディカル』という3つの分野を通じて、かっこよく、面白く楽しめることを目指しています。福祉の世界は選択肢が少ない。そこに僕は強い違和感を感じていて、いつか着てみたい服、行きたいホテル、乗ってみたい車、というように、様々な選択肢を提示したいと思っています。

武藤：見ている世界が近いと思います。『WITH ALS』は、ALSという病の認知・理解を促進することで、治療方法や支援制度の向上に寄与することを目的としています。加えてもう一つの役割は、ALSやその他難病の当事者、家族のQOL（Quality Of Life）向上に貢献するコンテンツ開発や支援活動の実施です。具体的には、パーソナルモビリティ『WHILL』のレンタルシェアや、ロボットクリエイター吉藤オリィ氏と協業したロボットテレワークプロジェクト『働くTECH LAB』、メガネデバイスの『JINS MEME』を活用した眼球の動きのみによるDJ、VJソフトウェアの開発（『EYE VDJ』）などを行ってきました。いずれのプロジェクトもテクノロジーとコミュニケーションをキーに据えています。

杉原：僕は武藤さんにお会いする前から、武藤さんは相手に物事を伝達するのが本当に上手だと思っていたんですが、博報堂時代にコミュニケーションの仕事をされていたと知って合点がいきました。ALSに関する活動でも、エンターテインメントやテクノロジーを利用して、気づけばALSについて理解していたり、人の輪ができていたり、未来が見えていたり。

武藤：一方向のコミュニケーションには限界があると感じていて、ALSに関心を持っている方は熱心に応援して下さるけれど、全く接点がない方に、僕たちの思いをどう伝えるかを考えた時に、コミュニケーションの幅を限定しているようでは届かないと思ったんですね。それから、コミュニケーションの幅を、かなり広く捉えるように心がけています。

杉原： 2014年、ALS患者を支援することを目的にはじまった「アイスバケツチャレンジ」は、動画サイトにアップされ、海外セレブに広がったことで、世界的な広がりを見せました。バケツに氷水を入れて、それをかぶるか、100ドルを支援団体に寄付するか、その両方をやるか、選択をするというもので、やった人が次の人を指名し、指名を受けたひとがまたその選択をするというものでした。どちらもやらないという人もいましたが、僕は面白いなと思ってドネーションをしましたが、あのアクションで結果的に、ALSを知る人は増えた。“理解を広める”ということに関しては「面白い」とか「かっこいい」が入り口でないと継続しづらいと思っていて、「アイスバケツチャレンジ」はそれができていたのかなと。

武藤：僕自身も健常者の経験があります。健常者時代に、このコミュニケーションの方法で果たして興味を持ったかを想像しながら、健常者の視点と、障がいを抱えた人の視点双方を精査することに重きを置いています。

「せりか基金」の広がり

杉原：武藤さんが動画で言っている「想像ではうまくいってる」という言葉が凄く好きです。

武藤：実は漫画『宇宙兄弟』の台詞なんです。僕たちは、ALS治療薬の研究開発費用を集める活動は『宇宙兄弟』チームの『せりか基金』（※）というファンドレイジングと一緒に行っているんです。僕もこの台詞がとても好きで、当事者である僕が、その言葉を発信することに意味があるんじゃないかと思いました。アイスバケツチャレンジから今年で４年。あれほど社会的なインパクトがあったものの、残念ながら一過性で終わっていることに凄くショックを受けました。もう1回当事者が、「僕らのゴールはALSが治る未来をつくることだったよね？　じゃあそこに向けてできること。一人ひとりの“キープムービング”で良いから、続けていこうというメッセージが根底にあります。

※せりか基金：漫画『宇宙兄弟』から派生した『宇宙兄弟ALSプロジェクト』が展開するALSの治療方法を見つける為の研究開発費を集める活動。

画像提供 ：https://landing-page.koyamachuya.com/serikafund/

『人TECH』は“補完”を超えて“拡張”する

杉原：アイスバケツチャレンジから学んだこととしては、未来に対する投資というよりも、未来を近づけるという考え方が近いのでしょうか。

武藤：そうですね。ビジョンを提示して、それに対する皆さんの協力や、一人ひとりが考えることがスタートだと思います。例えば「もう一度、氷水かぶれるな」とか「もう一度寄付だけはできる」とか「俺はテクノロジーに強いから、テクノロジーを使って患者さんをサポートできるんじゃないか」とか、一人ひとりが貢献できうることを考えてもらうきっかけをつくりたかったんですね。そういった発信をする度に新しい出会いがあり、プロジェクトのスタートにもなる。発信して、リアクションがあって、現実に変わっていく。動画を発信してから『せりか基金』の寄付も増えてきていて、アーティストの方が、自分のライブで募金活動を行ってくれたり、ステージで自分の思いを語ってくれたり、生のリアクションは本当に嬉しいです。

杉原：武藤さんが公開した一番最初の動画が2015年1月1日ですかね。「Fuckin（ファッキン） ALS」。

武藤：あれは本音です（笑）。周囲からは「あれはやめておいたほうがいいよ」と言われたりもしました。当時は『WITH ALS』というネーミングも既に考えていましたが、最初だけは本音をさらけ出したい、と。それから『WITH ALS』として、ALSと向き合う活動を始めた方が、自分自身の気持ちとしてもリアルだと思ったんです。

LIFE LOG Vol.1 http://withals.com/post/?id=33&title_id=37

杉原：今も本心はそうではないですか？　その気持が僕には凄く伝わりましたし、動画という形で残されていますよね。

武藤：リアルをさらけ出すことで、同じ病気と闘っている方へメッセージが届くと思ったんです。でも同時に考えていたのは、ネガティブな感情からは何も生まれないということ。「ファッキン」てどれだけ思っていても、その感情に負けたくなかった。自分が今、未来に向けて起こせるアクションは何かを考える為に、『WITH ALS』を立ち上げました。

杉原：その時に見た未来と今は比較してどうですか。

武藤：病気が進行していくという状況は、想像していた以上に大変なことだという実感は持っています。でも、3年半やり続けてきたからこそ「まだやれる」という思いもある。チャレンジを続けるほど新しい仲間との出会いがあります。僕たちは、主にテクノロジーとコミュニケーションの領域で活動をしていますが、前者で言うと「あなたはこれを２度とできません、不可能です」と言われていたことを、テクノロジーとの融合で可能にできるという確信を持つことができました。それは障がいを抱えていて、何かを補うという概念以上に、健常者の進化にも繋がると思っていて。

杉原：僕らは、それを“拡張”と呼んでいます。

武藤：人間の可能性を拡張するのは、まさにテクノロジーの役割だと思うんですね。僕らは、人を支えるテック、『人TECH』と呼んでいて、テクノロジーの力で人間の能力を拡張させることが僕らの使命だと思っています。

杉原：同感です。“補完”も勿論大事だと思っていて、それを否定している訳ではなく、“拡張”という要素がないとワクワクしないじゃないですか（笑）。

武藤：ひとつだけ例を挙げると、今、僕が付けているメガネ型デバイス。「これを使って日常的な意志伝達ができたら良いよね」と思う。でも、それは補完でしかなくて、ワクワクするスイッチって押されない。僕は本来、全ての人に表現の自由は平等にあるべきだし「俺ら、まだまだできるよ」という意味で、DJとVJをこのデバイスだけで行う『EYE VDJ』を始めたわけです。僕は、健常者時代は手でDJしかできなかったのが、今は音楽と映像双方の表現を目の動きだけでやっている。これは、ある意味拡張だと思います。そういうモデルをどんどん社会に提示していきたい。

「不可能」と言われると、燃える

杉原：補完的な考え方って結構多くて、そういう社会に一石じゃなく、何石も投じている姿は“感動”だけで絶対に終わらせたくないと感じています。『せりか基金』でも、テクノロジーにどんどん寄付していくのも面白いですよね。

武藤：そうですね。『WITH ALS』の専門領域がテック。テクノロジーを活用して患者さんのQOLを上げていくことは、治療薬のない病気であればあるほど、大事な役割だと思う。QOLが担保されないで「ALSは治らないけれど、ただ生きて下さい」と僕は言えない。「自分らしく生きることができる。だから治るまで一緒に生き抜いていこうよ」と言えるようになりたい。

杉原：QOLと聞くと、皆、急に難しく考えるけれど、子どもの頃から持っている感情で、一番シンプルなはずなんですよね。

武藤：ただ、自分らしく生きたいだけですから。

杉原：その感情は誰も止めちゃいけない。今、武藤さんが実行しているテクノロジーという領域は凄く共感できます。一歩踏み出すゼロイチ的な考え方は、凄く難しい。でも武藤さんなら、できる気がします。

武藤：逆に、今は「不可能」と言われると燃えるんです。「本当か？　可能にできる道筋があるんじゃないか」と。でもそれを一人で体現、実現する必要はないと思うんです。今、活用できるテクノロジーの種類は無数にあると思っていて、あとは僕たちがテクノロジーの使い方を当事者の視点で発信していくこと。ですから、テクノロジーサイドにもイノベーションを起こせると思う。その意味では、テクノロジストと僕らのような存在はタッグを組むべきだと考えています。

後編につづく

武藤将胤（Masatane Muto）
1986年ロサンゼルス生まれ、東京育ち。難病ALS患者。一般社団法人WITH ALS 代表理事、コミュニケーションクリエイター、EYE VDJ。J-waveラジオナビゲーター。また、（株）REBORN にて、広告コミュニケーション領域における、クリエイティブディレクターを兼務。過去、（株）博報堂で「メディア×クリエイティブ」を武器に、さまざまな大手クライアントのコミュニケーション・マーケティングのプラン立案に従事。2013年26歳のときにALSを発症し、2014年27歳のときにALSと宣告を受ける。現在は、世界中にALSの認知・理解を高めるため「WITH ALS」を立ち上げテクノロジー×コミュニケーションの力を駆使した啓発活動を行う。

WITH ALS
http://withals.com/