人と人とのコミュニケーションに必要なものは、言語だけにあらず。視線やジェスチャー、表情といった非言語情報も不可欠であることはいうまでもない。岡田将吾氏は、それを社会的信号処理という新しい領域に基づいた研究を通して読み取ることを実践する先駆者のひとり。同氏の試みは、人間の内面の状態を理解するためのAIの新分野として世界から注目を浴びる。これらの研究は認知症の初期症状などを読み取る手がかりにもなるという。編集長・杉原が、最先端の研究の現状とその先に広がる未来について伺った。

人の行動から内面状態を理解するという試み

杉原：もともと岡田さんは、大学でいわゆるAIに関する研究をされていたんですか？

岡田：そうですね。人工知能を基本に、修士、学士と約５年間研究をしまして、少しずつ人の行動を予測するとか、人の行動からコンテキストを推定するということにフォーカスするようになりました。　例えば、この人のしゃべり方や使う言葉の特徴がこうなら、この人はロボットとのおしゃべりを楽しんでいるとか、いくつかの行動から、人の内面を予測するというような研究です。

杉原：今日は、話していて僕の思惑がバレるかもしれないから、サングラスか何か掛けたい気分です（笑）。

岡田：いや、僕自身は（内面を予測することは）できないですよ（笑）。システムにはできてしまうことがありますけどね。

人の行動から内面を読み取るという研究を続ける岡田氏。「最近は、手の動きと感情の関係性が気になる」という。

杉原：ならよかったです（笑）。岡田さんのそういった研究は、AIなどを通じて出口がたくさん出てきたという段階ですか？

岡田：そうですね。最近は動作を測るセンサーが安くなったりもして、状況が変わってきましたし、企業でも自分たちのような研究をしているところが出てきました。そういうプロジェクトに自分が加わることも増えてきて、出口は広がったと感じています。

杉原：もともと岡田さんがAIに興味を持ったのは、どういった経緯でしょうか？

岡田：最初は大学で物理をやっていたのですが、物理の世界っていろいろと難しくて挫折してしまいました。それで物理の先生にはちょっと失礼なんですが（笑）、もう少し目に見えてわかりやすいことがやりたいと思って、ロボットに顔の認識や画像の認識をさせて動かすという研究をやっている研究室に入ったんです。AIを研究し始めたのは、そこからですね。

杉原：岡田さんのような分野の研究者は、日本にどのくらいいらっしゃるんですか？

岡田：もちろん産官学で人工知能の研究をされているグループは山ほどありますけど、ピンポイントで、人の行動から内面状態を理解するみたいなことに焦点を当てているのは、僕たちと数えるくらいしかないです。

こちらは、2018年にジョージ・アンド・ショーン合同会社（現株式会社）と岡田研究室が共同で開設したG&S Labのイメージビジュアル。IoTデバイスであるbiblle（ビブル）を活用して、行動学習に特化した機械学習プログラムの開発を行っている。

もう多くの企業ではAIが採用面接をしている!?

杉原：表情から何かを読み取るということは、なんとなく僕もイメージできるんですが、そこから購買意欲だったり、そこに出口を見つけていくというのは、なんだか大学でやる研究っぽくないなと思いますね（笑）。

岡田：そう言われれば、そうかもしれないですね。

杉原：僕自身のイメージでは、大学の先生は研究を突き詰めて、あとはアウトプットを第三者に見つけてもらう、そんなスタイルが多いなと常々感じているんですよ。それが出口までしっかりとしていて、岡田さんの研究は面白いなと思います。

岡田：そう言っていただけるとありがたいです（笑）。確かにそれは狙っていて、研究室でコンピューターの前に座って突き詰めるのではなく、実際のインパクトのあるデータに対して、なんらかの回答を出していくほうが、世の中的にも出口がわかりやすいですし、そういうことは意識していますね。

岡田氏の研究に興味津々の杉原。感情という抽象的なものを数値化するという試みには、シンパシーを感じているようだ。

杉原：世界的にはどうなんですか？

岡田：コンピューティング分野の国際会議のような場には、アメリカ、ヨーロッパの有名大学の研究者が集まってきますが、そこでは感情を理解するという研究が一番多いように感じます。コンピューターにいろいろな感情を理解させるということが基本ですけど、話している声や内容、表情からコミュニケーションのスキルを推定するということも盛んになってきてはいます。AIによる企業の採用面接みたいなものもそうですね。

杉原：確かにそういう面接は、実際にあるようですね。

岡田：面接で一言、二言答えたことから推測して、その人（のスキル）を判定するということですよね。あらゆる企業は、もうAIを様々活用しているのですが、採用には特定の人しか受からないとか、雇用差別・公平性の問題が出てきたりもしています。自分も就職面接のように実際に多くの人を呼んで、はじめて会った学生同士でディスカッションをしてもらい、そのビデオを人材派遣の会社に送って、人事の採用担当者に点数をつけてもらうという試みをしたことがあります。同じようにAIにも判断してもらったら、熟練の採用担当者と同じように人を選ぶのかどうかを検証しました。その実験は、学会でも良い評価をもらいましたが、アプリケーションとして見た場合、考慮すべき課題が多いと感じます。ですので、そういうスキル判定の技術を使って、スキルを上達させるための訓練に活かすことを、これからはやっていきたいですね。困っている人が喜ぶようなアプリとして機能できればと思っています。

感情を数値化するには、大きな課題がいくつもある

杉原：なるほど、それは興味深いですね。もうひとつお聞きしたいのが、“感情”っていうのは数値化も可視化もしにくいのではないか、ということです。実際に研究は進んでいるんでしょうか？

岡田：そうですね、難しいところも確かにあります。いま主にやっていることは、心理学者たちがこれまでに作った評価指標に則って、実験後に、いまあなたの感情はいくつでしたか？　というように被験者に問いかけたり、第三者に被験者の映像を見せて、被験者の感情状態はどうなっていると考えられますか？　というようにアンケートを書いてもったりする手法なんです。それをもとに人工知能が答えを導き出すわけですから、そもそものアンケートの答えが間違っていると、人工知能的にはもう破綻してしまう。そこが弱点でもありますね。

杉原：まず、ちゃんとしたデータを取ることが難しいんですね。

岡田：正解のデータがしっかりと作れなければ、人工知能は動けませんから。正直、感情って自分で数値をつけるのは難しいですよね。

杉原：自分でも自分の感情が一番わからないこともありますよね（笑）。

岡田：そういうものなんですよ（笑）。

杉原：以前の心理学者の研究だったり、研究論文なんかを追っかけながら、感情を紐解く要素を分析していくという手法はもちろんわかりますが、IoTを使ったデータ集めというのは、どうなんでしょう。世界的にはビッグデータは集まってきているんですか？

岡田：それも難しいところではあるんです。GAFAは、画像・音声を含めWeb上でたくさんの情報を集めていますが、普段の人同士の会話や、自然に対面コミュニケーションしているときのデータを膨大に集めるのは、まだまだ実際には難しいですよね。例えば感情データを集めるために、誰かが怒っているところをずっとビデオで撮るわけにもいかないですし、これからデータを取るので怒ってください、っていうのもおかしいですしね（笑）。多くの人が、AI speakerと友達のように頻繁に話す未来が来たら変わるかもしれませんが、AIの対話機能レベルから言って、それはもう少し先になりそうです。

杉原：確かにそうですね。

岡田：だから、自然にそういうデータをどうやったら取れるのか？　っていうのは自分たちの研究の大きな課題ですね。

杉原：ライフログ的なところですね。とはいえ、無理やりIoT的な要素をくっつけたものを開発して使ってもらっても、結局使わなくなりますしね。

岡田：そうですよね、スマートウォッチとかもその一例だと思います。

杉原： スマートウォッチが出た当初はすぐに買いましたけど、３日後にはこれまで使っていた普通の時計が恋しくなってしまいました（笑）。でもいまは、Apple Watchなどがセンシングに使われていますよね。睡眠だったり、バイタルだったり。そういう使われ方をしているのは有意義だと思います。

岡田：そうですね、そのような使い方は興味深いです。最近私たちもスマートウォッチのようなセンサを使った研究を始めています。とはいえ自分たちの研究は、いまはデータを採取するのにビデオの前に人を座らせなきゃならないので、常に記録するのが難しい状況です。なので、毎日何かを記録すれば、健康がチェックできるとか、そういう多くの人に受け入れやすいアプリなどを通して、効率よくデータを取る方法を模索して行こうと思っています。

後編へつづく

岡田将吾（おかだ・しょうご）
国立大学法人北陸先端科学技術大学院大学（JAIST）准教授。2008年東京工業大学大学院知能システム科学専攻博士課程修了。京都大学特定助教、東京工業大学大学院助教、IDIAP research institute 滞在研究員等を経て、2017年より現職。「社会的信号処理に基づく人間の行動やコミュニケーションの理解」を主要テーマに、AIの新たな領域の研究に取り組む。専門は、マルチモーダルインタラクション、データマイニング、機械学習、パターン認識ほか。

ありとあらゆる世代や人種が集まる街、渋谷。そこは、多彩なコミュニティが生まれ、新たな文化が沸き起こる一大メトロポリス。障がいのある方をはじめとするマイノリティや福祉そのものに対する“意識のバリア”を解き放つべく、従来の枠に収まらないアイデアから生まれた「カッコイイ」、「カワイイ」プロダクトや「ヤバイ」テクノロジーを数多く紹介する『超福祉展』をはじめ、街がまるごとキャンパスとなり、教えると教わるを自由に行き来できる新しい“共育”システム『NPO法人シブヤ大学』や『渋谷民100人未来共創プロジェクト』など、多様性社会の実現に向けて、多彩な取り組みが次々と行われている。本当のダイバーシティ（多様性）とは？渋谷の未来はどうなる？渋谷区長を務める長谷部健氏にHERO X編集長・杉原行里（あんり）が話を伺った。

「YOU MAKE SHIBUYA」で作る、
未来の街『渋谷』

杉原行里（以下、杉原）：早速ですが、お聞かせください。ダイバーシティの定義は、企業や行政によってもさまざまにあると思いますが、長谷部区長はどのようにお考えですか？

長谷部健氏（以下、長谷部）：人種や性別、国籍、出身地、あるいは趣味や嗜好も含めて、互いの違いを認め合い、尊重し合うことが、ダイバーシティと言われていますが、そこで終わりではなく、その先でしっかりと調和していくことが大切だと思います。色んな音色が混じり合って、ひとつの作品になっていくという、音楽でいうところの“ハーモニー”ですね。違う音色を奏でる人もいれば、音色が上手く出せない人もいるでしょう。ハーモニーが乱れることがあるかもしれないけれど、それを寛容に受け止めていくのが、社会のあるべきダイバーシティの姿だと思うんです。

杉原：なるほど、多様性調和ということですね。オーケストラに例えるなら、やはり区長は指揮者になるでしょうか？

長谷部：いえいえ、私も演奏しているひとりです。もしくは、指揮者はいなくて、皆で演奏しているのかもしれません。

杉原：音楽の話でいうと、20年ぶりに策定した渋谷区の基本構想のキャンペーンソング「夢みる渋谷　YOU MAKE SHIBUYA」が配信されています。

長谷部：区長に就任した時（2015年）、最初に取り掛かった仕事が、基本構想の改定でした。基本構想は、地方自治体にとって政策の最上位概念にくるものなんですね。全ての計画がそこに紐づき、その傘の基に運営する重要な核となるものです。改定する前の「創意あふれる生活文化都市 渋谷―自然と文化とやすらぎのまち」という基本構想も非常に良かったのですが、20年前に比べると、やはり時代背景は大きく変わっています。

これからの鍵は、先に述べたダイバーシティと、それをエネルギーに変えていくインクルージョンであると考えています。これらを強く意識して打ち立てた将来のビジョンが、「ちがいを ちからに 変える街。渋谷区」です。このスローガンに基づく新しい基本構想は、審議会答申を経て、2016年10月に議決いただきました。そして、“ちがいを ちからに 変える街”を実現するために必要なのは、「YOU MAKE SHIBUYA」だということを訴求しています。「YOU MAKE SHIBUYA」と繰り返し言うと、「ユメイクシブヤ（夢行く渋谷）」と聞こえてきませんか？

杉原：本当だ！聞こえますね。

長谷部：夢をもっていこう、自分たちで渋谷の街を作っていこう。「YOU MAKE SHIBUYA」には、この二つの意味を込めました。渋谷には、区民の方をはじめ、働いている人や遊びに来る人、学生時代を過ごした“第二の故郷”として慕う人など、想いを寄せてくださる方がたくさんいます。そうした方たちも含めて、渋谷区の基本構想をもっと多くの人に広く知っていただきたいと思い、その価値観や未来像を、ポップなキャンペーンソングやアニメのPV、絵本テイストのハンドブックなどに反映しました。

杉原：誰にとっても分かりやすい共通言語のようなものを作りたかったのでしょうか？

長谷部：言語というよりは、共通のビジョンであり、共通のステートメントと言えるかもしれません。とりわけ基本構想を「歌」の形にした背景には、そう遠くない未来に、この街の主役になる子どもたちにこそ、ぜひ知っておいて欲しいという想いがありました。今年の夏、SHIBUYA109周辺エリアで初開催した「渋谷盆踊り大会」では、「夢みる渋谷　YOU MAKE SHIBUYA」のボーカルを担当された野宮真貴さんが“盆踊りバージョン”にアレンジしてくださり、大盛況のうちに幕を閉じました。来年は、あるアーティストの方にダンスバージョンを作っていただく予定です。渋谷区内にある学校の運動会で、催し物のひとつとして、子どもたちに踊ってもらえば、楽しみながら覚えてもらうことができるかなと。

杉原：楽しそう！これは名案ですね。

http://www.peopledesign.or.jp/fukushi/

「超福祉」は、心のバリアを溶かす
“意識のイノベーション”

杉原：今年で4回目の開催となる「超福祉展」。今回は、渋谷ヒカリエ「8/（ハチ）」を中心に、渋谷キャストやハチ公前広場、代官山T-SITEなどにサテライト会場が設けられ、街そのものが大きな舞台になっています。そもそも、この展覧会は、どういった意図で始められたのですか？

長谷部：障がい者をはじめとするマイノリティや福祉に対して存在する負い目にも似た“心のバリア”。平たく言うと、その人たちは、「手を差し伸べる対象」であると、これまで多くの人が感じていたのではないかと思います。渋谷区では、2015年4月1日より、「同性パートナーシップ条例」（正式名称「渋谷区男女平等及び多様性を尊重する社会を推進する条例」）を施行していますが、この課題に取り組んだ時に痛感したことがあります。それは、マイノリティの抱える問題を解決するためには、マジョリティの意識の変化こそが求められていること。LGBTがマイノリティだとしたら、それ以外のマジョリティの人たちが意識を変えていくことで、世界は少しずつ変わっていくと思うんです。

障がい者に対しても、同じことが言えると思います。既存の福祉の概念を超えていくことで、心のバリアが溶けて、人々の意識が変わっていけば、「一緒に混ざり合う対象」であることに気づいていけるはず。超福祉展は、そんな意識のイノベーションを目指して、開催を続けています。

後編へつづく

長谷部 健(KEN HASEBE)
渋谷区長。1972年渋谷区生まれ。株式会社博報堂に入社後、さまざまな企業広告を担当する。2003年に同社を退職後、NPO法人green bird（グリーンバード）を設立。原宿・表参道を皮切りに、清掃活動やゴミのポイ捨てに関する対策プロモーションを展開。活動は全国60ヶ所以上に拡がり、注目を集める。同年、渋谷区議に初当選。以降、3期連続でトップ当選を果たす（在任期間：2003～2015年）。2015年、渋谷区長選挙に無所属で立候補し当選。2015年4月より現職を務める。

超福祉展
http://www.peopledesign.or.jp/fukushi/