人と人とのコミュニケーションに必要なものは、言語だけにあらず。視線やジェスチャー、表情といった非言語情報も不可欠であることはいうまでもない。岡田将吾氏は、それを社会的信号処理という新しい領域に基づいた研究を通して読み取ることを実践する先駆者のひとり。同氏の試みは、人間の内面の状態を理解するためのAIの新分野として世界から注目を浴びる。これらの研究は認知症の初期症状などを読み取る手がかりにもなるという。編集長・杉原が、最先端の研究の現状とその先に広がる未来について伺った。

人の行動から内面状態を理解するという試み

杉原：もともと岡田さんは、大学でいわゆるAIに関する研究をされていたんですか？

岡田：そうですね。人工知能を基本に、修士、学士と約５年間研究をしまして、少しずつ人の行動を予測するとか、人の行動からコンテキストを推定するということにフォーカスするようになりました。　例えば、この人のしゃべり方や使う言葉の特徴がこうなら、この人はロボットとのおしゃべりを楽しんでいるとか、いくつかの行動から、人の内面を予測するというような研究です。

杉原：今日は、話していて僕の思惑がバレるかもしれないから、サングラスか何か掛けたい気分です（笑）。

岡田：いや、僕自身は（内面を予測することは）できないですよ（笑）。システムにはできてしまうことがありますけどね。

人の行動から内面を読み取るという研究を続ける岡田氏。「最近は、手の動きと感情の関係性が気になる」という。

杉原：ならよかったです（笑）。岡田さんのそういった研究は、AIなどを通じて出口がたくさん出てきたという段階ですか？

岡田：そうですね。最近は動作を測るセンサーが安くなったりもして、状況が変わってきましたし、企業でも自分たちのような研究をしているところが出てきました。そういうプロジェクトに自分が加わることも増えてきて、出口は広がったと感じています。

杉原：もともと岡田さんがAIに興味を持ったのは、どういった経緯でしょうか？

岡田：最初は大学で物理をやっていたのですが、物理の世界っていろいろと難しくて挫折してしまいました。それで物理の先生にはちょっと失礼なんですが（笑）、もう少し目に見えてわかりやすいことがやりたいと思って、ロボットに顔の認識や画像の認識をさせて動かすという研究をやっている研究室に入ったんです。AIを研究し始めたのは、そこからですね。

杉原：岡田さんのような分野の研究者は、日本にどのくらいいらっしゃるんですか？

岡田：もちろん産官学で人工知能の研究をされているグループは山ほどありますけど、ピンポイントで、人の行動から内面状態を理解するみたいなことに焦点を当てているのは、僕たちと数えるくらいしかないです。

こちらは、2018年にジョージ・アンド・ショーン合同会社（現株式会社）と岡田研究室が共同で開設したG&S Labのイメージビジュアル。IoTデバイスであるbiblle（ビブル）を活用して、行動学習に特化した機械学習プログラムの開発を行っている。

もう多くの企業ではAIが採用面接をしている!?

杉原：表情から何かを読み取るということは、なんとなく僕もイメージできるんですが、そこから購買意欲だったり、そこに出口を見つけていくというのは、なんだか大学でやる研究っぽくないなと思いますね（笑）。

岡田：そう言われれば、そうかもしれないですね。

杉原：僕自身のイメージでは、大学の先生は研究を突き詰めて、あとはアウトプットを第三者に見つけてもらう、そんなスタイルが多いなと常々感じているんですよ。それが出口までしっかりとしていて、岡田さんの研究は面白いなと思います。

岡田：そう言っていただけるとありがたいです（笑）。確かにそれは狙っていて、研究室でコンピューターの前に座って突き詰めるのではなく、実際のインパクトのあるデータに対して、なんらかの回答を出していくほうが、世の中的にも出口がわかりやすいですし、そういうことは意識していますね。

岡田氏の研究に興味津々の杉原。感情という抽象的なものを数値化するという試みには、シンパシーを感じているようだ。

杉原：世界的にはどうなんですか？

岡田：コンピューティング分野の国際会議のような場には、アメリカ、ヨーロッパの有名大学の研究者が集まってきますが、そこでは感情を理解するという研究が一番多いように感じます。コンピューターにいろいろな感情を理解させるということが基本ですけど、話している声や内容、表情からコミュニケーションのスキルを推定するということも盛んになってきてはいます。AIによる企業の採用面接みたいなものもそうですね。

杉原：確かにそういう面接は、実際にあるようですね。

岡田：面接で一言、二言答えたことから推測して、その人（のスキル）を判定するということですよね。あらゆる企業は、もうAIを様々活用しているのですが、採用には特定の人しか受からないとか、雇用差別・公平性の問題が出てきたりもしています。自分も就職面接のように実際に多くの人を呼んで、はじめて会った学生同士でディスカッションをしてもらい、そのビデオを人材派遣の会社に送って、人事の採用担当者に点数をつけてもらうという試みをしたことがあります。同じようにAIにも判断してもらったら、熟練の採用担当者と同じように人を選ぶのかどうかを検証しました。その実験は、学会でも良い評価をもらいましたが、アプリケーションとして見た場合、考慮すべき課題が多いと感じます。ですので、そういうスキル判定の技術を使って、スキルを上達させるための訓練に活かすことを、これからはやっていきたいですね。困っている人が喜ぶようなアプリとして機能できればと思っています。

感情を数値化するには、大きな課題がいくつもある

杉原：なるほど、それは興味深いですね。もうひとつお聞きしたいのが、“感情”っていうのは数値化も可視化もしにくいのではないか、ということです。実際に研究は進んでいるんでしょうか？

岡田：そうですね、難しいところも確かにあります。いま主にやっていることは、心理学者たちがこれまでに作った評価指標に則って、実験後に、いまあなたの感情はいくつでしたか？　というように被験者に問いかけたり、第三者に被験者の映像を見せて、被験者の感情状態はどうなっていると考えられますか？　というようにアンケートを書いてもったりする手法なんです。それをもとに人工知能が答えを導き出すわけですから、そもそものアンケートの答えが間違っていると、人工知能的にはもう破綻してしまう。そこが弱点でもありますね。

杉原：まず、ちゃんとしたデータを取ることが難しいんですね。

岡田：正解のデータがしっかりと作れなければ、人工知能は動けませんから。正直、感情って自分で数値をつけるのは難しいですよね。

杉原：自分でも自分の感情が一番わからないこともありますよね（笑）。

岡田：そういうものなんですよ（笑）。

杉原：以前の心理学者の研究だったり、研究論文なんかを追っかけながら、感情を紐解く要素を分析していくという手法はもちろんわかりますが、IoTを使ったデータ集めというのは、どうなんでしょう。世界的にはビッグデータは集まってきているんですか？

岡田：それも難しいところではあるんです。GAFAは、画像・音声を含めWeb上でたくさんの情報を集めていますが、普段の人同士の会話や、自然に対面コミュニケーションしているときのデータを膨大に集めるのは、まだまだ実際には難しいですよね。例えば感情データを集めるために、誰かが怒っているところをずっとビデオで撮るわけにもいかないですし、これからデータを取るので怒ってください、っていうのもおかしいですしね（笑）。多くの人が、AI speakerと友達のように頻繁に話す未来が来たら変わるかもしれませんが、AIの対話機能レベルから言って、それはもう少し先になりそうです。

杉原：確かにそうですね。

岡田：だから、自然にそういうデータをどうやったら取れるのか？　っていうのは自分たちの研究の大きな課題ですね。

杉原：ライフログ的なところですね。とはいえ、無理やりIoT的な要素をくっつけたものを開発して使ってもらっても、結局使わなくなりますしね。

岡田：そうですよね、スマートウォッチとかもその一例だと思います。

杉原： スマートウォッチが出た当初はすぐに買いましたけど、３日後にはこれまで使っていた普通の時計が恋しくなってしまいました（笑）。でもいまは、Apple Watchなどがセンシングに使われていますよね。睡眠だったり、バイタルだったり。そういう使われ方をしているのは有意義だと思います。

岡田：そうですね、そのような使い方は興味深いです。最近私たちもスマートウォッチのようなセンサを使った研究を始めています。とはいえ自分たちの研究は、いまはデータを採取するのにビデオの前に人を座らせなきゃならないので、常に記録するのが難しい状況です。なので、毎日何かを記録すれば、健康がチェックできるとか、そういう多くの人に受け入れやすいアプリなどを通して、効率よくデータを取る方法を模索して行こうと思っています。

後編へつづく

岡田将吾（おかだ・しょうご）
国立大学法人北陸先端科学技術大学院大学（JAIST）准教授。2008年東京工業大学大学院知能システム科学専攻博士課程修了。京都大学特定助教、東京工業大学大学院助教、IDIAP research institute 滞在研究員等を経て、2017年より現職。「社会的信号処理に基づく人間の行動やコミュニケーションの理解」を主要テーマに、AIの新たな領域の研究に取り組む。専門は、マルチモーダルインタラクション、データマイニング、機械学習、パターン認識ほか。

セサミンEXをはじめとするさまざま健康食品を開発してきたサントリーウエルネス株式会社。健康寿命やQOL（Quality of Life）向上が叫ばれて久しい日本だが、健康やQOL向上は、目には見えない感覚的なものも多いだろう。こうした感覚的なものの可視化は健康、QOLの向上に繋がりうるのか。高齢化社会を迎えた日本で、人々の健康に基軸をおいてきたサントリーウエルネス代表取締役社長の沖中直人氏にDXというキーワードで編集長・杉原行里が迫る。

「老化を科学する」ことに着目

杉原：サプリメントなどさまざまな健康食品を開発されているサントリーウエルネスさんの設立の経緯をお聞かせください。

沖中：サントリーは自然の恵みを、我々の加工技術を使って豊かでおいしい飲み物に変換し、お客さまの生活文化を創造していくというところから始まった会社です。創業者の鳥井信治郎が最初につくったヒット商品「赤玉ポートワイン」は、当時の医学博士から薬洋酒いうことで推奨してもらいました。創業当初から美味健康という文脈の流れがあり、1973年には新しい社是「人間の生命の輝きをめざし　若者の勇気に満ちて　価値のフロンティアに挑戦しよう　日日あらたな心　グローバルな探索　積極果敢な行動」が生まれました。

杉原：素敵な社是ですね。

沖中：はい。同じ年に中央研究所というものをつくり、自然の恵みをサイエンスして、人々の健康に役立つ素材や成分の研究が始まっています。その成果としていろいろな素材が生まれ、90年代の終わりには健康商品事業をスタートさせました。そのときからセサミンもありましたが、なかなか軌道に乗らず、思い切って、ダイレクトマーケティングに切り替えようということで、いまから20年くらい前にサントリーウエルネスが設立されました。

杉原：これまでの研究開発のなかで生まれてきた素材や成分を生かして、とくに健康寿命といったものを考えたビジネスにしているのですね。

沖中：そうです。「老化を科学する」という着眼点と、「自然由来の素材や成分で健康維持をサポートする商品を提供する」という2つの概念がユニークだったのだと思います。

杉原：僕、非常に思うのは、寿命と健康寿命というものが乖離しているということです。寝たきりの10年や、歩けなくなってからの10年というのは、本当の意味で健康であるのかないのかという議論が世界中で行われていると思います。そんななか御社は、セサミンEXをはじめとする商品を提供し、健康寿命を延ばしていくという企業なのでしょうか。

沖中：そうですね。「老化を科学する」ということが象徴するように、健康寿命を延ばしていこうというのがそもそもの出発点です。ただ、これから10年くらいの間に、日本は認知症が大きな社会問題になってくるのではないかと危惧しています。

杉原：間違いないと思います。

老化を科学し、一人ひとりの人生に
寄り添う商品やサービス開発を進める

沖中：体がすべて健康と言えなくても、人間は、最後はこころがアクティブで豊かな状態であれば幸福感を感じることができるのではないかと思います。ですから、体の健康ばかりでなく、こころの健康を含めて、「人生100年時代に最後まで寄り添っていくような会社になっていく」というのが、私の挑戦です。

杉原：そうすると、未病がキーになりますか。

沖中：サプリメントに関してはそうですね。私たちが飲料や酒類の酸化を抑える成分の代表格であるポリフェノール研究をしている中で、「品質維持に作用するなら、人間の健康維持にも効果があるのでは？」と、そのような視点から「老化を科学する」研究が始まりました。

杉原：老化というのは、どのへんを指されるのですか。脳、あるいはこころですか。

沖中：体ですね。40代になると30代までのような無理が効かなくなる。これはもう老化のあらわれではないかと思います。

杉原：老化は数字として可視化されていないじゃないですか。僕はいま38歳ですが、よく40代から変わってくると言われて、何が変わるのかを自分で人体実験しようかなと思っているんです。そのときに何を計測して、何が指標になっていくのかなということに興味があります。老化を科学していくなかで、老化は可視化されるものなのでしょうか。

沖中：いろんなものが可視化されていくでしょうね。私たちは可視化されたデータも活用し、様々な商品やサービスを開発し生涯にわたってお客さま一人ひとりの元気を応援する伴走者になりたいと思っています。

杉原：認知症に関してですが、いま僕らは追尾型のロボットや最適な座位をコーチングするロボットSS01（http://hero-x.jp/article/7870/）をつくっていて、僕は超高齢者社会が価値に変わっていくと考えています。2025年には先進国で初めて人口の30.3％が65歳以上になる。そういう最大の実証フィールドを手に入れられるので、そこから生まれるプロダクトやサービスは輸出していけると思います。

サントリーウエルネスさんは、今後はお客さまの解像度を上げていくとのことですが、具体的に解像度を上げるとは、どういうことを指されているのですか。

DXはあくまでも手段
ゴールを見つけることこそが重要

沖中：これはシンプルで、お客さまのこころのなかにある不安とか不便とか不満を、ちゃんと理解することですね。私たちは、シニアのお客さまのお困り事というものを観察して、洞察して、そこに寄り添いながらサービスを提供していきたいと考えています。

例えばですが、シンプルに言って、杉原さんは75歳以上の方のこころの悩みってわかりますか。

杉原：想像はしますが、難しいですね、まだ経験していませんので（笑）。

沖中：そうですよね。私は先日行われたイノベーションガーデンのイベントで、慶應義塾大学の宮田裕章氏と話したなかでも「DXは手段」ということを言い続けていたのですが、ゴールさえわかれば、手段はそこに結びつければいいと考えています。

杉原：そこはまさにそのとおりだと思います。

沖中：私から見ると、世の中のDXを叫んでいる人の多くは、手段から入っているのではないかと感じます。もしくは、自分のまわりの不都合なことがわかっているから、それをDXで解決しようとする。でもDXが全てを解決してくれるわけではない。私たちのサービスでは、顧客から直接話しを聞くコールセンターがありますが、今回のパンデミックで多くの声が寄せられました。そこで改めてシニアの方のこころの動きがわかったのです。
そこがわかれば手段は後から考えればいいと思うんです。解像度を高めずして手段に走るなかれということです。

DXは未来を変えられるのか？

杉原：それでは、サントリーウエルネスさんが考えているゴールというのは、こころに抱えている問題を、デジタルではなくて、人間として理解していくコミュニティを再形成していくことですか。

沖中：コミュニティがつくれるかどうかはまた別の話で、まず、こんなに多くの人が長く生きるということは、ホモサピエンス史上初めてだと思います。そして、人間のこころがおざなりになっている現実がある。そこを1回飲み込んで、消化して、そのうえで自分たちにできることをしていこうと。そのときにはサプリメントというもので信頼関係を築いたら、やっぱり最後はこころなのではないか。サントリー2代目社長の佐治敬三は、公害問題がたくさん起きていて、オイルショックもあった1973年に、「これからはこころの時代が来る」と言っているんです。すごい先見の明だと思います。

杉原：なるほど、理解しました。
それではDXというか手段については、御社の独自の開発でいくのか、あるいはさまざまな企業が開発していくなかでプラットフォームになる可能性もあるということですか。

沖中：いろんな人が遠くから見たときに、結果としてそのように見えるようになるかもしれない。でも、プラットフォーマーを目指すとか目指さないとかではなくて、私たちで出来ることはやり、手の届かない部分は誰かと協力し合ってやるということです。

個人的な価値観の違いだと思ったのですが、すべてのものをデータにする、「世の中で起きていることを因数分解して数学的に解釈していくということ」、それは人間が科学というものを見つけて以来、突き進んできた道だと思います。しかし、私はそこまですべて数学的に解析しなくてもいいのでは、と思うことがあるんです。無駄があってもいいと思っています。データの解析で突き進んでいった先に、本当に幸せがあるのだろうかと思います。

杉原：哲学的ですね。

沖中：すべてが計算され尽くした人生よりも余白のある人生の方が面白いと思います。

杉原：それはまったく同感です。

沖中：データとかDXというものは、どれくらいの余白のバランスでやるかということが大切なようにも思います。

杉原：僕らがいちばんクリアしていかなければいけない問題はテクノロジーだけではないんですよ。人の心を理解することだと思ってます。僕らが今研究を進めている歩行解析ロボットなんて、仮にロボットが「あなた、転びますよ」なんて言われても、そのコミュニケーションは成立しにくい。僕らが大事にしなければいけないのは、その人の背景を理解して、どのようにコミュニケーションをとればいいのかということなのです。

沖中：私は、人は自分が生きて経験した以上のことは、なかなかわからないのではないか？と思っていて、だからこそいろいろな経験をすることが重要になってきます。見て感じることが大事で、その意味では高齢者のことを理解することはものすごく難しい。だからそれをやり続けていかないと、わかった気になっているだけでお客さまに喜んでもらうことはできないのではないかと思います。DXによってシニアはみんなキラキラしたアクティブシニアになれるように言う人がいたら「それホントか？」と、いい意味で疑問を持ち、それを徹底的に掘り上げて考えていくことが、DXの1丁目1番地なのではないでしょうか。

沖中直人（おきなか・なおと）
1991年 慶應義塾大学法学部政治学科卒業、サントリー（株）（※現サントリーホールディングス（株））入社、資材部へと配属となり主に包装容器の調達を担当。1996年食品事業部へ異動し清涼飲料事業、商品開発・ブランドマネジメント業務に従事。「伊右衛門」の開発でチームリーダーを務め、大ヒット＆ロングセラー化実現の立役者となる。2010年サントリー食品インターナショナル（株）食品事業部部長を経て、2015年執行役員 ブランド開発第一事業部長に、2019年常務執行役員 ジャパン事業本部戦略企画本部長、ジャパン事業本部コミュニケーション本部長に就任。無糖茶カテゴリー（伊右衛門・サントリー烏龍茶）、水カテゴリー（サントリー天然水、輸入水ブランド）、機能性カテゴリー（グリーンダカラ、ビタミンウォーター）、トクホカテゴリー（黒烏龍茶、胡麻麦茶）、SBF国内の商品開発企画業務に携わった。
2020年1月、サントリーウエルネス（株）代表取締役社長へ就任、現職。