テクノロジー TECHNOLOGY

アート×テクノロジーで可視化する未来【対談: 真鍋大度(ライゾマティクス)】

川瀬拓郎

パフューム、サカナクションといった日本の人気アーティストや、ビョーク、OK Go、ノサッジ・シングといった世界的に有名なアーティストとのコラボレーションや、リオ2016大会閉会式、東京2020のフラッグハンドオーバーセレモニーでのAR映像演出などを手がけたライゾマティクスの真鍋大度氏。ライゾマティクス創業から15周年となる今春は、東京都現代美術館で大回顧展を開催したばかり。エンタテイメントからアート、スポーツ、医療と幅広いフィールドを横断しながら積極的に活動する真鍋氏を迎えた対談を前後編にてお届けする。

ライゾマティクスの飛躍は
ソフトとハードの両面にあり

杉原:僕が最初に真鍋さんを知るきっかけとなったのが、顔がピクピクする動画(electric stimulus to face /2008)だったのです。その時「ヒューマノイドの世界がついに来たんだ」と思いました。顔面の動きをトレースしていけば、今後は相当リアルなヒューマノイドが出来上がるんじゃないかと。

真鍋:今でこそSNSは当たり前ですが、当時はまだSNSもそこまで影響力がなかったですよね。やはりあの動画は海外で活動する大きなきっかけになりました。以前から同じようなことをやっていたのですが、なぜかあの動画だけかなりバズったんです。海外の人が見つけて面白がってくれたことが話題になった要因になっていたと思います。

杉原:それから、プリンターを使ったOK Goのミュージックビデオも印象的で、何度も繰り返して再生しました。あの動画は編集なしの一発勝負ということを聞いて、さらに驚いたんです。

真鍋:他にも似たようなことをやっている会社はあるのですが、ライゾマを評価していただいていることの1つの要因として、ハードウェアのエンジニアが多いことが挙げられると思います。なので、OK GoのMVのように大量のプリンターをハッキングして操作することができました。ソフトとハードの両方から難易度の高いことにアプローチできるので、「どうにもならなくなったらあいつらを呼ぼう」という感じで海外からオファーを受けることが多いんです。例えば広告の現場でドローンを上手く制御できなくて、どうにもならなくなって僕らが呼ばれるという。

杉原:はじめからライゾマにオファーするのは、ハードルが高いということでしょうか?

真鍋:というより、やはり最初はどの会社やチームも自分たちでやってみたいものなんですよね。難易度の高い仕事のひとつとしては、フェンシングの太田(雄貴)選手の剣先をマーキング無しで視覚化することがありました。

フェンシング・ヴィジュアライズド・プロジェクトついて

杉原:太田さんは前衛的な考え方で様々なテクノロジーやアイデアを柔軟に取り入れている印象ですよね。だから太田さんの一挙手一投足が注目されていたと思うし、ライゾマが剣先の動きを視覚化したことで、フェンシング競技の面白さが一気に高まりましたよね。本当に素晴らしいプロジェクトでした。

真鍋:ありがとうございます。2013年に、太田選手と電通からこれからのスポーツ観戦をテクノロジーの力でフェンシングをよりわかりやすく、魅力的に見せることが出来ないかというお題をいただき、ライゾマティクスが剣先を可視化するアイディアを提案、そしてプロトタイプの実装を担いプロジェクトがスタートしました。

杉原:剣道もそうだと思うんですが、フェンシングの勝負はあまりに一瞬すぎて、どう勝負が決まったのかが分かりにくいですからね。あれってカメラで剣先をトラッキングしたのですか? それとも加速度センサーを使ったのでしょうか?

真鍋:最初は剣先に再帰性反射材を付けてマーキングして、赤外線カメラを64台設置し剣先をトラッキングしました。モーションキャプチャの技術を使えば、トラッキングは可能でした。デモンストレーションとしてはそれで充分でしたが、本番の試合ではマーキングはできません。国際試合でもこの技術を使えるようにするためには機械学習技術を用いる必要があり、2013年時点では長い道のりになることは明確でした。ただ、東京オリンピックまでにはできるはずだと話をしました。

エイブル presents 第73回全日本フェンシング選手権大会

杉原:本当にゼロからのスタートな訳ですよね。剣先の動きをありとあらゆる変数でアルゴリズム作ってディープラーニングさせていくということですよね。ちょっと吐き気がするほどの作業量ですね(笑)。

真鍋:システム開発もそうですが学習データを作る作業が大変でしたね。僕は途中からディレクションに回り、開発はライゾマの花井というシニアエンジニア主導で進めたのですが、まずは練習試合の動画データを取得し、そこからアルバイトの手によって20万枚の画像に手動で人の骨格と剣先をラベリングしました。最終的なハードウェア構成もソフトウェアの処理も本当に複雑で、かつ映像的にもきちんと見栄えが良いものを作らねばならず「良くぞこれを実装しきったな……」とエンジニアたちが開発したのを横目で見て感動していました。

杉原:技術を実用化するためには、システムのスリム化が必要ですよね。でも、ゼロから始めるときは、どうしてもマッチョなシステムから始めるしかない訳ですね。我々のプロジェクトにも同じことが言えるので非常に共感します。ふと思ったんですが、イーロン・マスクが開発しているニューラリンク(脳とコンピュータをつなぐ技術)が進み、集積したデータを自分の脳に移植すれば、ものすごいフェンシングが上達するわけですよね。

真鍋:まだまだ先の話になるでしょうが、そうした未来もあるでしょうね。僕個人としては、その技術ができたら真っ先に埋め込んでみたい(笑)。

杉原:30年後の未来を考えていくと、拡張型の技術はもはや避けては通れないですからね。だから僕は“アート×テクノロジー”というところで、真鍋さんの作品から1歩先の提案書をもらっている感じなんです。

真鍋:そう言っていただけるのは本当にありがたいです。医療の分野は倫理の問題などがあり、出来ないことも多々あるので難しいですけれど。おっしゃる通り、アートはちょっと先の未来を実験するにはちょうどいい分野でもありますね。

2015年の取り組みをアップデートさせた
ELEVENPLAY × Rhizomatiks “border 2021”

杉原:リオ2016大会閉会式、東京2020のフラッグハンドオーバーセレモニーのAR演出なども本当に素晴らしかったですね。さて、僕は結局観に行けず非常に悔しんですが、今年2月に行われた“border 2021”のコンセプトやバックグラウンドを改めて教えてください。

真鍋:ステージ上でパフォーマンスを体験しているお客さんもいるし、その様子を観客席の外から見ているお客さんもいる。そんな風にお客さんとパフォーマー、ステージと観客席、そういう境界線がない空間や入れ子構造になっている状態を作りたかったんですね。さらにリアルな現実とVRの世界をシームレスに行ったり来たりできるボーダレスな状態を作り出してみたいと思い、そこから“border”というプロジェクトが始まりました。たまたまパーソナルモビリティ・WHILL(ウィル:次世代型電動車椅子の名称であり、その開発会社)の人たちと仲良くなった時期ということもあり協力していただきました。最終的にはお客さんにMRゴーグルを装着してWHILLに乗ってもらった状態で、生のダンサーとVRのダンサーを体験する作品になりました。実際に開発して痛感したことなのですが、身体が車椅子で動かされることでさらに没入感が増すんです。

杉原:リアルと仮想のフュージョンみたいなところですね。没入感を高めるために身体の動きが重要だったというのは面白い発見ですね。

ELEVENPLAY x Rhizomatiks “border 2021” (2021) Photo by hiroko hirota(同、トップ画像)

真鍋:そのとき改めて分かったことは、大脳ではなく中脳に作用するということです。中脳は平衡感覚神経を司っている部位なで、普段やっているVRではそれほど意識しないのですが、WHILLによって身体を動かされることで、よりリアリティを感じやすくなるということが分かったのです。

杉原:僕もVRを利用した車いすレーサーCYBER WHEEL Xを作りました。自分の腕で漕いで、VR上で2100年の東京を走るという新感覚のゲームです。その時に仕掛けた技術は、加速度をきちんと理解してもらうためにトルクを入れたのです。それで一気に没入度が上がったんですよね。上り坂になると急に重くなる、下り坂やジャンプもリアルに感じる。ジェットコースターのようにお腹が浮く感じが苦手な人はちょっと酔ってしまう…(笑)。

真鍋:車酔いと一緒ですよね。これは当時FacebookにいたGoromanさんにアドバイスをいただいたのですが、自分の体は動いていないのに、例えばジェットコースターのようにVRの世界では視点がゴリゴリ動いているようなものは確実に酔ってしまうんですね。
実際に車椅子に乗って体験すること、身体を映像と合わせてきちんと動かすこと、それによって大脳だけでなく中脳がリアルと錯覚する。そこが没入感のポイントだったんです。脳科学者の方たちにも“border 2021”を体験していただきましたが、「本当にこれは初めての体験だ!」と感動してもらえたのが嬉しかったですね。

杉原:中脳が刺激されるとは驚きました。脳科学者の方々も非常に興味深いデータが取れたのでしょうね。アートを通じて、いろんな人たちとのネットワークに繋がったのですね。

真鍋大度(まなべ・だいと)
1976年、東京都生まれ。大学卒業後、大手電気メーカーに就職するが1年で退社。2002年 IAMAS(岐阜県立国際情報科学芸術アカデミー)に進学しプログラミングを学び、2006年Rhizomatiksを設立。以後、さまざまなアーティストのMVやライブ演出、スポーツイベントやファッションショーの演出を手がける。現在も東京を拠点に、アーティスト、インタラクションデザイナー、プログラマ、DJとして活動。

関連記事を読む

(text: 川瀬拓郎)

(photo: 増元幸司)

  • Facebookでシェアする
  • LINEで送る

RECOMMEND あなたへのおすすめ

テクノロジー TECHNOLOGY

後ろから乗ったっていいじゃないか!“乗れるロボット”『RODEM(ロデム)』が作り出す未来のカタチ

中村竜也 -R.G.C

車いすはもはや障がい者のものだけではない。そんな概念に変りつつある昨今の風向きの中、ユーザーの生活空間を広げ、質の高い生活を実現するための移動をサポートしてくれる新しい“乗れるロボット”『RODEM(ロデム)』の販売がついに開始した。そこで今回、医療現場にはじまり、災害地、そしてすべての暮らしと産業のためにロボットを開発する、株式会社テムザックの代表取締役・髙本陽一氏にその全貌をお話しいただいた。

新しい概念の前に聳え立った見えない壁

株式会社テムザック代表取締役・髙本陽一氏

介助者と被介助者の負担を軽減できるだけではなく、日常生活に密着した働きを目的とした“乗れるロボット”『RODEM』。機能、デザインを含め、今までの概念を壊すべくコンセプトで販売までたどり着いたわけだが、そこには予想だにしない苦労があったという。

「実はものづくりとしての苦労よりも、RODEMの開発コンセプトである “後ろから乗り込めて、椅子が上下する” という概念を理解してもらうのに最も苦労しました。介護などのプロであればあるほど、『椅子は前から座るものなので考えられない』って言うんです。

彼らは、既存の車いすに乗せるために滑り板を引いてスッと乗れるようにしたり、人によっては古武道を勉強して乗せ
えの負担をなくす努力などをおそらく長い時間やってきていたので、それをある意味否定しているRODEMの概念は、受け入れづらかったんでしょうね。後ろから乗るというのは、目の前に来たら前にスライドするだけでいいので、本当に楽なんです」

逆に言えば、プロとして直接現場で介護に携わっていない人にとってRODEMの概念は素直に受け入れられるのではないだろうか。なぜなら、その一連の動きは、回転などする必要もなく、直線運動だけで済むからだ。実に合理的である。しかし、想定外の壁はこのほかにもあったのだ。実証実験をデンマークで行った理由がまさにそうだ。

「はじめは九州大学の教授と実証実験の話を進めていたのですが、絶対的な安全を確保できたものでないと、実証実験はできないと言われてしまいまして。弊社からすれば、絶対的な安全を確保できたものは、実験する必要がないんです(笑)。それじゃ、日本ではできないねという話になって。

デンマークは、どんなものでもモニターになってくれるお年寄りの集団がいたり、たとえリスクがあったとしても、新しい物を積極的に取り入れてくれる国なんです。責任の所存のなすりつけあいをする日本とは大違い。それならばということで、デンマークで実証実験をすることになったんです。皆さん率先して乗ってくれました。自分たちの生活の向上に対する意識が高い国民性なんでしょう。もちろん日本人にもそういう方はたくさんいるとは思いますが、たとえ本人が受け入れたとしても、組織や変なルールの中で抑止してしまうので、結果、国としてのスピード感がなくなってしまうのだと思います」

柔らかな思考で描く、RODEMが切り拓く近未来

「実は名前を決める会議の最中に、乗馬姿勢で乗るから“RODEO”という名前を提案した人がいたんですが、それを聞いた誰かが急に『ロデム変身、地を駆けろ!』と言い出したんです(笑)。確かに椅子も上下して変身するし、地も駆けるなと思い『いいね!』ってなりました(笑)」この自由な発想と、それを受け入れる髙本氏の柔軟な姿勢が、RODEMのような優れた“乗れるロボット”の開発を成功させたと思うと納得だ。また、改良を加えることにより、さらにこんなシーンで活用できたらといった未来を見据えた開発が進んでいるという。

「いま販売されているのは内型なんですが、今度は外でも利用できるよう、サスペンションを付けた外型を販売します。すでに7月に京都の嵐山で、NTTdocomoと京阪バスの協力のもと、クラウドで自らの場所などを管理し、タブレットで確認できるようにした実験をしました。

嵐山は外国からの観光客も多いので、言語対応にし、店の中も含めた街中を走ってきました。たとえば自らの進行方向にお寺があるとします。そうするとタブレット画面にアイコンが表示され、それをクリックすると説明やナビゲーションが始まるんです。女子高生にも試乗してもらいましたが、タブレットで会話ができることや、相手がどこにいるか分かることが便利だとすごく喜んでもらいました。

先々は、南ドイツの方ではそういった街が実際に出てきているように、自動車は全部郊外に停め、街の中心には自動車を一切入れない。じゃあ、街の中は自転車と人だけかというとちょっと無理があるので、そこでRODEMのようなシティモビリティをシェアリングするんです。そして目的地にたどり着いたら、RODEMが足りていない場所を自ら判断して、無人でそこに向かうという一連のモデルをすでに考えています。最終的には、現在NTTdocomoがやっている7000台の自転車シェアリングと連携して、この構想が実現できたらいいなと思っています」

最先端のシティモビリティとして、すべての人が乗れるということ。真の意味でのユニバーサルとはこういうことなのだろう。では、髙本氏が考えるRODEMも含めた、ロボット技術でのパラダイムシフトはどのように考えているのだろうか。

「皆さんが一般的に考えるロボットって、まだまだ受付案内やスマートフォンに車輪を付けたようなことだと思うんですね。その手のロボットは、IT屋の考え方なんです。ロボット屋が考えるロボットというのは、物理的に何かしないと面白くないし、意味がない。たとえば、先日積水ハウスミリ単位の精密さで行う溶接や、天井部分の作業をこなすロボットを開発したように、AIを搭載しながら物理的な作業ができるものが、我々の考えるロボットなので。

弊社は、大企業の様々なニーズのロボットを、片っ端から作ってきた歴史があります。いま言った積水ハウスのロボットもそのひとつ。最近ではよく、ロボットが人の仕事を奪ってしまうとか言いますけど、そうではなく、日本が直面している少子高齢社会の歪みをカバーするような視点で物事を見ていかないと、本当にまずい時代に突入しているんです。

人材を募集したら応募が来るような職場にロボットを入れている暇があったら、人が足りていない職場をロボット化にするべき。実際に受付案内のロボットを作ってくれという問い合わせはたくさん来ますよ。でもすべて断ります。なぜなら、受付案内は人間の方がいいじゃないですか。そこはアナログであってほしい(笑)

ロボットの需要は凄まじいスピードで増えている現実があるので、本当に急がないとまずいと感じています。我々も様々な分野で活用できるロボットの開発に取り組んでいるので、あと数年すれば、『あれもテムザックさんだったんだ』というのが沢山出てくると思いますので楽しみにしていてください」

「RODEMに乗った人は絶対に笑顔になるんです。それに前傾姿勢で乗ることで気持ちも前向きになる」と話してくれた髙本氏。どんなにテクノロジーやロボット技術が発展したとしても、人間はほんの些細なことで、今までの考えや環境を一変できる生き物。その感性がある限り、ロボットやAIと人間の共存に不安を感じることはない。

株式会社テムザック
http://www.tmsuk.co.jp/rodem/

髙本陽一
1993年から災害救助、警備、介護、医療、 コミュニケーションロボットなど30種類以上もの実用ロボットを手掛ける日本のロボット開発のパイオニア企業のCEO。ロボット黎明期から独自の遠隔操作システムを開発。その後日進月歩で新技術を次々と開発している。本社(福岡県宗像市)、台湾、イギリス、京都、横浜と国内外に5拠点を持ち、グローバル展開を行っている。MBS「情熱大陸」テレビ東京「WBS」「未来世紀ジパング」「ガイアの夜明け」NTV「真相報道!バンキシャ」等に出演。」

(text: 中村竜也 -R.G.C)

(photo: 壬生マリコ)

  • Facebookでシェアする
  • LINEで送る

PICK UP 注目記事

CATEGORY カテゴリー