破壊的イノベーションを起こすことを目的にし、分野や国境の枠を超えて独創的な人材を生み出すことを目的とした慶應大学大学院メディアデザイン研究科（KMD）。そこで学ぶ鍋島純一さんの研究プロジェクト『Arque』が大きな話題を集めている。人間のために作られた尻尾は、僕らの生活をどう変えてくれるのだろうか？　この作品がどのように生まれたのかを含め、鍋島さんに話を訊いた。

身体拡張のパーツとして発想した尻尾

「尻尾というコンセプトが生まれたのは、入学してすぐの5～6月（2018年）と早いんです。身体拡張の方向で何か考えようとしたとき、腕や足の分野ではなく何か新しいものはないかと模索しました。そんなとき、バイオミミクリーの発想で考えたのが尻尾でした。人間が猿だった時代に有していた器官ですし、自分が動物好きだったことも大きいですね」

バイオミミクリーとは、自然界の生物が持っている構造や機能を模倣し、新たな技術を開発することを指す。1958年にアメリカ空軍の医師である、ジャック.E.スティールが提唱し、コウモリを模倣したレーダーや、クモの糸を模倣した繊維など、世界中さまざまな分野で新しい技術が生まれている。

「研究の初期段階では、尻尾とは何かという根源的なところを調べていきました。結果的に、犬であれば感情表現、水中の生物なら移動、猫などはバランス感覚など、大きく分けて3種類の機能があることがわかりました」

3種類といっても単機能ではなく、どの生物も複合的に使っている尻尾。そのなかで、どんな動物にフォーカスしたのだろうか。

「人間の祖先とも言われるオマキザルという猿に着目しました。普段は木の上で生活していて、地上では木の実を石で割って食べています。そして、大きな石を運ぶときは二足歩行になり、バランスを尻尾でとりながら移動するんです。その生態をヒントに、尻尾を装着することでバランス感覚が向上するものを作ろうと思ったんです。社会実装を考えると、三半規管の弱い高齢者のサポートや、荷物を運ぶ物流業界、重労働の介護業界に向けたものが考えられますが、現時点ではまだまだです」

現在はデモンストレーション重視の仕様に

プロトタイプは、簡易的な円盤をワイヤーでつなげ、カタチから作るところからスタートした。その後、お尻の筋肉で動かせないかと、お尻と腰に筋電位センサーを取り付けてみるなど、試行錯誤を繰り返したという。同時に、動物ごと尻尾の骨格の違いを調べていった。

「猫や猿のような、細くてフワフワした尻尾は軽くていいのですが、人間が使うには頑丈さが足りない。そこで、衝撃に強いタツノオトシゴを真似てみたんです」

感情表現を主とする尻尾なら、ふわふわのほうがキュートだが、生活の場で使うのならば耐久性や耐衝撃性は欠かせない。『Arque』はどちらかというとゴジラの尻尾のような見た目だ。

「現在、特殊なゴムチューブを使い空気圧で調整する人工筋肉を4本使っています。でも、これだと大きなコンプレッサーが必要なので、携帯ができず実用的ではない。また、かつてはジャイロセンサーを取り付けて重心の位置を測定し、背中を曲げると尻尾が動いたりもしました。しかし、いまはデモンストレーションを重視していて、尻尾の感覚をより快適に味わえるようジョイステイックで動かす仕様にしています」

出発点はデジタルアート

約2kgの尻尾を実際に装着してみると、フィット感が高いためか重さはそんなに感じられない。片足で立ってもふらつかない、重心を感じられるという機能面もあるが、何より尻尾をつけたビジュアルが面白いのが特徴だ。

「そうなんです。最初の考え方がアート文脈なので、当初からバランスを徹底的に研究したものではなく、あくまでもコンセプチャルな作品。シーグラフなど海外の学会でもそこを評価してもらった感じです。アメリカ人には “クレイジー”と言われました（笑）」

2020年1月には、『アジアデジタルアート大賞展FUKUOKA』のインタラクティブアート部門『優秀賞』も受賞。そのほか、SNS上ではコスプレ界隈からの反応が良いという。

新しいスポーツへの
展開も構想中!?

慶應大学大学院メディアデザイン研究科、通称KMDは大学院ということもあり、さまざまなバックボーンを持った世界各国の人たちが集まっている。重視しているのは、独創的な発想から生まれる破壊的なイノベーションである。

「ここに来る前は、大阪大学経済学部経済経営学科で経営や統計を学んでいました。しかも、当時は部活動ありきでアスリート寄りの生活だったんです。その後、『ゆるスポーツ』という、『超人スポーツ』と似た年齢や障がいも関係ない、新しいスポーツのルール作りに夢中になって。そこから、身体性メディアに興味が生まれ、KMDに入学したんです」

鍋島さんは今年で卒業し、4月からはものづくりを続けながら社会人生活を送る予定となっている。

「『Arque』の最終目標は社会実装ですが、そこに近づける過程でまったく別のものに使われることもあると思っています。また、『ゆるスポーツ』のような新しいスポーツにも使えないかなと考えています」

東京2020に向けて、地方自治体も様々な取り組みを行っている。今回ご紹介をする川崎市では、誰もが暮らしやすいまちづくりに向けて『かわさきパラムーブメント』と題し、様々な取り組みを行っている。本記事では「障がいのある人の音楽表現を支えるテクノロジーの可能性」についてトークセッションが開催された様子をレポート。 前編では、音楽×障がい×テクノロジーの分野を牽引してきた英国のアート集団『ドレイクミュージック』のプレゼンテーションをご紹介したが、後編では、楽器インタフェース研究者(産業技術大学院大学 助教／慶應義塾大学大学院メディアデザイン研究科附属メディアデザイン研究所 リサーチャー)の金箱淳一さん、楽器デザイナーの中西宣人さん、慶應義塾大学大学院メディアデザイン研究科 修士課程の畠山海人さんによる、国内での研究・開発者の活動が共有された。

「振動」を伝え合うことで一体感を得る

金箱：私は「楽器を通して人と人をつなげていく」研究をしています。こちらは、この活動の中で一番始めに作った『Mountain Guitar (マウンテンギター) 』という楽器です。

この楽器には弦がありません。光っている箇所を爪弾くように手を振り下ろすと音が鳴り、本体を傾けると音も傾き、本体を振ることでチョーキングやビブラートという奏法も可能です。コードチェンジを楽器の高さで行えます。

マウンテンギターは、どんな演奏方法をしても必ずかっこいい音が鳴ります。子どもが一番始めに触れる楽器を想像してデザインしました。これを手にすることで人前で楽器を弾くこと、音楽で表現することは楽しい、そんな気持ちを持ってほしいという思いから開発に至りました。

シンガポール、オーストリア、トルコなど、様々な国で展示し、様々な人に触れてもらうことで、非常に多くのフィードバックがあったという。そのなかで「この楽器、音はすごくかっこいいけれど、楽器を弾いている実感がない」というコメントにハッとさせられた、と金箱氏は話す。

金箱：楽器を弾く実感って、そもそもどこからくるのだろう？と、疑問が自分の中で沸き起こりました。そこで私が気づいたのは、楽器を演奏する「実感」には、振動がものすごく大きな影響を与えているのではないか、ということ。マウンテンギターは、内部に傾きのセンサ、明かりのセンサ、圧力センサなど、たくさんのセンサが入っています。そしてその情報がPCに送られて、PCのスピーカーから音が出ます。一方、アコースティックギターの内部には何も入っておらず、弦を爪弾いたときに本体自体が振動して、音が出るという仕組みになっています。マウンテンギターは弾いた時の振動フィードバックはありません。振動が演奏における自身の行為を認識する上で重要であるなら、自分が楽器を演奏したときの振動を他の人に伝えてあげると新しい演奏コミュニケーションに繋がるのではないかと思いました。そこで作ったのが『ビブラションカホン』です。「ビブラション」とはスペイン語で「バイブレーション」のことです。

これは、一人が楽器を叩いたときの音を振動に変換して別の人に伝える、つまり音だけでなく、お互いに振動を伝え合ってコミュニケートできる楽器です。叩くタイミングが合うと、振動が強くなり「リズムが合う」ことの楽しさを強調する機能もつけています。

修士研究のテーマが「一体感」だったのですが、一体感というのは、相手のことを意識しながら自分もそれに合わせたり、あえてそれを外したりする演奏コミュニケーションを指します。振動を伝えあったときと、そうでないときで一体感がどれだけ異なるか、30人程を対象に比較実験をしてみると、「振動を伝え合ったときの方が、そうでなかったときよりも相手を近くに感じる」というコメントを得ました。定量的な評価実験の結果からも、音だけでなく、お互いの演奏の「触り心地」を共有することによって、一緒に楽器を演奏している感覚がより強くなることが実証されました。

音楽を肌で感じることで、
新しい音の世界が現れる

重度の聴覚障がいをもった子どもが ビブラションカホンに触ったときに「あ、音が聞こえた！」と言ったんです。そんな体験もあり、音が聞こえるとはどういうことなのか、一度見直さなければいけない、と思い始めました。

みなさんもコンサートホールやライブハウスなどで音楽を体験されたことがあるかと思いますが、人間は、肌でも音を感じています。強い音圧でスピーカーが鳴ったときに、ビリビリと肌が音を感じます。そして会場には必ずプレイヤーがいて、音が鳴っている様子を目で見て知ることができます。つまり音楽とは、聴覚だけで受け取るエンターテイメントではなく、視覚や触覚、色々な感覚で楽しむ総合芸術である、と私はとらえています。このことから、普段音が聞こえにくい状況だったとしても、その音を視覚的な情報だったり、肌で感じる情報に変えることで、音楽鑑賞や楽器演奏の楽しめるアプローチができないかと考えたのです。

「音を見る」作品例をご紹介します。これを指にはめていただき、手を叩きます。そうすると、拍手のエネルギーで発電し、指先が光ります。この楽器は聴覚障がいの方と対話する中で、「音が見えたらおもしろい」とのコメントから生まれた楽器です。

実際にコンサートホールで使うと、人間は音楽のリズムに合わせながら手を叩く習性があるので、それを視覚に変換することで、音が聞こえにくい方でも、空間を漂っているリズムを目で見て知ることができるのです。

また、「楽器の音を利く」研究もしています。音をきくというと、一般的には「聞く(聴く)」を連想しますが、「利く」の意味は例えば利き酒。利き酒は味だけではなく、見た目、香りなど、五感を通して楽しむことを「利く」といいます。私が作ったものは「音を利く」楽器になります。

これは「タッチ・ザ・サウンド(=音に触る)・ピクニック」という作品で、みなさんが聞いている音の響きを物体の振動刺激に変換して、指先から振動によって音を感じることができる道具です。

これを美術館の音が鳴る作品をテーマとした企画展に展示して、来場した方に楽しんでいただきました。体験者は、イヤーマフをして音の振動に集中できるような環境を作ります。そして、音の鳴る作品を鑑賞するのに、作品の前で耳を傾けるのではなく、指先に意識を持っていき音を感じる体験をします。

印象的な出来事として、ワークショップの最後にイヤーマフを外した瞬間、「新しい音がした！」と言い出した子どもがいたんです。皆さんは普段「音をどこで感じますか？」と聞かれると「耳です」と答えがちですが、それは聴覚が優位になってしまうからであり、私たちは日常的に「肌」でも音を感じています。一度肌で音を感じるトレーニングをしたあとにイヤーマフを外すと、新しい音の世界が立ち現れてくるのです。

金箱淳一《タッチ・ザ・サウンド・ピクニック》2017年
撮影：木奥恵三
写真提供：NTTインターコミュニケーション・センター [ICC]

金箱氏が楽器づくりをするときに実践している考え方をご紹介したい。

「You have your music. I have same.」＝「あなたにはあなたの音楽がある。私もそうである。」

この言葉が示すのは、それぞれに合った楽器というのは、それぞれの楽しみ方を持っているということ。音楽にも多様性はあって、またそれと同じように楽器にも多様性があっていいという信念をもちながら、金箱氏は研究と制作を続けている。

技術や理論を飛び越え、
音楽表現を探索できる仕組みをつくる

次にプレゼンテーションを行ったのは、楽器デザイナーの中西宣人さん。「アクセシビリティと楽器」というテーマで話が進む。

中西：私は「誰もが音楽表現の探索を共有できるプラットフォーム」としての楽器ができないかなと思い、開発を始めました。

その考えに至ったのは、学生のころジャズやボサノヴァといったジャンルに多い、即興のセッションに魅力を感じて、サークルに参加していた経験に由来します。そこには重鎮の方々がたくさんいて、細かい形式が色々とあり、思ったより自由じゃないと感じてしまったんです。ルールや共通言語を指定されてしまうと、そこからあぶれてしまう人が出てきて、色々な人の表現を受け入れられなくなってしまう。そこで、技術や理論の壁がなければ、人はどんな音楽表現をすることができるのか、ということに興味を持つようになりました。

そのあと情報系の大学院に進み、プログラミングなども勉強していく中で、「音楽的に訓練されていない人であっても音楽を表現する能力をもっているのではないか」と述べられている文献を見つけ、技術や理論を飛び越えられる仕組みがあれば、音楽表現を探索できる仕組みがそのなかに生まれる、さらに音楽表現を共有できるプラットフォームができるのではと思いました。そこで着目したのが、様々なセンサです。

例えばピアノは鍵を押すと、内部で連動しているハンマーが弦を叩いて音が鳴る構造ですが、電子ピアノの場合、鍵を押すと中にボタンがあり、圧力を検出して音が出るという構造になっています。センサは電子楽器と大変密接な関わりを持っており、様々なセンサを楽器に用いることで多様な弾き方や表現が生まれるのではないかと考えました。

世の中には圧力を検出するもの、明るさを検出するもの、音響に使われているものなど様々なセンサがあります。それらをどんどん付け替えることで、その都度全く違う相好で演奏ができます。無線通信機能によって楽器がテンポや和音を合わせてくれるので、理論的な勉強が必要ありません。そういった小型の電子楽器を作り、次はもう少し多くの人が触れられるようなものをと、iPhoneの音楽アプリを開発しました。

中西氏はプレゼンテーションの最後に、こう締めくくった。

中西：万能なテクノロジーはありません。その都度開発していく必要があり、目的に合ったものなら最良の道具になるので、どんどん実践を積み重ねていき、共有していくことが重要だと考えています。

音楽×障がい×テクノロジーの分野の可能性を感じた、今回のトークセッション。最後に中西氏が締めくくった言葉のように、実践と共有の場が多くできることが、可能性の速度や精度を上げる鍵となっているように思った。

前編はこちら

金箱 淳一 (かねばこ じゅんいち)
1984年長野県 北佐久郡浅科村（現：佐久市）生まれの楽器インタフェース研究者 / Haptic Designer。博士（感性科学）。情報科学芸術大学院大学（IAMAS）修了後、玩具会社の企画、女子美術大学助手、慶應義塾大学大学院メディアデザイン研究科研究員を経て、産業技術大学院大学創造技術専攻助教、現在に至る。障がいの有無にかかわらず、共に音楽を楽しむための「共遊楽器（造語）」を研究している。
http://kanejun.com/

中西 宣人 (なかにし よしひと)
1987年生まれ。楽器デザイナー。博士(学際情報学)。日本大学芸術学部音楽学科情報音楽コースを卒業後、東京大学大学院学際情報学府に入学し、多様な奏法に対応する音楽インタフェースやデジタル楽器の開発と研究に従事。「The Cell Music Gear」、「B.O.M.B.」、「POWDER BOX」など開発したデジタル楽器が、 Asia Digital Art Award 優秀賞、 電子工作コンテスト優秀賞、Laval Virtual ReVolution“Residence”などに選出されている。また、これらの楽器を用いた演奏活動を国内外で行っており、千代田芸術祭2014音部門 岸野雄一賞、Georgia Tech’s Margaret Guthman Musical Instrument Competition 2017 ファイナリストなど、入選歴がある。現在は、センサ開発企業や教育機関とのデジタル楽器の共同開発、開発した楽器を用いた演奏活動を国内外で行うなど、音と音楽を中心として多角的に活動している。日本大学 芸術学部 研究員/非常勤講師、東京工芸大学 芸術学部 非常勤講師。
http://yoshihito-nakanishi.com/