東京2020に向けて、地方自治体も様々な取り組みを行っている。今回ご紹介をする川崎市では、誰もが暮らしやすいまちづくりに向けて『かわさきパラムーブメント』と題し、様々な取り組みを行っている。本記事では「障がいのある人の音楽表現を支えるテクノロジーの可能性」についてトークセッションが開催された様子をレポート。 前編では、音楽×障がい×テクノロジーの分野を牽引してきた英国のアート集団『ドレイクミュージック』のプレゼンテーションをご紹介したが、後編では、楽器インタフェース研究者(産業技術大学院大学 助教／慶應義塾大学大学院メディアデザイン研究科附属メディアデザイン研究所 リサーチャー)の金箱淳一さん、楽器デザイナーの中西宣人さん、慶應義塾大学大学院メディアデザイン研究科 修士課程の畠山海人さんによる、国内での研究・開発者の活動が共有された。

「振動」を伝え合うことで一体感を得る

金箱：私は「楽器を通して人と人をつなげていく」研究をしています。こちらは、この活動の中で一番始めに作った『Mountain Guitar (マウンテンギター) 』という楽器です。

この楽器には弦がありません。光っている箇所を爪弾くように手を振り下ろすと音が鳴り、本体を傾けると音も傾き、本体を振ることでチョーキングやビブラートという奏法も可能です。コードチェンジを楽器の高さで行えます。

マウンテンギターは、どんな演奏方法をしても必ずかっこいい音が鳴ります。子どもが一番始めに触れる楽器を想像してデザインしました。これを手にすることで人前で楽器を弾くこと、音楽で表現することは楽しい、そんな気持ちを持ってほしいという思いから開発に至りました。

シンガポール、オーストリア、トルコなど、様々な国で展示し、様々な人に触れてもらうことで、非常に多くのフィードバックがあったという。そのなかで「この楽器、音はすごくかっこいいけれど、楽器を弾いている実感がない」というコメントにハッとさせられた、と金箱氏は話す。

金箱：楽器を弾く実感って、そもそもどこからくるのだろう？と、疑問が自分の中で沸き起こりました。そこで私が気づいたのは、楽器を演奏する「実感」には、振動がものすごく大きな影響を与えているのではないか、ということ。マウンテンギターは、内部に傾きのセンサ、明かりのセンサ、圧力センサなど、たくさんのセンサが入っています。そしてその情報がPCに送られて、PCのスピーカーから音が出ます。一方、アコースティックギターの内部には何も入っておらず、弦を爪弾いたときに本体自体が振動して、音が出るという仕組みになっています。マウンテンギターは弾いた時の振動フィードバックはありません。振動が演奏における自身の行為を認識する上で重要であるなら、自分が楽器を演奏したときの振動を他の人に伝えてあげると新しい演奏コミュニケーションに繋がるのではないかと思いました。そこで作ったのが『ビブラションカホン』です。「ビブラション」とはスペイン語で「バイブレーション」のことです。

これは、一人が楽器を叩いたときの音を振動に変換して別の人に伝える、つまり音だけでなく、お互いに振動を伝え合ってコミュニケートできる楽器です。叩くタイミングが合うと、振動が強くなり「リズムが合う」ことの楽しさを強調する機能もつけています。

修士研究のテーマが「一体感」だったのですが、一体感というのは、相手のことを意識しながら自分もそれに合わせたり、あえてそれを外したりする演奏コミュニケーションを指します。振動を伝えあったときと、そうでないときで一体感がどれだけ異なるか、30人程を対象に比較実験をしてみると、「振動を伝え合ったときの方が、そうでなかったときよりも相手を近くに感じる」というコメントを得ました。定量的な評価実験の結果からも、音だけでなく、お互いの演奏の「触り心地」を共有することによって、一緒に楽器を演奏している感覚がより強くなることが実証されました。

音楽を肌で感じることで、
新しい音の世界が現れる

重度の聴覚障がいをもった子どもが ビブラションカホンに触ったときに「あ、音が聞こえた！」と言ったんです。そんな体験もあり、音が聞こえるとはどういうことなのか、一度見直さなければいけない、と思い始めました。

みなさんもコンサートホールやライブハウスなどで音楽を体験されたことがあるかと思いますが、人間は、肌でも音を感じています。強い音圧でスピーカーが鳴ったときに、ビリビリと肌が音を感じます。そして会場には必ずプレイヤーがいて、音が鳴っている様子を目で見て知ることができます。つまり音楽とは、聴覚だけで受け取るエンターテイメントではなく、視覚や触覚、色々な感覚で楽しむ総合芸術である、と私はとらえています。このことから、普段音が聞こえにくい状況だったとしても、その音を視覚的な情報だったり、肌で感じる情報に変えることで、音楽鑑賞や楽器演奏の楽しめるアプローチができないかと考えたのです。

「音を見る」作品例をご紹介します。これを指にはめていただき、手を叩きます。そうすると、拍手のエネルギーで発電し、指先が光ります。この楽器は聴覚障がいの方と対話する中で、「音が見えたらおもしろい」とのコメントから生まれた楽器です。

実際にコンサートホールで使うと、人間は音楽のリズムに合わせながら手を叩く習性があるので、それを視覚に変換することで、音が聞こえにくい方でも、空間を漂っているリズムを目で見て知ることができるのです。

また、「楽器の音を利く」研究もしています。音をきくというと、一般的には「聞く(聴く)」を連想しますが、「利く」の意味は例えば利き酒。利き酒は味だけではなく、見た目、香りなど、五感を通して楽しむことを「利く」といいます。私が作ったものは「音を利く」楽器になります。

これは「タッチ・ザ・サウンド(=音に触る)・ピクニック」という作品で、みなさんが聞いている音の響きを物体の振動刺激に変換して、指先から振動によって音を感じることができる道具です。

これを美術館の音が鳴る作品をテーマとした企画展に展示して、来場した方に楽しんでいただきました。体験者は、イヤーマフをして音の振動に集中できるような環境を作ります。そして、音の鳴る作品を鑑賞するのに、作品の前で耳を傾けるのではなく、指先に意識を持っていき音を感じる体験をします。

印象的な出来事として、ワークショップの最後にイヤーマフを外した瞬間、「新しい音がした！」と言い出した子どもがいたんです。皆さんは普段「音をどこで感じますか？」と聞かれると「耳です」と答えがちですが、それは聴覚が優位になってしまうからであり、私たちは日常的に「肌」でも音を感じています。一度肌で音を感じるトレーニングをしたあとにイヤーマフを外すと、新しい音の世界が立ち現れてくるのです。

金箱淳一《タッチ・ザ・サウンド・ピクニック》2017年
撮影：木奥恵三
写真提供：NTTインターコミュニケーション・センター [ICC]

金箱氏が楽器づくりをするときに実践している考え方をご紹介したい。

「You have your music. I have same.」＝「あなたにはあなたの音楽がある。私もそうである。」

この言葉が示すのは、それぞれに合った楽器というのは、それぞれの楽しみ方を持っているということ。音楽にも多様性はあって、またそれと同じように楽器にも多様性があっていいという信念をもちながら、金箱氏は研究と制作を続けている。

技術や理論を飛び越え、
音楽表現を探索できる仕組みをつくる

次にプレゼンテーションを行ったのは、楽器デザイナーの中西宣人さん。「アクセシビリティと楽器」というテーマで話が進む。

中西：私は「誰もが音楽表現の探索を共有できるプラットフォーム」としての楽器ができないかなと思い、開発を始めました。

その考えに至ったのは、学生のころジャズやボサノヴァといったジャンルに多い、即興のセッションに魅力を感じて、サークルに参加していた経験に由来します。そこには重鎮の方々がたくさんいて、細かい形式が色々とあり、思ったより自由じゃないと感じてしまったんです。ルールや共通言語を指定されてしまうと、そこからあぶれてしまう人が出てきて、色々な人の表現を受け入れられなくなってしまう。そこで、技術や理論の壁がなければ、人はどんな音楽表現をすることができるのか、ということに興味を持つようになりました。

そのあと情報系の大学院に進み、プログラミングなども勉強していく中で、「音楽的に訓練されていない人であっても音楽を表現する能力をもっているのではないか」と述べられている文献を見つけ、技術や理論を飛び越えられる仕組みがあれば、音楽表現を探索できる仕組みがそのなかに生まれる、さらに音楽表現を共有できるプラットフォームができるのではと思いました。そこで着目したのが、様々なセンサです。

例えばピアノは鍵を押すと、内部で連動しているハンマーが弦を叩いて音が鳴る構造ですが、電子ピアノの場合、鍵を押すと中にボタンがあり、圧力を検出して音が出るという構造になっています。センサは電子楽器と大変密接な関わりを持っており、様々なセンサを楽器に用いることで多様な弾き方や表現が生まれるのではないかと考えました。

世の中には圧力を検出するもの、明るさを検出するもの、音響に使われているものなど様々なセンサがあります。それらをどんどん付け替えることで、その都度全く違う相好で演奏ができます。無線通信機能によって楽器がテンポや和音を合わせてくれるので、理論的な勉強が必要ありません。そういった小型の電子楽器を作り、次はもう少し多くの人が触れられるようなものをと、iPhoneの音楽アプリを開発しました。

中西氏はプレゼンテーションの最後に、こう締めくくった。

中西：万能なテクノロジーはありません。その都度開発していく必要があり、目的に合ったものなら最良の道具になるので、どんどん実践を積み重ねていき、共有していくことが重要だと考えています。

音楽×障がい×テクノロジーの分野の可能性を感じた、今回のトークセッション。最後に中西氏が締めくくった言葉のように、実践と共有の場が多くできることが、可能性の速度や精度を上げる鍵となっているように思った。

前編はこちら

金箱 淳一 (かねばこ じゅんいち)
1984年長野県 北佐久郡浅科村（現：佐久市）生まれの楽器インタフェース研究者 / Haptic Designer。博士（感性科学）。情報科学芸術大学院大学（IAMAS）修了後、玩具会社の企画、女子美術大学助手、慶應義塾大学大学院メディアデザイン研究科研究員を経て、産業技術大学院大学創造技術専攻助教、現在に至る。障がいの有無にかかわらず、共に音楽を楽しむための「共遊楽器（造語）」を研究している。
http://kanejun.com/

中西 宣人 (なかにし よしひと)
1987年生まれ。楽器デザイナー。博士(学際情報学)。日本大学芸術学部音楽学科情報音楽コースを卒業後、東京大学大学院学際情報学府に入学し、多様な奏法に対応する音楽インタフェースやデジタル楽器の開発と研究に従事。「The Cell Music Gear」、「B.O.M.B.」、「POWDER BOX」など開発したデジタル楽器が、 Asia Digital Art Award 優秀賞、 電子工作コンテスト優秀賞、Laval Virtual ReVolution“Residence”などに選出されている。また、これらの楽器を用いた演奏活動を国内外で行っており、千代田芸術祭2014音部門 岸野雄一賞、Georgia Tech’s Margaret Guthman Musical Instrument Competition 2017 ファイナリストなど、入選歴がある。現在は、センサ開発企業や教育機関とのデジタル楽器の共同開発、開発した楽器を用いた演奏活動を国内外で行うなど、音と音楽を中心として多角的に活動している。日本大学 芸術学部 研究員/非常勤講師、東京工芸大学 芸術学部 非常勤講師。
http://yoshihito-nakanishi.com/

慢性的な病気を抱えると、定期的な受診が不可欠になる。ところが、高齢者の増加に伴い、受診を必要とする人口も増えてきた。予約制を取る病院も多くあるが、それでも、大きな病院では待ち時間は多くなる。この足止め時間が嫌で必要な受診をしないという患者もいる。また、待ち時間の長さが、働く世代の足を健康診断から遠ざけてしまう原因にもなっている。しかし、病が経済活動を止めてしまうことを、わたしたちは今回のコロナ禍で痛感した。人々が健康でなければ、経済活動は回らない。もしも、自宅である程度のデータが取れるようになったとしたら、どんな変化が起るだろうか。

人により違う「調子が悪い」の基準値

超高齢化社会と言われる日本。現在の40代後半から50歳にあたる団塊ジュニアが高齢者になれば、高齢者人口の増加が頭打ちになるという話しもあるが、少子化の上に平均寿命が伸びているため、人口に占める高齢者の割合はそれほど大きくは変わらないと予測される。死ぬまで健康でいられれば、それが一番良いのだが、そうもいかないのが人間だ。年齢と共に体の衰えはやってくる。すると、病院に通う機会も増えてくる。それを表す一つの数字が、通院人口の割合だ。

国民生活基礎調査を元に厚生労働省が公表している通院状況の調査によると、人口千人に対する通院者率は男性で388.1、女性で418．8（2019年調査）。分りにくい数字だが、人口千人に対してこれだけの人がなにかしらの理由で通院しているということだ。そしてもちろん、年齢が上がるにつれ、通院人口も増えていく。調査では、ケガではなく、疾病により通院しているという人達にどのような病気で通院しているのかを聞いたものもある。それによると、男女共に1位は高血圧。男性の場合は2位に糖尿病が入っている。

2019年　国民生活基礎調査（厚生労働省）
https://www.mhlw.go.jp/toukei/saikin/hw/k-tyosa/k-tyosa07/3-2.html

高血圧や糖尿病はどちらも生活習慣病と言われるものだ。疾病の改善には食生活や運動などの生活改善が不可欠と言われるため、その目的で定期的に受診をしている人も多い。もちろん、受診時には、血液検査や尿検査など、体の中の状態を数字として可視化するための検査も行われる。だが、これらの生活習慣病の場合、データが自宅で取れるようになれば、オンラインでの診療も可能になると言われている。これが進めば、病院に足を運ぶ人の数は減るだろう。つまり、本当に対面受診が必要な人だけが病院を訪れることになる。するとどうだろうか。上手く回りはじめれば、待合室の混雑や、予約の取りづらさが緩和される可能性が出てくるのだ。

未来の受診スタイルを支える
検査事情最前線

しかし、患者の顔を見るだけでは状態を把握できない。遠隔診療を進める上で必ず必要になるのが検査データの取得だ。血圧については家庭用血圧計がかなり普及したため、すでに自宅での計測が可能となっている。さらにデータをスマホで管理できる便利なアプリも出回り、日々の記録を手書きで付けていた手帳からは解放されつつある状況だ。体重計もここ数年でかなり開発が進み、体重だけでなく、BMI値や骨密度まで測れる体組成計へと進化を遂げた。

さまざまな基礎データの取得が手軽にできるようになってきた現在、尿や唾液の検査も手軽にしようと試みる会社がある。イギリス、アメリカ、日本と、多国籍のメンバーで挑戦を続けるBisu, Inc. 。HERO Xでの対談から2年（http://hero-x.jp/article/8393/）、代表のダニエル・マグス氏の元を訪ねると、当時のアイデアはさらにブラッシュアップされ、サービスのローンチに向けた準備が進められていた。

スタートアップが入居するシェアオフィスを卒業、東京駅近くのビルに自社オフィスを構えるまでになっていた。スタッフは相変わらず多国籍。海外に居住するリモートメンバーもいるという。

「細かな開発はほぼ終わり、今は生産ラインをどうするかという段階まできています。2年以内のローンチを目指して、頑張っています」と、流暢な日本語で説明するダニエル氏。試作品も以前のものより完成形に近づいていた。

ダニエル氏の考える尿検査キットは、独自開発の棒状の「テストスティック」と呼ばれるものに尿をかけ、小型検査デバイスに差し込むだけで、データが手元に届くというもの。テストスティックは使い捨てのため、一つの検査デバイスを家族で共同利用することも可能だ。

白い箱型のものが検査デバイス。隣に並ぶカラフルな色が施されたものがテストスティック。スライドすると中から棒状の検査装置が出てくる仕組みだ。

スティックのケースをよく見ると、色が分かれていることに気が付く。埋め込まれたチップにより、検査項目を変えることができるため、どの検査が行えるかを一目で分るように色分けしたのだ。これまでの家庭検査の倍にあたる20項目の検査が自宅で手軽にできるようになる見込みだ。唾液検査ができるスティックも開発、サービスローンチに向けて地道な開発が続いている。

取れたデータの活用についての開発も急ピッチで進められている。検査デバイスと連動したスマホアプリを使えば、⽔分やビタミン、ミネラルなど、体にとって重要な栄養素に関するフィードバックをわずか数分で得られるようになるというのだ。睡眠データや活動パターン、個⼈の⽬標などを紐付ければ、これらに基づいた健康改善のアドバイスも表⽰されるようになる。

「今考えているのは、身体情報を元にしたコミュニケーションです。ただ、数字を表示できるだけでなく、データを軸に、健康であるためのアドバイスをすることで、みんなが健康でいるための伴走者となっていく、そんなイメージです」

生産拠点は日本に置く！
「Made in Japan」にこだわる理由

生産拠点は日本国内に置きたいと話すダニエル氏。

検査キッドとデータの可視化について、技術的な問題はほぼクリアしたというダニエル氏。データの取得という部分に重きが置かれていた2年前の構想から比べると、サービスに広がりが生まれている。アプリを通じてデータの共有が可能になるため、医師やトレーナー、家族などとの連係も可能になる。そうなれば、通院する回数をグッと減らすことにも繋がる。

しかし、これだけのものを作るには、かなりのお金が必要となる。特に検査キットの量産化の部分は要となるため、潤沢な予算が必要だが、どうやらその壁についてもダニエル氏はクリアしたようだ。10月、シードラウンドで総額3億円の資金調達を達成、本格的な生産に向けて大きな一歩を踏み出した。出資元の一つはスポーツセンシング分野を牽引しているアシックス・ベンチャーズ社。資金調達と同時に同社との協業も発表している。そんなダニエル氏が目指すのは、検査キットの日本での生産だ。

「開発だけ日本でして、製造その他は海外にという会社も多いのですが、僕たちが開発したキットは生産を請け負う工場との綿密な打ち合わせも必要です。日本の技術は優れていますし、機密保持もしっかりしています。労働力の安い海外に出せば、我々がそちらに出向く時間と費用がかかる上、目が届きにくいため、技術が漏れてしまう危険も高くなる。だから僕たちは、日本国内での生産をと考えているのです」

多国籍メンバーが作る「Made in Japan」の健康管理サービス。世界に向けての挑戦が始まろうとしている。

ダニエル・マグス
Bisu, Inc. 代表取締役 。ロンドン生まれ、東京在住のイギリス人。ケンブリッジ大学で日本語を専攻後、法科大学院に進み法律事務所に入社。英国法弁護士資格取得。投資銀行でアナリストなどを務めた後に日本のディー・エヌ・エーで新規事業企画を担当。その後独立しヘルスケアIoT商品の開発を手掛ける同社を立ち上げた。現在は日々の健康を見える化する IoT尿検査装置の開発に挑戦している