例えば盲目のピアニストやギタリストが活躍していたり、身体にハンディのある人がパワフルな楽器演奏をしたりする風景は、我々にもなじみの深いものだ。しかし、それらはすべて「ハンディのある人が既存の楽器を努力して使いこなしている姿」である。その概念をくつがえす試みが始まっている。インクルーシブな楽器の登場は、もしかすると「演奏」や「音楽」の概念すら、変えてしまうかもしれない。

AIでインクルーシブな楽器を実現！
視線やポーズで演奏する“ANDCHESTRA“

NECが取り組む “ANDCHESTRA” のプロジェクトは、AI楽器を使って誰もがミュージシャンになれる取り組み。インクルーシブなバイオリン「ANDCHESTRA VIOLIN」は、NECの独自技術”姿勢推定技術”を使用して、ある一定のポーズをとることでバイオリンを鳴らすことができる楽器。”姿勢推定技術”は、混雑環境下や、離れた場所から撮影した低解像度の映像でも、人の姿勢を推定できるAI技術だ。

動画URL：https://jpn.nec.com/ai/andchestra/

例えば、車いすに座った人が、手を挙げたり、ひじを曲げたりするだけで、「ド」「レ」「ミ」などの音階を奏でることができる。身体にハンディのある人だけではなく、子どもや楽器に不慣れな大人なども楽器演奏を楽しめる。

また、「ANDCHESTRA TRUMPET」は、人の視線を捉えることでトランペットを演奏できる楽器。視線の角度による音階表現が可能で、管楽器を吹けるほどの肺活量のない人や、身体に麻痺のある人でも、トランペットを鳴らすことができるのだ。

“ANDCHESTRA”のプロジェクトには、インクルーシブアドバイザーとして、NEC 東京オリンピック・パラリンピック推進本部に所属し、パラアイスホッケー銀メダリストでもある上原大祐さんも参加している。今後、NECではリハビリでの活用や、イベントへの出展を検討している。

「姿勢」や「視線」をAIで感知して音を鳴らす取り組みは、楽器の概念を大きく変えていくだろう。例えば、健常者よりも、視線入力に慣れている人や、足にハンディがあり手だけでコミュニケーションをとっていた人のほうが、いい演奏ができるようになるかもしれない。そんな現象が様々な場所で起こったら、世界はますます楽しくなりそうだ。

将来は“義手バンド”も結成!?
自分の手が楽器になる義手ギター

元記事URL：http://hero-x.jp/article/3284/

慶應義塾大学大学院メディアデザイン研究所のEmbodied Media Project(身体性メディアプロジェクト)が開発したギターは、義手とギターを合体させたプロダクト。開発者の畠山海人氏は、義手の当事者や義手装具士ともディスカッションを繰り返して、このユニークな楽器を作りだした。

義手ギター「Musiarm」は、片手がギターになってしまう画期的なプロダクトだ。弦はオリジナルのゴムのような素材。ギターの金属の弦は通常、さびてしまうと交換しなければならない。片手ではその作業は困難なため、最初から交換しなくてもよい素材で作られている。また、ボタンひとつでチューニングができたり、装着したMusiarmを左右に動かすことでエフェクターをかけたりすることもできるので、ハンディのある人には難しい細かい作業が必要ない。

義手そのものを楽器にするという発想は、今までになかったもの。「義手の人でも演奏できる楽器」ではなく、「義手の人だからこそ演奏できる楽器」というチャレンジが面白い。将来は義手楽器だけのバンドを組んでみたいという畠山氏。ゆくゆくはスポーツ×義手、ファッション×義手といったプロダクトも開発していきたいと語る。

テクノロジーの進化でインクルーシブな楽器が生まれることで、身体とエンターテインメントの関係もまた変わってくる。義手バンドが新しい音楽を作り出す日も近い!?

行動の制限、感染に対する不安や孤独、景気の停滞など、長引く新型コロナウイルスの流行が、私たちに与えるストレスは大きい。徳島大学が今年の2月、緊急事態宣言（20年春）の対象7都府県の18～89歳を対象に行った調査では、約2割の人が気分が落ち込むなど「治療が必要な抑うつ状態」と推定されるという結果も出ているようだ。ストレスの大小や老若男女問わず、先々の見通しが立たない中で、メンタルヘルスには気を付けたい。技術の進歩により、日々の何気ない動作からも計測できるようになったメンタルメルスに関するサービスについてご紹介しよう。

ストレス具合が計測できる
瞳孔反応解析技術

ストレスチェック、メンタルヘルスチェックというと、何十問にも及ぶ設問を一つ一つ解いて…というイメージも根強いのではないだろうか。2015年12月より、50人以上の従業員を抱える事業所には厚生労働省の「ストレスチェック制度」が義務付けられているが、働き方が多様化する今、求められるのはより個に寄り添った柔軟なチェックかもしれない。
夏目綜合研究所によるアイトラッキング（視線計測）を含む「瞳孔反応解析技術」は、これまで取得できなかった「人間の無意識の反応」に着目している。交感神経が活発になると拡大し、副交感神経が活発になると縮小する自律神経によって動く瞳孔は意識的に操ることができず、自律神経の乱れはストレスや疲労、何かしらの不調を察知するカギとなる。近赤外線センサーとモニターで瞳孔の収縮・拡大や視線を追っていくことで、ストレス度合いがチェックできる。
メンタルヘルスと近しい領域である医療はもちろんのこと、エンターテインメントやマーケティングなどでも活用が期待されているとのことで、人間が「目」から受け取る情報量の多さを物語っている。

記事を読む▶“目は口ほどに物を言う”心や身体の不調が瞳で分かる時代へ！ 日本が誇る「瞳孔反応解析技術」

これからの新常識になるか？
睡眠計測サービス「インソムノグラフ」

食事と並んで健康のバロメーターとも言える睡眠。リモートワークやオンライン授業、外出自粛による運動不足、もちろんストレスも合わせると、寝つきが悪くなった、眠りが浅くなった、しっかり寝たつもりでも疲れが取れないなど、コロナ禍における睡眠の悩みは例年よりも大きくなっている。グーグル検索でも「不眠症」という言葉の検索が60％も多くなっているようだ。
筑波大学発のベンチャー企業、S’UIMIN（スイミン）社による睡眠計測サービス「InSomnograf®：インソムノグラフ」は、AIの活用によって、これまで検査入院しないと測定できなかったレベルの睡眠計測を自宅で簡単にできる。睡眠時の脳波に加えて、目の動きや一部の筋電も含めて計測する。3つの電極が付いたシートを額につけて、左右の耳の後ろに2つの電極を装着し、デバイス本体と接続。寝るときにボタンを押下して計測を開始し、起きたときに再びボタンを押せば計測は終了。スマホやPCにつないで直近のデータを取得するほか、5日以上計測して総合評価も行う。
同社が今後目指すのは、睡眠脳波計を家庭用血圧計くらい身近にすること。仕事やスポーツのパフォーマンスにも大きく影響する睡眠をモニタリングすることは今後、検温や血圧チェックのようなルーティーンになっていくかもしれない。

記事を読む▶【HERO X × JETRO】睡眠の謎に挑み続けるベンチャー企業「S’UIMIN」

07