音を彫刻する体験:SoundSculptが切り拓く創造の未来

触覚とデジタルが融合、音楽とアートの境界を超える新感覚インターフェース

SoundSculptは、彫刻のように音を「形作る」体験を実現したインタラクティブなミュージックシンセサイザーです。MITメディアラボ発のこのプロジェクトは、空間オーディオとビジュアルアートを融合させ、ユーザー自身が創造の一部となる没入型の世界を提供します。従来の音楽制作やアート体験の枠を超え、創造性と感情の表現を新たな次元へと導きます。

SoundSculptの着想は、古代の陶芸における「手で素材を形作る」感覚に根ざしています。デザイナーのYiqi Zhao氏は、ユーザーが自らの動きで音とビジュアルを彫刻するという、従来の受動的な鑑賞者から能動的な創造者への転換を目指しました。空間オーディオと視覚表現を組み合わせることで、創造と体験の境界を曖昧にし、まったく新しいインタラクションの形を提案しています。

このシステムの最大の特徴は、Bose ARフレームとXR技術を活用した直感的な操作性にあります。ユーザーが頭を傾けたり、ボタンを押したりする動作が、リアルタイムで音の高さや音量、バーチャルバブルの形状変化として反映されます。これにより、音楽制作がまるで彫刻のような身体的体験となり、感情の調整や創造的な没入感を高めます。

技術面では、Boseフレームのジャイロセンサーが6自由度の頭部動作を検知し、MIDIフレームワークを通じて音響パラメータへと変換。UnityエンジンとC#スクリプトによるメッシュ変形や頂点操作によって、バブルの表面がダイナミックに変化します。シナスタジア(共感覚)の原理も取り入れられ、視覚と聴覚が連動する全身的な体験が実現されています。

MITメディアラボで2019年秋に始動し、2020年夏にBose社で展示された本プロジェクトは、HCI(ヒューマン・コンピュータ・インタラクション)研究の一環として、感情調整やアートセラピーへの応用も視野に入れています。ユーザーテストでは、空間認識や感情の安定化に有意な効果が確認され、今後の社会的インパクトも期待されています。

SoundSculptは、2025年にA' Design AwardのIron賞を受賞。産業的要件を満たし、技術と創造性を融合させた実用的かつ革新的なデジタルアートとして高く評価されています。音楽やアートの体験を根本から再定義するこのインターフェースは、日常に新たな創造性と感動をもたらす可能性を秘めています。

音と動き、視覚と触覚が一体となるSoundSculptの世界は、創造の未来を体感したいすべての人に新しい扉を開きます。今後の展開や応用にも注目が集まっています。


プロジェクトの詳細とクレジット

プロジェクトデザイナー: Yiqi Zhao
画像クレジット: Image 1: Yiqi Zhao, 2024. Image 2: Yiqi Zhao, 2024. Image 3: Yiqi Zhao, 2024. Image 4: Yiqi Zhao, 2024. Image 5: Yiqi Zhao, 2024. Video Credits: Yiqi Zhao, 2024.
プロジェクトチームのメンバー: Yiqi Zhao
プロジェクト名: Sound Sculpt
プロジェクトのクライアント: MIT Media Lab


Sound Sculpt  IMG #2
Sound Sculpt  IMG #3
Sound Sculpt  IMG #4
Sound Sculpt  IMG #5
Sound Sculpt  IMG #5

デザイン雑誌でさらに詳しく読む