Encounters

 

Ken Sonobe, Ryu Nakagawa

本作品は、HoloLensを用いた複数人同時体験型オーディオビジュアル・アート作品です。体験者はバーチャルな弾丸およびビームを物理的な物に向けて発射し、それが当たると物理的な音が鳴り、同時にバーチャルなビジュアル・エフェクトが生成されます。この体験は「Kuroko」を、音を発生させたい物の側に置くことで可能となります。Kurokoは次のように作動します。①弾丸およびビームと物との衝突を判定、②ソレノイドの先端が物に当たり物理的な音を発生、③物の音をサンプリング、④サンプリングした音の周波数を解析、⑤結果をHoloLensへ送信。HoloLens上で生成されるビジュアル・エフェクトに、物の音の周波数に応じた色が付加されます。この作品で体験者は超能力を使うかの様にバーチャルなオブジェクトを物に当て、その物理的な響きを聞き、同時にその音の高さに応じたビジュアルを楽しむことができるのです。また、バーチャルな弾丸は物理的なオブジェクトと同じように壁や物に当たると跳ね返り、ビームは物理的なオブジェクトを貫通します。そのため、複数のKurokoとXRを用いることで初めて可能となるような様々なオーディオビジュアルを体験することができます。

Encountersは、「空間に音を描く」をテーマにしたプロジェクト(DSMRプロジェクト)から生まれた作品(システム)の一つです。