Dynamic VR Display for Perfume Spending All My Time (Music Station Ultra Fes 2016)

Perfume
September 01, 2016
©Amuse, Inc. + UNIVERSAL MUSIC LLC + Rhizomatiks co.,ltd.

Abstract

ディスプレイは普通、平面的なものであるが、ダイナミックVRディスプレイではカメラの位置をトラッキング(特定、追従)することで、視点位置に応じて、立体的に見えるように、3Dグラフィックをリアルタイムに変化させる。こうすることによって、平面的なディスプレイが別の空間につながる窓のように変化する。

4台のカメラをスイッチャーに接続。うち1台のクレーンカメラでモーションキャプチャーシステムでトラッキングするためのマーカーを装着した。残りの3台は三脚の位置を固定した。全てのカメラは床・壁のLEDスクリーンとの厳密なキャリブレーションを行い、カメラから見たときにLEDの映像が立体的に見えるように調整を行った。またMIDIコントローラーを用いたスイッチングコンソールを用意。そのコンソールを使うことによって、カメラの切り替えとLEDスクリーンの映像の切り替えの同期が実現し、これによってカメラをスイッチングしても立体的な映像が破綻することなく継続するシステムを開発。KinectV2をステージ前方に設置し、リアルタイム3Dスキャンを行うことでスクリーンに映り込む鏡のようなエフェクトを実現した。

Making

会場セッティング図
※ トラッキングマーカー設置装着されてるカメラ

device

  • LED screen x 2 (wall, floor)
  • 4 cameras (3tripod + 1crane)
  • Mocap Camera x 24
  • Kinect V2 x 1
  • Switcher x 2 etc…
Credit
Direction + Choreograph: MIKIKO
Visual + System: Rhizomatiks Research