HoloLens（ホロレンズ）で創作 - HoloARt: Painting with Holograms in Mixed Reality

MR(Mixed Reality)の技術は、ARとVRを融合したような技術。

ここで紹介するビデオは、現実世界の空間に３Dでペイントを行うというもの。

キャンバスは平面ではなく、無限に広がる空間となるため、表現方法も大きく変化する。



屋内の状態をほぼ瞬時に計測 --- 画像認識ARとは異なり、画像マーカーが必要ない


メニューを表示し、カラーパレットや筆を選択


空間で手を動かすことで、指先で立体的にペイントすることができる
 

マネキンが着ている服にも仮想的にペイントすることができる


詳しくは動画で...

HoloARt: Painting with Holograms in Mixed Reality from Fluid Interfaces on Vimeo.

We propose HoloARt, a new media art that explores the use of holograms in mixed reality for creative self expression. We designed a system that allows the user to turn their physical environment into a canvas where digital holograms and physical objects co-exist in the real and virtual world. Users are able to virtually spray and splatter hologram paint on top of physical objects and surfaces as well as painting in the air by only using their hands. The content grows dynamically, following the natural movements of the user. The system is selfcontained
and does not require hand controllers or positional tracking sensors on the space. This video accompanies our CHI paper and Interactivity: Installation.

More details: amores@mit.edu