GhostHands demo: Augmented Reality tele-assistance with hands-on instruction - ゴーストハンドが操作方法を導いてくれるAR(拡張現実)インターフェース

慣れていない作業員、または希に発生するメンテナンスなどは、正しい手順で間違えずに実施することが難しい。そのようなシチュエーションではARの技術が効果的だ。ここでは、操作の手順を先に教えてくれる「ゴーストハンド」という手が3Dアニメーションで表示されるように作られている。指の動きを細かく検知できる Leap Motion のハンドトラッキングが使用されている。

GhostHands demo: Augmented Reality tele-assistance with hands-on instruction from Giuseppe Scavo on Vimeo.

GhostHands is an application that takes advantage of the use of a virtual model of a mentor’s real hands, appearing in a workers full AR view of a work task. The mentor can see the workers view ‘through their eyes’ and can place their GhostHands into that view. The trainee sees the mentor's hands as if he is in the same environment in an "over-the-shoulder" way.

The application was built using Leap Motion hands tracking data streamed over the Internet.

Publication: https://goo.gl/rgFopc
Slideshare: http://goo.gl/pXMSwB