スマートホンのみで全身のモーションキャプチャができる「VisionPose Single3D(Single3D)」のデモ映像が株式会社ネクストシステムによって公開されました。
「VisionPose Single3D(Single3D)」の骨格推定は、ディープラーニングを用いて行われ、深度センサーには依存しません。そのためiPhone X以外のPCのWEBカメラでも利用できます。
従来のモーションキャプチャでは、カメラを複数台設置し、キャプチャ対象にデバイスを装着する必要がありました。しかし、「VisionPose Single3D(Single3D)」のモーションキャプチャは、スマホのリアカメラだけで3D座標の検出を行え、被写体にいずれのデバイスも装着することなしに利用できます。
ネクストシステムによると、「VisionPose Single3D(Single3D)」は、不審者検出の監視カメラ、スポーツの動作解析、VTuber(バーチャルユーチューバー)の配信、消費者の行動解析などの利用用途を想定しており、今後も「VisionPose Single3D(Single3D)」を通じて、「骨格検出技術の発展により社会に貢献していきたい。」とのことです。
PC版とiOS版が、それぞれSDKとして2019年6月より販売予定で、iOS版はSwift向けのライブラリ、PC版はC#/C++向けのライブラリとして提供される予定です。
(画像引用:https://www.next-system.com/visionpose/feature)