Implementation and Practical Application of 3D Motion Sensor for Dexterous Motion Tracking

点击翻译按钮获取中文摘要

今年は計画通り、磁気式モーショントラッキングシステムの開発と改善、それから本システムに基づき、新たなアプリケーションを開発した。システム自体は、DNNと新しく設計したStructure-aware Bilateral Temporal Filter (SABTF)により、精度、速度、フレックシビリティなどが高まり、実用的なシステムになった。しかし、論文投稿はうまくいっていない。システムの論文はSIGGRAPH Asia　2019にぎりぎり落ちて、今はTVCG（IF 4）に投稿し、Major　Revisionを作成中で、2020年内に発表する見込みである。このシステムに基づいて、我々は少ない磁気マーカを利用して、リアリスティックな手操作アニメーションを作る技術について研究をした。従来手法は光学式システムを使うのがほとんどで、大量なマーカを手に付ける必要があり、手操作の邪魔になるが、我々のシステムは7個のマーカだけでこのタスクを達成することができる。7個のマーカから手の姿勢全体を推定するのに、バーチャルな手のモデル（リグ）を、実際のアクターの手に綿密に合わせることが重要である。そこで我々は、自動的に、キャプチャーされたデータから、リグのキャリブレーションを自動的に行うアルゴリズムを開発した。このアルゴリズムにより計算された手のモデルは、実際のアクターの手と比べ、誤差がわずかの10％で、手の姿勢を推定するのに役に立った。この研究の論文は現在作成しており、今年のSIGGRAPHに投稿する予定。研究成果の一つであるSABTFを特許化する活動が始まっている。このフィルタリング技術はノイズ除去だけでなく、原データから、モーションデータの欠損を補完することができるので、ほかのトラッキングシステムへも応用できると予想され、今は光学式システムへの応用を検討中である。