多視点カメラと一人称視点カメラを用いた人体の姿勢推定と行動認識

使用多视角相机和第一人称相机进行人体姿势估计和动作识别

• 批准号: 19J22153
• 负责人: 鷄内 朋也
• 金额: $ 1.98万
• 依托单位: Keio University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for JSPS Fellows
• 财政年份: 2019
• 资助国家: 日本
• 起止时间: 2019-04-25 至 2022-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-19J22153/
• 关键词: 人体姿勢推定; 慣性計測装置; 姿勢推定

本研究の目的のひとつである「カメラと慣性計測装置(IMU)による人体の姿勢推定」において，昨年度実装した人体の姿勢推定システムは，IMUキャリブレーションと呼ばれる複雑な前処理が必要であり，計測には熟練したオペレーターが必要であった．そこで今年度はこの前処理を自動化し，一般ユーザーがIMUを使用した人体計測を行う際の障壁を取り除くための研究を行なった．具体的には，複数のIMUを被験者の任意の部位に装着して数秒間歩行した時のIMUで計測される加速度・角速度を使って，どのIMUがどの部位に装着されているかと，装着された部位に対してIMUがどの角度で固定されているかを推論する手法を提案した．提案手法は，昨年度実装したシステムだけでなく，IMUを使用した人体計測の広範なアプリケーションに適用可能である．既存手法ではIMUが装着された部位を個別に推論していたのに対し，提案されたフレームワークでは全身に装着された全てのIMUから大域的な特徴を抽出するとともに，IMU同士の相互関係を学習する．IMUが下半身のみに装着されていることを想定していた既存研究に対し，提案手法は全身に装着されたIMUのキャリブレーションを可能にするため，昨年度に実装された人体姿勢計測システムの前処理にも適用できる．公開されたデータセットにおける実験で，各IMUが装着された部位を識別するタスクにて既存手法の精度を8.5%上回ることを確認した．この研究成果は学術雑誌IEEE Accessに掲載されるとともに，提案された機械学習モデルを実装したコードも公開され，広く評価を集めている．

In this study, the purpose of this study is to determine whether it is necessary to use the IMU to determine the posture of the human body. Yesterday, the presumption of the posture of the human body was installed. Yesterday, the presumption of the posture of the human body, and the IMU was used. It is necessary to analyze the necessary information before copying. In general, the human body computer is used in the IMU system to remove the barrier from the computer and study the computer. Specifically, the multiplicative IMU is installed in any part of the vehicle for several seconds, and the acceleration and angular velocity of the IMU is calculated in several seconds, and the engine is installed in the IMU of the car. It is equipped with a fixed IMU angle and a fixed angle to discuss the modus operandi. The modus operandi, which was installed last year, was installed in the last year, and the IMU was used in the human body. It is possible to use it. The existing technique, IMU, is used to discuss the location of the device. The whole body of the proposal is equipped with the special device of the whole IMU domain, while the IMU and his colleagues learn from each other. IMU's lower body is loaded with the whole body, and the whole body of the proposal is equipped with the whole body of existing research, and the whole body of the proposal is equipped with the whole body of the whole body. It is possible that the whole body of the IMU is equipped with the whole body of the whole body. Last year, the posture of the human body was designed and used. It was made public that the IMU was equipped with a precision of 8.5%. The accuracy of the existing technique was 8.5%. The results of the research, the journal of science, the journal of IEEE Access, the accuracy of the existing method, the accuracy of the existing device, the accuracy of the existing method, the The proposal proposes that the mechanical science should be installed in the public domain, and that the collection of information should be made public.

项目成果

Learning Sensor Interdependencies for IMU-to-Segment Assignment

• DOI: 10.1109/access.2021.3105801
• 发表时间: 2021
• 期刊: IEEE Access
• 影响因子: 3.9
• 作者: Tomoya Kaichi;Tsubasa Maruyama;M. Tada;H. Saito

Image-based center of mass estimation of the human body via 3D shape and kinematic structure

通过 3D 形状和运动结构进行基于图像的人体质心估计

• DOI: 10.1007/s12283-019-0309-2
• 发表时间: 2019
• 期刊: Sports Engineering
• 影响因子: 1.7
• 作者: Tomoya Kaichi;Shohei Mori;Hideo Saito;Kosuke Takahashi;Dan Mikami;Mariko Isogawa & Yoshinori Kusachi
• 通讯作者: Mariko Isogawa & Yoshinori Kusachi