权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

AI on human motions for digital persona

数字角色的人体动作人工智能

基本信息

批准号：
21H03520
负责人：
高野渉
金额：
$ 11.07万
依托单位：
Osaka University
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (B)
财政年份：
2021
资助国家：
日本
起止时间：
2021-04-01 至 2025-03-31
项目状态：
未结题

项目摘要

デジタルペルソナとは、人間の趣味趣向や意思決定を通じて発現される身体運動や発話の情報表現としてのコンピュータモデルである。ロボティクス・コンピュータビジョン・AIの最新技術を駆使して、コンピュータが人間の行動を観察するだけで、その傾向や特性といった個性の抽出と類別化、人間の行動を言語化・アーカイブおよび再生する技術が基盤となる。令和４年度は、以下の研究項目に取り組み、人間の行動観察からそれを言語として表現するため環境を整備した。（A）ビデオモーションキャプチャ技術の開発スマートフォンにて撮影した画像中から、人間の身体運動を表現するに重要な身体部位（キーポイント：鼻、目、耳、首、肩、肘、手先、腰、膝、足先）をリアルタイムで検出する運動計測環境を整備した。身体運動は画像座標系におけるキーポイントの位置（X・Y座標）の数値として計測される。キーポイント位置座標から、カメラに対する人間の位置や身長などの被写体の大きさに不変な特徴量を設計した。（B）行動データと言語データの統合数理モデルの開発スマートフォンで計測した身体運動データに対して、動作名のラベルを人間が付与することによって、運動データと対応するラベルの組合せのデータセットを収集した。運動データから付与したラベルが生成される深層ニューラルネットワークをワークステーションにて設計することにより、スマートフォンにて撮影した映像から人間の行動を認識する計算を実現した。さらに、ワークステーションにて設計した運動の認識器モデルをスマートフォンに移植することによって、スマートフォンを撮影した人間の映像から骨格キーポイントの位置を検出し、その数値データから動作を識別することを可能にした。人間の身体運動を計測する技術、運動を認識する技術を誰でもが簡易に利用できる技術の基盤となる。

People don't know what to say about people, people. The latest technology of AI makes it possible for human operations to monitor the behavior of human beings, to extract the characteristics of each individual, and to use the language of human behavior to regenerate the basic concepts of technology. In 2004, the following research projects are selected from the organization, human activities, human activities, language and language to show that they are responsible for environmental improvement. (a) the technology should be used to show that the body movements in the portrait show the important parts of the body (nose, eye, ear, head, shoulder, elbow, hand, waist, knee, foot). The body motion picture seat is marked by the number of people in the location (Block X Y). The location and the length of the human body are not sensitive to the design of the special measurement system. (B) the operation and communication system should be combined with the mathematical system to carry out the training program for the body, to make payments between people and to pay for each other, and to organize the collection of information for each person. The system is responsible for the production of video clips, image summaries, human intelligence calculations, and current operations. This is the most important thing for you to do. You may want to make a video call between people, such as the image of a person, the location of a person, and the location of a person. Human-to-human physical training, training,