权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

自己視点・他者視点・固定視点映像の統合解析による人物行動センシング

通过自我视角、他人视角和固定视角视频的综合分析来感知人类行为

基本信息

批准号：
20H04205
负责人：
佐藤洋一
金额：
$ 11.23万
依托单位：
The University of Tokyo
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (B)
财政年份：
2020
资助国家：
日本
起止时间：
2020-04-01 至 2024-03-31
项目状态：
已结题

项目摘要

本研究課題では、自己視点・他者視点・固定視点の異なる視点からの映像を統合解析による人物行動センシングに向けて、研究項目１．自己教師有り学習による複数視点映像の総合解析に適した特量表現学習、研究項目２．異なる視点の映像間でのアラインメント、研究項目３．自己視点映像と固定視点映像の統合による人物行動センシング、研究項目４．自己視点映像と他者視点映像の統合によるインタラクション解析、の４項目について研究に取り組むことを予定している。2022年度は、これまで得られた研究項目１の成果を踏まえ、研究項目２．異なる視点の映像間でのアラインメント、研究項目３．自己視点映像と固定視点映像の統合による人物行動センシング、研究項目４．自己視点映像と他者視点映像の統合によるインタラクション解析のそれぞれに取り組んだ。その結果、少量データからの動作認識モデルの学習、異なるもモダリティ特徴間のインタラクションに基づく動作認識モデルの教師無しドメイン適応、動作認識モデルの振る舞い可視化、自己視点映像による手動作理解の高度化のそれぞれについて研究成果を得た。

This research topic includes: 1. Personal learning; 2. Different viewpoint mapping; 3. Different viewpoint mapping; 4. Different viewpoint mapping; 5. Different viewpoint mapping Research item 3. Character action system integration between own viewpoint image and fixed viewpoint image. Research item 4. Character action system analysis between own viewpoint image and other viewpoint image. In 2022, the results of research project 1 were reviewed, research project 2 was conducted on the relationship between different viewpoint images, research project 3 was conducted on the relationship between self-viewpoint images and fixed-viewpoint images, and research project 4 was conducted on the relationship between self-viewpoint images and other-viewpoint images. The results of this study include: a small amount of motion recognition, study of motion recognition.

项目成果

期刊论文数量（15）

专著数量（0）

科研奖励数量（0）

会议论文数量（0）

专利数量（0）

Neural Routing by Memory

DOI：
发表时间：
2021
期刊：
影响因子：
0
作者：
Kaipeng Zhang;Zhenqiang Li;Zhifeng Li;Wei Liu;Yoichi Sato
通讯作者：
Kaipeng Zhang;Zhenqiang Li;Zhifeng Li;Wei Liu;Yoichi Sato

Improving Action Segmentation via Graph-Based Temporal Reasoning

DOI：
10.1109/cvpr42600.2020.01404
发表时间：
2020-06
期刊：
2020 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR)
影响因子：
0
作者：
Yifei Huang;Yusuke Sugano;Yoichi Sato
通讯作者：
Yifei Huang;Yusuke Sugano;Yoichi Sato

Stacked Temporal Attention: Improving First-person Action Recognition by Emphasizing Discriminative Clips

DOI：
发表时间：
2021-12
期刊：
影响因子：
0
作者：
Lijin Yang;Yifei Huang;Yusuke Sugano;Yoichi Sato
通讯作者：
Lijin Yang;Yifei Huang;Yusuke Sugano;Yoichi Sato

Cross-view Non-local Neural Networks for Joint Representation Learning between First and Third Person Videos

用于第一人称和第三人称视频之间联合表示学习的跨视图非局部神经网络

DOI：
发表时间：
2021
期刊：
影响因子：
0
作者：
Zhehao Zhu;Yusuke Sugano and Yoichi Sato
通讯作者：
Yusuke Sugano and Yoichi Sato

Compound Prototype Matching for Few-shot Action Recognition

DOI：
10.48550/arxiv.2207.05515
发表时间：
2022-07
期刊：
影响因子：
0
作者：
Lijin Yang;Yifei Huang;Y. Sato
通讯作者：
Lijin Yang;Yifei Huang;Y. Sato

DOI：
{{ item.doi }}
发表时间：
{{ item.publish_year }}
期刊：
{{ item.journal_name }}
影响因子：
{{ item.factor }}
作者：
{{ item.authors }}
通讯作者：
{{ item.author }}

数据更新时间：{{ journalArticles.updateTime }}

作者：
{{ item.author }}

数据更新时间：{{ monograph.updateTime }}

作者：
{{ item.author }}

数据更新时间：{{ sciAawards.updateTime }}

作者：
{{ item.author }}

数据更新时间：{{ conferencePapers.updateTime }}

作者：
{{ item.author }}

数据更新时间：{{ patent.updateTime }}

佐藤洋一其他文献

Catastrophic Disaster Causing Separation of Culture and Loss of History：Museum activities by university students for “Build Back Better” of local culture

灾难导致文化分离和历史失落：大学生“重建更好”当地文化的博物馆活动

DOI：
发表时间：
2021
期刊：
人類学研究所研究論集
影响因子：
0
作者：
佐藤洋一;衣川太一;西村明;西村明;塚本麿充;塚本麿充;菅豊;加藤幸治;Koji Kato
通讯作者：
Koji Kato

The Challenge of Public History in Japan

日本公共历史的挑战

DOI：
发表时间：
2020
期刊：
International Public History Newsletter
影响因子：
0
作者：
佐藤洋一;衣川太一;西村明;西村明;塚本麿充;塚本麿充;菅豊;加藤幸治;Koji Kato;川田牧人;佐藤洋一・衣川太一;佐藤洋一;黒﨑浩行・佐藤壮広・君島彩子・西村明（司会）;鬼頭宏・西村明（聞き手）;菅豊;Yutaka Suga
通讯作者：
Yutaka Suga

架橋としての視覚物－戦地訪問映像を中心に

视觉对象作为桥梁——聚焦战场视察视频

DOI：
发表时间：
2020
期刊：
日本オーラル・ヒストリー研究
影响因子：
0
作者：
Tsukahara Shinji;Pultz Jude;塚原伸治;佐藤洋一;佐藤洋一;西村明
通讯作者：
西村明

『フィリピン周辺地域の音楽』（ウソパイカダー・米野みちよ・寺田吉孝監修,DVDを共同監修）

《来自菲律宾周边地区的音乐》（乌索派卡达、米野道代、寺田喜孝监督，DVD 共同监督）

DOI：
发表时间：
2019
期刊：
影响因子：
0
作者：
陸薇薇;菅豊;菅豊;菅豊;塚原伸治;俵木悟;俵木悟;俵木悟;俵木悟;宮内泰介;Akira Nishimura;俵木悟;塚原伸治;西村明;Michiyo Yoneno-Reyes;Michiyo Yoneno-Reyes;菅豊;菅豊;菅豊;菅豊;菅豊;菅豊;菅豊;菅豊;加藤幸治;加藤幸治;加藤幸治;川田牧人;小長谷英代;俵木悟;俵木悟;西村明;塚本麿充;塚本麿充;塚本麿充;米野みちよ・平野裕子;Michiyo Yoneno-Reyes;Michiyo Yoneno-Reyes;山下香;山下香;菅豊;菅豊;菅豊;加藤幸治;西村明;西村明;米野みちよ;加藤幸治;加藤幸治;加藤幸治;Konagaya Hideyo;山下香・安枝英俊;俵木悟;俵木悟;俵木悟;俵木悟;西村明;西村明;西村明;米野みちよ;米野みちよ;米野みちよ;塚本麿充;加藤幸治;俵木悟;菅豊;菅豊;菅豊;菅豊;Yutaka Suga;菅豊;菅豊;菅豊;米野みちよ;米野みちよ;Michiyo Yoneno-Reyes;Michiyo Yoneno-Reyes;米野みちよ;塚本麿充;Makito Kawada;Hideyo Konagaya;Hideyo Konagaya;加藤幸治;加藤幸治;加藤幸治;加藤幸治;加藤幸治;加藤幸治;加藤幸治;俵木悟;俵木悟;俵木悟;俵木悟;宮内泰介;宮内泰介;俵木悟;俵木悟;Michiyo Yoneno-Reyes;菅豊;加藤幸治;俵木悟;植田憲司・衣川太一・佐藤洋一編;西村明;塚本麿充;塚本麿充;米野みちよ;平野裕子・米野みちよ・比留間洋一・スシアナ　ヌグラハ;平野裕子・米野みちよ;菅豊;加藤幸治;加藤幸治;加藤幸治;川田牧人;俵木悟;俵木悟;俵木悟;俵木悟;俵木悟;塚原伸治;西村明;西村明;西村明;塚本麿充;菅豊;宮内泰介・上田昌文;川田牧人;山下香;俵木悟;佐藤洋一;西村明;西村明;Michiyo Yoneno-Reyes;川田牧人;川田牧人;川田牧人;加藤幸治;加藤幸治;加藤幸治;加藤幸治;俵木悟;菅豊;菅豊;米野みちよ
通讯作者：
米野みちよ

『パブリックヒストリー入門―開かれた歴史学への挑戦―』（菅豊・北條勝貴編著,「「歴史」する聖地空間」を分担執筆）

《公共历史导论：对开放史学的挑战》（菅义丰、北条胜隆主编，合着《历史的神圣空间》）

DOI：
发表时间：
2019
期刊：
影响因子：
0
作者：
陸薇薇;菅豊;菅豊;菅豊;塚原伸治;俵木悟;俵木悟;俵木悟;俵木悟;宮内泰介;Akira Nishimura;俵木悟;塚原伸治;西村明;Michiyo Yoneno-Reyes;Michiyo Yoneno-Reyes;菅豊;菅豊;菅豊;菅豊;菅豊;菅豊;菅豊;菅豊;加藤幸治;加藤幸治;加藤幸治;川田牧人;小長谷英代;俵木悟;俵木悟;西村明;塚本麿充;塚本麿充;塚本麿充;米野みちよ・平野裕子;Michiyo Yoneno-Reyes;Michiyo Yoneno-Reyes;山下香;山下香;菅豊;菅豊;菅豊;加藤幸治;西村明;西村明;米野みちよ;加藤幸治;加藤幸治;加藤幸治;Konagaya Hideyo;山下香・安枝英俊;俵木悟;俵木悟;俵木悟;俵木悟;西村明;西村明;西村明;米野みちよ;米野みちよ;米野みちよ;塚本麿充;加藤幸治;俵木悟;菅豊;菅豊;菅豊;菅豊;Yutaka Suga;菅豊;菅豊;菅豊;米野みちよ;米野みちよ;Michiyo Yoneno-Reyes;Michiyo Yoneno-Reyes;米野みちよ;塚本麿充;Makito Kawada;Hideyo Konagaya;Hideyo Konagaya;加藤幸治;加藤幸治;加藤幸治;加藤幸治;加藤幸治;加藤幸治;加藤幸治;俵木悟;俵木悟;俵木悟;俵木悟;宮内泰介;宮内泰介;俵木悟;俵木悟;Michiyo Yoneno-Reyes;菅豊;加藤幸治;俵木悟;植田憲司・衣川太一・佐藤洋一編;西村明;塚本麿充;塚本麿充;米野みちよ;平野裕子・米野みちよ・比留間洋一・スシアナ　ヌグラハ;平野裕子・米野みちよ;菅豊;加藤幸治;加藤幸治;加藤幸治;川田牧人;俵木悟;俵木悟;俵木悟;俵木悟;俵木悟;塚原伸治;西村明;西村明;西村明;塚本麿充;菅豊;宮内泰介・上田昌文;川田牧人;山下香;俵木悟;佐藤洋一;西村明;西村明;Michiyo Yoneno-Reyes;川田牧人;川田牧人;川田牧人;加藤幸治;加藤幸治;加藤幸治;加藤幸治;俵木悟;菅豊;菅豊;米野みちよ;塚本麿充;川田牧人
通讯作者：
川田牧人