权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

Developmental changes in environmental cues facilitating word learning during parent-child toy play

环境线索的发展变化促进亲子玩具游戏期间的单词学习

基本信息

批准号：
22K13664
负责人：
萩原広道
金额：
$ 2.5万
依托单位：
The University of Tokyo
依托单位国家：
日本
项目类别：
Grant-in-Aid for Early-Career Scientists
财政年份：
2022
资助国家：
日本
起止时间：
2022-04-01 至 2025-03-31
项目状态：
未结题

项目摘要

初年度は主に，①収集したコーパスデータのアノテーション付与および環境整備，②半自動アノテーションに向けた機械学習手法の整備，③海外の研究者とのネットワーク形成，の3点を実施した。①について，本研究課題の実施前から既に収集開始していた，乳幼児とその保護者およそ90組を対象にした「親子遊び調査」コーパスに対して，アノテーションの付与を実施した。この調査では，特定の用途をもつ物品を使って親子で遊んでもらい，その際の音声・映像データを収集した。300以上ある音声・映像データに対して，発話や行為の開始・終了のタイミングおよび発話の文字起こしが完了し，アノテーションマニュアルのオープン化に向けた整備を進めた。親子の一人称始点の映像に対して，クラウドソーシングでのアノテーションが可能となるよう，追加での同意書取得も実施した。②について，発話は行為の半自動アノテーションを実施するため，筑波大学や京都大学の協力を得て，さまざまな機械学習アプローチを模索した。例えば，発話については，発話セグメンテーションや自動音声認識などのプラットフォーム活用を試みた。行為についても，YOLOv5などの物体認識アルゴリズムを用いたアノテーションを試みた。③については，世界赤ちゃん研究学会 (ICIS) に参加・発表した。さらに，マルチモーダルなコーパスの構築・分析を実施するために，米国テキサス大学や，インディアナ大学，ヒューストン大学，英国Warwick大学，スイス・バーゼル大学の研究者と研究交流し，情報共有するとともに助言を得た。

In the early years, the main tasks were: ① collection of information and environmental preparation; ② preparation of semi-automatic information and mechanical learning methods; ③ formation of overseas researchers; and 3 points of implementation. In this paper, the research topic was carried out in the beginning of the collection, and 90 groups of mothers and children were selected for the study of parent-child tourism and survey. This survey is based on the collection of specific uses and items, and the collection of sound and image. More than 300 sound, image, start, end, text, start, end, end A parent's name is the starting point of the mapping process, and it is possible to obtain additional consent for the implementation of the solution 2. In the middle of the conversation, the semi-automatic communication system was implemented through the cooperation of Tsukuba University and Kyoto University, and the mechanical learning system was implemented. For example, if the message is not transmitted, the message will be transmitted to the user automatically. The behavior of YOLOv5 is to recognize the object and try it out. 3. The World Academy of Sciences (ICIS) participated in the exhibition. The University of Warwick, UK, is a research centre for the development and analysis of information.