Multimodal Analysis of Simultaneity and Sequentiality in "Utterances" in Spoken Japanese and Japanese Sign Language

日语口语和日本手语“话语”的同时性和顺序性的多模态分析

• 批准号: 21520399
• 负责人: TAKANASHI Katsuya
• 金额: $ 2.66万
• 依托单位: Kyoto University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 2009
• 资助国家: 日本
• 起止时间: 2009 至 2011
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-21520399/
• 关键词: 談話研究; 手話; ジェスチャー; 発話; マルチモーダル; 行為連鎖; 身体; 言語学

This research explicates the temporal structures between linguistic and non-verbal behaviors in Spoken Japanese and Japanese Sign Language conversation. Using video recording of ordinary conversation in Spoken Japanese and in Japanese Sign Language, it is analyzed how"utterances"are synthesized from linguistic expressions and bodily behaviors such as gestures, and how such"utterances"construct sequential relations in conversation.

本研究探讨了日语口语和日本手语会话中语言行为和非语言行为之间的时间结构。本文通过对日常日语会话和日语手语会话的录像，分析了语言表达和手势等身体行为如何合成“话语“，以及这些“话语“如何构成会话中的序列关系。

项目成果

非言語パターンの自動抽出による状況説明会話における言い淀みシーンの分析

使用非语言模式自动提取分析情景解释对话中的犹豫场景

• 发表时间: 2012
• 期刊: インタラクション2011論文集
• 作者: 岡田将吾;坊農真弓;角康之;高梨克也;新田克己
• 通讯作者: 新田克己

手話会話における表現モダリティの継続性

手语对话中表达方式的连续性

• 发表时间: 2011
• 期刊: 社会言語科学
• 作者: 坊農真弓;菊地浩平;大塚和弘
• 通讯作者: 大塚和弘

じゃんけんのマルチモーダル相互作用分析

石头、剪刀、布的多模态相互作用分析

• 发表时间: 2011
• 期刊: 社会言語科学会第27回大会発表論文集
• 作者: 城綾実;細馬宏通;細馬宏通
• 通讯作者: 細馬宏通

グループホームでの介護者間の身体動作を生み出す環境-カンファレンスにおける語り

在团体之家的护理人员之间创造身体运动的环境 - 会议上的叙述

• 发表时间: 2010
• 期刊: 社会言語科学第26回大会発表論文集
• 作者: 細馬宏通;中村好孝;城綾実;吉村雅樹
• 通讯作者: 吉村雅樹

擬音語・擬態語と共起するジェスチャーの同期

与拟声词/拟声词同时出现的手势同步

• 发表时间: 2012
• 作者: 城綾実;細馬宏通
• 通讯作者: 細馬宏通