HCC: Small: Collaborative Research: Gestural and Linguistic Expressivity and Entrainment in Dialogue

HCC:小型:协作研究:手势和语言表达以及对话中的夹带

基本信息

  • 批准号:
    1115872
  • 负责人:
  • 金额:
    $ 24.99万
  • 依托单位:
  • 依托单位国家:
    美国
  • 项目类别:
    Continuing Grant
  • 财政年份:
    2011
  • 资助国家:
    美国
  • 起止时间:
    2011-09-01 至 2015-08-31
  • 项目状态:
    已结题

项目摘要

This research will advance the state of the art in conversational character systems (Intelligent Virtual Agents) in two ways. First, it seeks to better understand the interplay of gesture and language in both generating the perception of personality and allowing participants to adapt to the ongoing conversational context. Second, it will use this understanding to build novel computational models for gesture and language generation that provide fine grained control over the perception of personality and support agent adaptation in response to the conversational context. The theoretical basis for the personality-based modeling in this project is the well-established "Big Five" model of personality, which consists of five orthogonal dimensions of individual variation.The work on adaptation will be couched in the collaborative theory of language use and communication accommodation theory, which predict that communicative behavior varies based on partner specificity. Initial work will form a motion capture, video and audio corpus of three kinds of exchanges. This will be used to both study gestural entrainment during human interactions, determining if audio-based findings extend to the gestural domain, and to enhance scientific understanding of the relationship between gesture and personality. This will inform the modeling work which will build a joint model for personality-based language and gesture production. The model will extend a pilot study on gesture generation for extraversion to three Big Five traits and integrate it with personality-based language generation. An experimental stage will validate these models and study the interactions of movement and language. The research will also study the role of adaptation. Questions to be answered include: (1) whether people gesturally entrain with computers, or indeed produce any gestures while communicating with a computer, (2) whether computers? gestural entrainment promotes similar levels of affiliation as observed with vocal entrainment, and (3) whether changing gestural entrainment over the course of an interaction is more powerful than aligning gestures from the outset of an interaction. Character systems are becoming increasingly important for a range of applications, from virtual worlds to tutoring systems. There is growing evidence that the way personality is presented through these characters, and how well they mimic expected human behavior like entrainment, has a direct impact on the effectiveness of the applications in which they are used. For example, it will have a direct impact on student learning. As these applications become more ubiquitous in society, particularly among children, it is important to be able to harness their full benefit, and indeed, avoid unintended negative consequences. This involves both advances in computational models that allow an agent to reflect a given personality and adapt to a human user, and also a deeper understanding of the role of personality and adaptation in effective human-agent interactions.
这项研究将从两个方面推动对话角色系统(智能虚拟代理)的发展。首先,它试图更好地理解手势和语言在产生个性感知和允许参与者适应正在进行的对话环境方面的相互作用。其次,它将利用这一理解来建立新的手势和语言生成计算模型,这些模型提供对个性感知的细粒度控制,并支持主体根据对话上下文进行适应。本项目中基于个性的建模的理论基础是公认的人格五大模型,该模型由五个相互垂直的个体变量组成。适应方面的工作将体现在语言使用的协作理论和交际适应理论中,该理论预测交际行为会根据伴侣的特殊性而变化。前期工作将形成动作捕捉、视频和音频三种交流语料库。这将被用来研究人类互动过程中的手势夹带,确定基于音频的发现是否延伸到手势领域,并加强对手势和个性之间关系的科学理解。这将为建模工作提供信息,该工作将为基于个性的语言和手势生产建立联合模型。该模型将把一项关于外向手势生成的试点研究扩展到三大五个特质,并将其与基于个性的语言生成相结合。实验阶段将验证这些模型,并研究运动和语言的相互作用。这项研究还将研究适应的作用。需要回答的问题包括:(1)人们是否手势缠绕着计算机,或者在与计算机交流时是否确实产生了任何手势;(2)计算机是否?手势缠绕促进了与语音缠绕相似的联系水平,以及(3)在互动过程中改变手势缠绕是否比从互动开始就调整手势更有效。从虚拟世界到教学系统,字符系统在一系列应用中正变得越来越重要。越来越多的证据表明,通过这些角色呈现个性的方式,以及它们对预期的人类行为(如夹带)的模仿程度,直接影响到它们所使用的应用程序的有效性。例如,它将对学生的学习产生直接影响。随着这些应用在社会中变得越来越普遍,特别是在儿童中,重要的是能够充分利用它们的好处,甚至避免意想不到的负面后果。这既包括计算模型的进步,允许代理反映给定的个性并适应人类用户,也涉及对个性和适应在有效的人-代理交互中的作用的更深层次的理解。

项目成果

期刊论文数量(0)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

Michael Neff其他文献

Storytelling Agents with Personality and Adaptivity
具有个性和适应性的讲故事代理
se-atlas: Mapping of Health Care Providers for People With Rare Diseases - a Cross-sectional Survey From the User Perspective
se-atlas:罕见病患者医疗保健提供者地图 - 从用户角度进行的横断面调查
  • DOI:
    10.21203/rs.3.rs-829482/v1
  • 发表时间:
    2021
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Jannik Schaaf;Michael Neff;Manuela Till;Niels Tegtbauer;H. Storf
  • 通讯作者:
    H. Storf
Hand Gesture Synthesis for Conversational Characters
会话角色的手势合成
  • DOI:
  • 发表时间:
    2016
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Michael Neff
  • 通讯作者:
    Michael Neff
Predictive Feedback for Interactive Control of Physics‐based Characters
基于物理的角色交互控制的预测反馈
  • DOI:
    10.1111/j.1467-8659.2005.00850.x
  • 发表时间:
    2005
  • 期刊:
  • 影响因子:
    2.5
  • 作者:
    Joseph Laszlo;Michael Neff;Karan Singh
  • 通讯作者:
    Karan Singh
Two Techniques for Assessing Virtual Agent Personality
评估虚拟代理个性的两种技术

Michael Neff的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('Michael Neff', 18)}}的其他基金

EAGER: Building a Foundation for Hands-on STEM Learning at a Distance: Pedagogical Agents for Embodied Education in Virtual Reality
EAGER:为远程实践 STEM 学习奠定基础:虚拟现实中实体教育的教学代理
  • 批准号:
    2232066
  • 财政年份:
    2022
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
EAGER: Collaborative Research: Interactive Dialog Agents for Social Language Development and Listening Comprehension
EAGER:协作研究:用于社交语言发展和听力理解的交互式对话代理
  • 批准号:
    1748058
  • 财政年份:
    2017
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
The ATAF2 Transcription Factor, Brassinosteroid Catabolism and Plant Development
ATAF2 转录因子、油菜素类固醇分解代谢和植物发育
  • 批准号:
    1656265
  • 财政年份:
    2017
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Continuing Grant
EXP: Collaborative Research: Gesture Enhancement of Virtual Agent Mathematics Tutors
EXP:协作研究:虚拟代理数学导师的手势增强
  • 批准号:
    1320029
  • 财政年份:
    2013
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
The Role Of Brassinosteroid Inactivation In Plant Development
油菜素类固醇失活在植物发育中的作用
  • 批准号:
    1124749
  • 财政年份:
    2012
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Continuing Grant
CAREER: Generative Models for Character Animation and Gesture in the New Age of Art and Electronic Interaction
职业:艺术和电子交互新时代的角色动画和手势生成模型
  • 批准号:
    0845529
  • 财政年份:
    2009
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
Pilot: Increasing Creative Exploration with Computer Tools that Support Spontaneity & Embodiment
试点:利用支持自发性的计算机工具增加创造性探索
  • 批准号:
    0856084
  • 财政年份:
    2009
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
The Role of Brassinosteroid Inactivation in Plant Development
油菜素类固醇失活在植物发育中的作用
  • 批准号:
    0758411
  • 财政年份:
    2007
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
The Role of Brassinosteroid Inactivation in Plant Development
油菜素类固醇失活在植物发育中的作用
  • 批准号:
    0616153
  • 财政年份:
    2006
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
Functional Analysis of the BAS1 Gene and Its Product: CYP 72B1
BAS1基因及其产物CYP 72B1的功能分析
  • 批准号:
    0114726
  • 财政年份:
    2001
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Continuing Grant

相似国自然基金

昼夜节律性small RNA在血斑形成时间推断中的法医学应用研究
  • 批准号:
  • 批准年份:
    2024
  • 资助金额:
    0.0 万元
  • 项目类别:
    省市级项目
tRNA-derived small RNA上调YBX1/CCL5通路参与硼替佐米诱导慢性疼痛的机制研究
  • 批准号:
    n/a
  • 批准年份:
    2022
  • 资助金额:
    10.0 万元
  • 项目类别:
    省市级项目
Small RNA调控I-F型CRISPR-Cas适应性免疫性的应答及分子机制
  • 批准号:
    32000033
  • 批准年份:
    2020
  • 资助金额:
    24.0 万元
  • 项目类别:
    青年科学基金项目
Small RNAs调控解淀粉芽胞杆菌FZB42生防功能的机制研究
  • 批准号:
    31972324
  • 批准年份:
    2019
  • 资助金额:
    58.0 万元
  • 项目类别:
    面上项目
变异链球菌small RNAs连接LuxS密度感应与生物膜形成的机制研究
  • 批准号:
    81900988
  • 批准年份:
    2019
  • 资助金额:
    21.0 万元
  • 项目类别:
    青年科学基金项目
肠道细菌关键small RNAs在克罗恩病发生发展中的功能和作用机制
  • 批准号:
    31870821
  • 批准年份:
    2018
  • 资助金额:
    56.0 万元
  • 项目类别:
    面上项目
基于small RNA 测序技术解析鸽分泌鸽乳的分子机制
  • 批准号:
    31802058
  • 批准年份:
    2018
  • 资助金额:
    26.0 万元
  • 项目类别:
    青年科学基金项目
Small RNA介导的DNA甲基化调控的水稻草矮病毒致病机制
  • 批准号:
    31772128
  • 批准年份:
    2017
  • 资助金额:
    60.0 万元
  • 项目类别:
    面上项目
基于small RNA-seq的针灸治疗桥本甲状腺炎的免疫调控机制研究
  • 批准号:
    81704176
  • 批准年份:
    2017
  • 资助金额:
    20.0 万元
  • 项目类别:
    青年科学基金项目
水稻OsSGS3与OsHEN1调控small RNAs合成及其对抗病性的调节
  • 批准号:
    91640114
  • 批准年份:
    2016
  • 资助金额:
    85.0 万元
  • 项目类别:
    重大研究计划

相似海外基金

Collaborative Research: HCC: Small: End-User Guided Search and Optimization for Accessible Product Customization and Design
协作研究:HCC:小型:最终用户引导的搜索和优化,以实现无障碍产品定制和设计
  • 批准号:
    2327136
  • 财政年份:
    2023
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
Collaborative Research: HCC: Small: Bridging Research and Visualization Design Practice via a Sustainable Knowledge Platform
合作研究:HCC:小型:通过可持续知识平台桥接研究和可视化设计实践
  • 批准号:
    2147044
  • 财政年份:
    2023
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
Collaborative Research: HCC: Small: Computational Design and Application of Wearable Haptic Knits
合作研究:HCC:小型:可穿戴触觉针织物的计算设计与应用
  • 批准号:
    2301355
  • 财政年份:
    2023
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
Collaborative Research: NSF-CSIRO: HCC: Small: Understanding Bias in AI Models for the Prediction of Infectious Disease Spread
合作研究:NSF-CSIRO:HCC:小型:了解预测传染病传播的 AI 模型中的偏差
  • 批准号:
    2302969
  • 财政年份:
    2023
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
Collaborative Research: HCC: Small: Understanding Online-to-Offline Sexual Violence through Data Donation from Users
合作研究:HCC:小型:通过用户捐赠的数据了解线上线下性暴力
  • 批准号:
    2401775
  • 财政年份:
    2023
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
Collaborative Research: HCC: Small: Supporting Flexible and Safe Disability Representation in Social Virtual Reality
合作研究:HCC:小型:支持社交虚拟现实中灵活、安全的残疾表征
  • 批准号:
    2328183
  • 财政年份:
    2023
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
Collaborative Research: HCC: Small: RUI: Drawing from Life in Extended Reality: Advancing and Teaching Cross-Reality User Interfaces for Observational 3D Sketching
合作研究:HCC:小型:RUI:从扩展现实中的生活中汲取灵感:推进和教授用于观察 3D 草图绘制的跨现实用户界面
  • 批准号:
    2326998
  • 财政年份:
    2023
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
Collaborative Research: HCC: Small: Computational Design and Application of Wearable Haptic Knits
合作研究:HCC:小型:可穿戴触觉针织物的计算设计与应用
  • 批准号:
    2301357
  • 财政年份:
    2023
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
Collaborative Research: HCC: Small: Supporting Flexible and Safe Disability Representation in Social Virtual Reality
合作研究:HCC:小型:支持社交虚拟现实中灵活、安全的残疾表征
  • 批准号:
    2328182
  • 财政年份:
    2023
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
Collaborative Research: HCC: Small: End-User Guided Search and Optimization for Accessible Product Customization and Design
协作研究:HCC:小型:最终用户引导的搜索和优化,以实现无障碍产品定制和设计
  • 批准号:
    2327137
  • 财政年份:
    2023
  • 资助金额:
    $ 24.99万
  • 项目类别:
    Standard Grant
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了