课题基金 / 基金详情

跨模态可解释性个体行为分析与健康管理

批准号:
62072455
项目类别:
面上项目
资助金额:
58.0 万元
负责人:
杨小汕
学科分类:
计算机图像视频处理与多媒体技术
结题年份:
2024
批准年份:
2020
项目状态:
已结题
项目参与者:
杨小汕

项目摘要

结项摘要

杨小汕的其他基金

相似基金

相关文献

中文摘要
对个体行为和健康状态进行实时、连续的分析和监测,有助于实现在线健康管理、预警和干预,提高个人健康管理能力,形成健康生活方式,预防和减少疾病发生。本项目面向基于智能手机、穿戴式设备等采集的实时数据流研究可解释性的个体行为分析和健康管理,探索解决多源异构数据流的统一表征、高冗余数据个体差异敏感的行为分析、动态健康因素关联挖掘与可靠性决策三个关键科学问题,重点研究跨模态时序数据关联与融合、缺失特征补全与全息表示、少样本行为识别、个体自适应行为序列检测、动静态结合的健康状态预测和隐式健康因素分析与行为推荐。最终建立多源异构个体行为识别与推荐方面的基础理论方法,完成安全、可信、有因可循的一体化技术解决方案。通过开发健康行为管理助手APP,将研究成果集成到智能手机在实际应用环境下形成示范应用,有助于加快人工智能的创新研究与应用,推动健康管理实现从点状监测向连续监测、从短流程管理向长流程管理转变。
英文摘要
The real-time and continuous analysis and monitoring of individual behaviors and health statuses are conducive to realize the online health management, early warning, and intervention, to improve the personal health management ability, to form a healthy lifestyle, to prevent and reduce the occurrence of diseases. Based on the real-time data stream collected by smartphones and wearable devices, this project focuses on the interpretable individual behavior analysis and health management. The three principle scientific problems are the unified representation of the multi-source heterogeneous data stream, the individual-sensitive behavior analysis on the highly redundant data stream, the dynamic health factor mining and reliable decision making. The research program includes the correlation and fusion of the cross-modal sequential data, the missing feature completion and holographic feature learning, few-shot behavior recognition, individual-adaptive behavior sequence detection, dynamic-static health status prediction, implicit health factor analysis and behavior recommendation. Finally, the theoretical basics of individual behavior recognition and recommendation on the multi-source heterogeneous data stream will be established. A secure, credible and causal integrated technical solution will be achieved. Through the development of health behavior management assistant APP, the research achievement will be integrated into smartphones to form a pilot application in the real environment. This project will help to accelerate the innovative research and application of artificial intelligence. It will also promote the transformation of health management from spot monitoring to continuous monitoring and from short process management to long process management.
本项目围绕跨模态可解释性个体行为分析与健康管理开展研究,重点解决多源异构数据流的统一表征、高冗余数据个体差异敏感的行为分析、动态健康因素关联挖掘与可靠性决策等关键科学问题。本项目的研究内容属于建设安全便捷的智能社会的重点任务范畴,有助于加快人工智能的创新研究与应用,推动健康管理实现从点状监测向连续监测、从短流程管理向长流程管理转变。项目主要研究内容包含实时数据流处理、个体行为序列分析、健康状态预测与干预三个层次。其中实时数据流处理主要包含跨模态时序数据关联与融合,缺失模态数据的特征补全与全息表示学习;个体行为序列分析主要包括少样本行为识别和个体自适应的行为序列检测;健康状态预测与干预主要为用户提供动静态结合的健康状态预测和隐式健康因素分析与行为推荐。在项目执行期内,项目团队提出了基于跨模态路由机制的多模态数据协同表征、基于选择性注意力机制的跨模态缺失特征重建、多模态协同的少样本行为识别、基于模态协同的域自适应个体行为识别、基于局部-全局个体行为图的健康状态预测、基于健康因素的个性化饮食行为推荐等多个创新性的方法,相关工作已发表/接收CCF-A类会议和IEEE/ACM Trans期刊论文38篇,包括CVPR、NeurIPS、ICML、MM、AAAI、TPAMI、TIP、TMM等国际顶级会议和期刊。开发了面向智能手机、智能手环的多源行为数据采集与实时识别系统,支持多种设备、多种传感器的动态适配,集成了实时行为分析与健康行为推荐等功能;收集了全息、动态个人健康数据库,支持多种模态数据的实时处理与融合表征;构建了具有连续加周期性数据流的健康管理数据集。项目研究成果在深圳卫健委和北京中医药大学深圳医院等单位开展了充分的赋能应用,提升了校园和医院的健康监测和健康管理效率。
知识驱动的视频文本描述生成
  • 批准号:
    61702511
  • 项目类别:
    青年科学基金项目
  • 资助金额:
    29.0万元
  • 批准年份:
    2017
  • 负责人:
    杨小汕
  • 依托单位:
国内基金
海外基金