课题基金 / 基金详情

面向大数据的统计分布式计算及隐私保护的理论与方法

批准号:
92046005
项目类别:
重大研究计划
资助金额:
20.0 万元
负责人:
周勇
依托单位:
学科分类:
管理统计理论与方法
结题年份:
2021
批准年份:
2020
项目状态:
已结题
项目参与者:
李超君、明静思、彭梦姣、郁淼淼、李子洋、赵志嵩、张鸿飞、苏瑾

项目摘要

结项摘要

项目成果

周勇的其他基金

相似基金

相关文献

中文摘要
本项目聚焦于分布式计算的前沿探索,是一项解决大数据管理决策问题的基础性研究。首先对于非光滑损失函数以及U统计量类型的损失函数设计非迭代且高效通讯的分布式算法,使得提出的方法可以有效地应用于大规模数据集场景的分析与建模。同时给出算法中参数估计的统计性质,以使方法在实际应用中具有良好的解释性,并能进行有效的统计推断。最后基于大数据分布式算法,围绕大数据分析中备受关注的数据安全问题开展讨论,提出科学合理的隐私保护技术与方法,最终达到使以上研究的分布式计算方法既能满足数据安全要求,又不破坏原有的数据通讯以及统计推断效率的目的,并将其应用到管理、金融、生物医学、高精密行业的实际场景,为管理决策提供咨询建议和指导。
英文摘要
In the big data era, the research focuses on the frontiers of distributed computing that solves the basic problems in management and decision-making, which are effectively applicable in the analysis and modeling of large-scale data set scenarios. More specifically, we develop the communication-efficient and non-iterative distributed algorithm for non-smooth loss function and complex loss function of U-type statistics, respectively. At the same time, the properties of parameter estimation under communication-efficient distributed computing are given, so that the method has good interpretability in the applications and can carry out effective statistical inference. Finally, we discuss the data security issues that are of great concern in big data analysis based on the distributed algorithm and propose the scientific and reasonable data privacy protection technologies to achieve the balance between the requirements of data privacy and the efficiency of the computing and inference. The above methods will be widely applied in the areas of management, finance, biomedicine, and high-precision industries to provide guidance for management.
本项目聚焦于分布式计算以及数据隐私保护的前沿探索,是一项解决大数据管理决策问题的基础性研究,取得了如下的创新研究成果:(1)在分布式算法中,针对梯度不一定存在的非光滑目标函数,项目组提出用基于等度连续性的次梯度取代梯度信息的方法,以及用局部光滑函数近似的方法,来保证高效通信算法的可行性;(2)为克服不可必免的数据污染,以及对抗潜在数据攻击的威胁,项目组认为提出在分布式算法中针对传输整合梯度信息的关键步骤,运用MOM估计克服不良数据对梯度信息造成的影响;(3)为了有效利用外部总结性辅助信息,项目组提出加强的经验似然方法、增广广义估计方程方法、相乘似然函数与置信密度方法等框架来有效整合部分个体数据与外部总结性辅助信息结果,并在大数据情形下进一步考虑各辅助信息整合框架的通讯有效的迭代算法等分布式统计推断方法;(4)针对分布式算法数据传递过程中可能存在的隐私泄露问题,项目组提出基于扰动的梯度信息以及扰动的初始值构造的通讯有效算法,达到既能进行有效的统计推断,又能保证数据安全的目的。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
Semiparametric additive frailty hazard model for clustered failure time data
集群故障时间数据的半参数加性脆弱危险模型
DOI: 10.1002/cjs.11647
发表时间: 2020-10
期刊: Canadian Journal of Statistics
影响因子: --
作者: [Peng LIU, Shanshan SONG, Yong Zhou]
通讯作者: Yong Zhou
Linear expectile regression under massive data
海量数据下的线性期望回归
DOI: 10.1016/j.fmre.2021.08.012
发表时间: 2021-09
期刊: Fundamental Research
影响因子: 6.2
作者: [Shanshan Song, Yuanyuan Lin, Yong Zhou]
通讯作者: Yong Zhou
DOI: 10.1016/j.csda.2021.107207
发表时间: 2021-03
期刊: Comput. Stat. Data Anal.
影响因子: --
作者: [Caiyun Fan;Wenbin Lu;Yong Zhou]
通讯作者: Caiyun Fan;Wenbin Lu;Yong Zhou
Correlation-based joint feature screening for semi-competing risks outcomes with application to breast cancer data
基于相关性的联合特征筛选半竞争风险结果并应用于乳腺癌数据
DOI: 10.1177/09622802211037071
发表时间: 2021-09
期刊: Statistical Methods in Medical Research
影响因子: 2.3
作者: [Mengjiao Peng, Liming Xiang]
通讯作者: Liming Xiang
6
    经济管理中复杂数据和复杂行为的分析方法及其应用
    • 批准号:
      71931004
    • 项目类别:
      重点项目
    • 资助金额:
      230.0万元
    • 批准年份:
      2019
    • 负责人:
      周勇
    • 依托单位:
    金融大数据统计学习理论与方法及在互联网金融中的应用
    • 批准号:
      91546202
    • 项目类别:
      重大研究计划
    • 资助金额:
      240.0万元
    • 批准年份:
      2015
    • 负责人:
      周勇
    • 依托单位:
    不可压Navier-Stokes方程的定性研究
    • 批准号:
      10501012
    • 项目类别:
      青年科学基金项目
    • 资助金额:
      14.0万元
    • 批准年份:
      2005
    • 负责人:
      周勇
    • 依托单位:
    国内基金
    海外基金