Deep memory and prediction neural network for video prediction

Deep memory and prediction neural network for video prediction
复制标题

用于视频预测的深度记忆和预测神经网络

DOI:
10.1016/j.neucom.2018.11.065
复制
发表时间:
2019-02
期刊:
影响因子:
6
通讯作者:
陈熙霖
陈熙霖
中科院分区:
计算机科学2区
文献类型:
--
作者:
刘志鹏;柴秀娟;陈熙霖

文献摘要

参考文献

被引文献

相似文献

受认知神经科学中记忆机制和预测编码概念的启发,提出了一种用于视频预测的深度记忆和预测神经网络(DMPNet)。相应地,DMPNet中设计了存储器和误差传播单元,用于捕获先前的时空信息并计算当前的预测误差,并将其转发到预测单元以纠正后续的视频预测。接着,预测单元将存储单元中存储的信息和前一帧的预测误差作为输入来预测下一帧。我们在两个公开的真实世界数据集上评估了我们的方法,并证明了所提出的DMPNet在定量和定性上优于一些最先进的方法。
Inspired by the concept of memory mechanism and predictive coding from the cognitive neuroscience, this paper presents a deep memory and prediction neural network (DMPNet) for video prediction. Correspondingly, memory and error propagation units are designed in DMPNet to capture the previous spatial-temporal information and compute current predictive error which is forwarded to the prediction unit for correcting the subsequent video prediction. Subsequently, prediction unit takes the information stored in memory unit and predictive error of previous frame as input to predict the next frame. We evaluate our method on two public real-world datasets and demonstrate that the proposed DMPNet outperforms some state-of-the-art methods quantitatively and qualitatively.
DOI: 10.32388/l39w1f
发表时间: 2020-02
影响因子: 2
作者:
R. Logie;Valérie Camos;Nelson Cowan
通讯作者: R. Logie;Valérie Camos;Nelson Cowan
DOI: 10.1098/rstb.2008.0322
发表时间: 2009-05-12
影响因子: 6.3
作者:
Hawkins, Jeff;George, Dileep;Niemasik, Jamie
通讯作者: Niemasik, Jamie
DOI: 10.1007/978-3-642-15552-9_51
发表时间: 2010-09
期刊: --
影响因子: --
作者:
Jenny Yuen;A. Torralba
通讯作者: Jenny Yuen;A. Torralba
DOI: 10.5860/choice.34-3597
发表时间: 1996-05
期刊: --
影响因子: --
作者:
J. Richardson;R. Engle;L. Hasher;R. Logie;Ellen R. Stoltzfus;R. Zacks
通讯作者: J. Richardson;R. Engle;L. Hasher;R. Logie;Ellen R. Stoltzfus;R. Zacks
工作记忆。
DOI: 10.1002/wcs.50
发表时间: 2010
期刊: Wiley interdisciplinary reviews. Cognitive science
影响因子: --
作者:
Timothy J. Ricker;Angela M. AuBuchon;N. Cowan
通讯作者: N. Cowan