综述
2015-10-09-video-applications.md 是handong1587关注的深度学习在视频方面的应用总结,具有参考价值,可以直接看渲染好的博客
相关论文
A Survey on Deep Video Prediction 该论文是关于深度预测视频领域的一份调研报告,作者是学生 Victor Ge
DEEP PREDICTIVE CODING NETWORKS FOR VIDEO PREDICTION AND UNSUPERVISED LEARNING 本文是关于使用深度学习的方法来预测编码
MoCoGAN: Decomposing Motion and Content for Video Generation
从论文Generating Videos with Scene Dynamics跟踪到,该论文中提到的论文都可以好好研究,与视频预测相关。
e-lab references 这是e-lab实验室对相关研究的文章收集,可以作为无监督学习预测视频的参考。
- Unsupervised Learning of Video Representations using LSTMs 代码
- Learning to Generate Long-term Future via Hierarchical Prediction 项目主页 代码
- Parallel multi-dimensional LSTM, with application to fast biomedical volumetric image segmentation 论文 和ConvLSTM一样拓展了FCLSTM从而捕捉了空间-时间关系。
- Decomposing Motion and Content for Natural Video Sequence Prediction 主页 代码
- Learning to linearize under uncertainty
- Action-conditional video prediction using deep networks in atari games
- Unsupervised learning of visual structure using predictive generative networks
- Two-stream convolutional networks for action recognition in videos 双流视频预测
- Convolutional Two-Stream Network Fusion for Video Action Recognition 主页 代码 双流视频预测,同时编码空间和时间信息(光流)
- TS-LSTM and Temporal-Inception: Exploiting Spatiotemporal Dynamics for Activity Recognition
- Long-term Temporal Convolutions for Action Recognition 论文 主页 代码
- Video Scene Parsing with Predictive Feature Learning
- Semantic Video Segmentation by Gated Recurrent Flow Propagation 论文
- Stochastic Adversarial Video Prediction 论文 使用对抗生成网络进行视频预测。
相关IDEA
- 能否使用安卓的视频数据+传感器数据来进行数据集的收集,并且同时进行视频预测和语义分割。
- 能使用视频预测技术对NBA篮球的动作进行预测
相关开源项目
- e-lab e-lab实验室中实现了很多视频预测的模型,大部分使用torch或者pytorch。Welcome to e-Lab!
- Temporal Relation Networks 时序相关模型,代码暂时没有开源,可以跟踪一下 主页
- cvae 使用条件可变自动编码器进行视频预测 demo 报告 论文 vae-experiments
- two-stream-pytorch 双流行为识别
视频预测相关人员
Carl Vondrick 该作者最近研究预测将来的相关工作。从论文Generating Videos with Scene Dynamics跟踪到,该论文中提到的论文都可以好好研究,与视频预测相关。
Viorica Pătrăucean 该作者主要研究使用无监督方法在视频中提取场景的地理信息和语义。 Spatio-temporal video autoencoder with differentiable memory