SlowFast Networks for Video Recognition

Paper-info

• title      : SlowFast Networks for Video Recognition[2019-ICCV]
• author : Christoph Feichtenhofer, Haoqi Fan, Jitendra Malik, Kaiming He.
• Insight : Slow pathway for spatial semantics, Fast pathway for motion, two pathways are fused by lateral connections.
• github : SlowFast-Pytorch

Pipeline

• 核心问题：如何将slow-pathway和fast-pathway得到的feature融合起来！                 
• 解决方案：fast-pathway的帧采样率是slow的alpha[alpha=8]倍，卷积的channel数是slow的beta[beta=1/8]倍 .         
• 网络细节：

Experiment

• Kinetics/Kinetics

• Ablation Experiments

1. (a)说明Slow pathway比单独使用Slow或者Fast更好！
2. (b)说明Fast pathway【低的channel capacity ratio意味着它不会建立详细的空间表示】确实捕获了motion的信息！
3. (c)说明对于Fast pathway而言，空间表示形式[RGB、Gray、diff、optical flow]的影响没有想象中的那么大！