【论文笔记】视频分类系列 Temporal Relational Reasoning in Videos （TRN）

Paper：https://arxiv.org/abs/1711.08496v1
Code：https://github.com/metalbubble/TRN-pytorch
作者：Bolei Zhou, Alex Andonian, Antonio Torralba (CSAIL, MIT)

简述

时间关系推理（Temporal relational reasoning）是指理解物体／实体在时间域的变化关系的能力。受启发于Relation Network，本文提出了Temporal Relation Network（TRN），用于学习和推理视频帧之间的时间依赖关系。relational resaoning一直是近期研究的热点，从图1中我们可以看出对于视频来说时序关系是重要的。

方法

给定视频V，2帧之间的Temporal Relation $T_2(V)$可以表示成下式：

其中$f_i$和