Detecting and Recognizing Human-Object Interactions

出发点:过去只是做物体检测,但是并没有做物体关系之间的联系,大牛们开始做联系了,他们觉得以人为中心的交互尤为重要

要解决的问题:

在以后人体检测和物体检测的基础上①判断什么物体是与人有关的②如何根据人体所在区域/人物所在区域判断action

Detecting and Recognizing Human-Object Interactions

(a)分支为faster  RCNN,检测图像中的人(Sh)和物(So),

(b)分支为根据人体所在区域的特征图预测行为及与人相关的物体

(c)分支为根据人体和物体区域的特征图判断action

行为分类器就是过一个sigmoid函数,判断是否属于该类别