融入注意力机制的时间激励与聚集行为识别模型

视频行为识别通常使用短间隔运动特征和长间隔视频聚合特征进行时序建模。在特征提取过程中，这种时间序列建模方法对不同时间序列区间的动作特征一视同仁，忽略了关键通道信息和重要动作内容，无法达到理想的行为识别效果。注意机制可以在提取时间激励和聚集行为特征的基础上，聚焦于目标区间，整合通道空间注意模块。该模型分别通过通道和空间模块改变连续动作的特征分布。渠道注意的关键渠道信息是哪些，空间注意机制关注哪里中的重要视频内容，突出关键渠道信息和重要内容的特点，提高行为识别的识别率。同时，UCF101和HMDB51在数据集something something中对该模型进行了实验，结合通道空间注意模块的时间激励和聚集行为识别模型可以有效提高行为识别率。