基于轻量化双帧速率网络异常行为识别方法、装置和系统

本发明提供一种基于轻量化双帧速率网络的异常行为识别方法、装置和系统，包括：原始视频数据输入轻量化双帧速率卷积神经网络；轻量化双帧速率卷积神经网络的低帧率分支网络捕获原始视频数据的空间语义信息；轻量化双帧速率卷积神经网络的高帧率分支网络捕获原始视频数据的运动信息；使用横向连接将低帧率分支网络和高帧率分支网络的各个阶段进行特征融合；低帧率分支网络和高帧率分支网络各自输出的特征向量进行合并，获得合并特征；将合并特征输入分类器，得到异常行为识别分类结果。本发明两分支网络采用轻量化网络作为基础网络，在保持低帧率分支网络提取空间语义的能力以及高帧率分支网络提取时间语义信息的同时，大大提高了检测效率。