一种识别视频中的事件的方法及系统

本发明公开了一种识别视频中的事件的方法及系统。所述方法包括：基于神经网络获取视频中各帧的静态特征；基于空间注意力机制网络获取各静态特征对应的空间交互关系特征；基于时域注意力机制网络获取空间交互关系特征集对应的时空交互关系特征；基于时空交互关系特征构建时空交互关系图，并通过图卷积神经网络获得时空交互关系图的特征；基于时空交互关系特征和时空交互关系图的特征识别视频中的事件。本发明的方案，提高了识别视频中的事件的准确率和效率。
上海交通大学
杨华 | 赵洪田 | 林焕