体育运动视频的目标追踪与语义分割方法及装置、插件

本发明公开了一种体育运动视频的目标追踪与语义分割方法及装置、插件，该方法包括：根据输入的视频帧和目标初始化位置信息提取特征图，获得特征图信息；根据特征图信息对目标进行定位，获得目标位置信息；对特征图信息及目标位置信息进行特征的融合，并且对非目标区域的背景信息进行过滤；根据融合特征及特征图信息进行解码操作，并最终形成目标的语义掩膜。该装置包括：骨干网络编码器、预测网络单元、特征融合网络单元以及解码器。该插件包括：视频信息组件、视频预览组件、视频播放组件、新建目标组件、追踪调整组件以及特效组件。通过本发明，能够在存在目标形变、旋转、遮挡等问题的体育视频中提升追踪精度。
上海交通大学
宋利 | 彭珅晖 | 解蓉