基于边框标注的弱监督视频目标分割方法及装置

本发明公开了一种基于边框标注的弱监督视频目标分割方法及装置，方法包括下述步骤：在图像分割数据集上训练基于PReMVOS模型的伪标注生成模型；使用伪标注生成模型对视频数据和边框标注逐帧生成对应的伪掩模标注；利用生成的伪掩模标注，使用“合作教学”算法训练视频目标分割模型。本方法使用低代价的边框标注训练视频目标分割模型，从而降低视频目标分割模型迁移到实际应用场景时对新数据进行标注的代价，降低视频目标分割模型的落地难度；通过使用“合作教学”的训练算法，可以更充分地利用现有的大量视频目标跟踪数据集来训练视频目标分割模型，增强视频目标分割模型的性能和泛化能力。
之江实验室 | 中山大学
胡建芳 | 林子杭 | 谭超镭 | 郑伟诗 | 王军