一种基于生成对抗网络的视频广告融入系统与方法

本发明提出了一种基于生成对抗网络的视频广告融入系统与方法，解决视频广告融入的逼真性与视觉连贯性。整个系统为多模块级联系统，其处理过程为：首先，将待视频按帧输入场景识别模块，并识别出场景的语义信息；接着，广告位置定位模块根据场景语义信息以及待融入的广告，计算出适合广告融入的位置，该过程会考虑过去N帧的定位结果，以保持连续性；随后，结构生成模块通过广告位置、场景与前N帧结构，生成最符合当前帧场景的广告结构；最后，内容填充模块通过结构以及前N帧内容，对广告轮廓进行像素级内容填充，生成高融合度的广告。本发明可用于视频后期自动融入广告，降低人工融入的成本。
上海大学
滕国伟 | 丁艳红