一种全景视频处理方法、装置、电子设备及存储介质

本申请公开了一种全景视频处理方法、装置、电子设备及存储介质，该方法包括：获取待处理全景视频的全景视频帧序列和全景音频片段序列；对全景视频帧依序进行特征提取操作，该特征提取操作包括：对当前全景视频帧进行视觉特征提取，将视频特征提取结果与历史视觉状态进行融合得到当前全景视频帧的时空视觉特征，基于该时空视觉特征更新历史视觉状态；对各全景音频片段分别进行听觉特征提取得到对应的听觉特征；将各全景视频帧的时空视觉特征与相应听觉特征进行融合处理，得到对应的融合视听特征；基于每个全景视频帧的融合视听特征分别进行显著性预测得到对应的显著性分布图。本申请降低了显著性预测的计算资源消耗和时间开销，提高了预测准确性。
腾讯科技(深圳)有限公司 | 上海交通大学
闵雄阔 | 朱雨欣 | 翟广涛