基于跨模态特征融合的道路裂缝检测方法、装置和介质

本发明涉及一种基于跨模态特征融合的道路裂缝检测方法、装置和介质，方法包括以下步骤：获取道路裂缝数据的色彩特征和深度特征，融合色彩特征和深度特征得到色彩深度特征，将色彩特征、深度特征和色彩深度特征输入基于跨模态三流特征融合网络的检测网络中进行检测；其中，跨模态三流特征融合网络包括跨模态交互融合模块和全局交互模块，色彩特征提取模块和深度特征提取模块分别提取道路裂缝数据的色彩特征和深度特征，通过改进的跨模态交互融合模块将色彩特征、深度特征和色彩深度特征融合，形成综合特征，再通过全局交互模块进行拼接，得到拼接结果，检测网络基于拼接结果得到检测结果。与现有技术相比，本发明具有精度高、清晰度高等优点。
同济大学
杨烨 | 严宇 | 倪磊 | 孙立军