基于计算机视觉的挖掘机与人碰撞事故预警方法及系统

本发明涉及一种基于计算机视觉的挖掘机与人碰撞事故预警方法及系统。本发明首先通过目标检测、2D关键点检测、3D姿势识别等计算机视觉算法，对施工现场视频流进行工人和挖掘机的3D骨架识别；其次，基于挖掘机3D骨架在工作状态下的3D运动姿态，划定出挖掘机工作状态下周围的3D动态危险区域；最后，对工人的3D骨架关键点是否入侵了挖掘机工作状态下周围的3D动态危险区域进行判断，作为是否有挖掘机与人碰撞危险的依据，如有危险则发出预警。与现有技术相比，本发明通过计算机视觉技术构建了挖掘机工作状态下周围的3D动态危险区域，提升了挖掘机与人碰撞事故自动预警的精确性和有效性，最大程度避免了误判的发生，有利于施工现场的智能化安全管理。
上海交通大学
徐峰 | 田泽卉 | 张志鹏 | 胡昊 | 陶钰 | 黄鹤 | 馬文迪 | 刘啸宇 | 梅心语 | 戴磊 | 胡喆