本发明涉及一种基于深度学习的举手检测方法,包括以下步骤:1)收集样本,所述样本为复杂环境样本;2)建立举手检测模型,该举手检测模型基于卷积神经网络结构,并基于所述样本以R‑FCN目标检测算法进行训练;3)利用训练后的举手检测模型对待测视频进行举手检测,获得举手框位置。与现有技术相比,本发明具有能够检测复杂环境中的举手动作、准确率检全率高等优点。