基于人体局部语义知识的行为图像分类方法

一种基于人体局部行为语义知识的图像分类方法，通过建立用于获得人体局部细粒度语义表征的人体部位行为状态识别模型并进行模型训练；然后利用自然语言理解将待测图像中的视觉信息转化为基于语言的先验知识，并将先验知识与视觉信息融合生成细粒度行为表征向量并迁移到计算机视觉行为和识别任务中；最后通过组合人体局部细粒度特征推理整体行为以完成行为理解过程得到分类结果。本发明在多种复杂行为理解任务中取得非常理想的识别性能提升；同时，该方法具有一次预训练，多次多样迁移的优势，兼具泛化性和灵活性。