同济大学附属同济医院与科大讯飞联合,研发了一套“精细化多维度帕金森病人工智能评估系统”。该系统包含多视角RGB摄像机、深度摄像机、激光雷达以及麦克风等多模态硬件,录制程序、数据库和系统设置三部分软件。通过录制帕金森病患者面部表情、声音、步态、姿势、手指拍打、握拳张开、轮替动作、脚趾拍地、抬腿跺地、椅中起立、后拉试验、静止性/动作性震颤等动作,可自动识别视频中身体部位的关键节点,定量分析动作指标,对动作进行“量化”和“精细化”分析,实时获取各检测项的精确定量动作特征数据和运动曲线。同时,经过基于决策树的机器学习方法,该系统可实现对各检测项异常程度的自动评分以及帕金森病整体严重程度的自动评分。利用人工智能算法得到的自动化评分已经接近于医生的评分水平,在多个检测项中甚至超越了医生的评分水平该系统建立了帕金森病运动症状的精细评估方法与体系,为医生提供了运动量化数据以辅助诊断;通过量化数据的对比实现了帕金森病的准确分级,对患者病情进行评估和持续跟踪,为帕金森病的临床诊断及干预提供依据;该系统也可辅助医生进行科学研究,促进医学发展。
同济大学
靳令经
