基于医疗思维链的多模态医疗影像报告生成方法及系统

本发明涉及一种基于医疗思维链的多模态医疗影像报告生成方法及系统，其中方法包括以下步骤：获取现有的原始无序非结构化医学影像报告数据集；对数据集中的影像报告进行预处理，得到高质量数据集；基于大语言模型对高质量数据集中的医疗影像报告进行处理，抽取层次化医学属性问答对；将层次化医学数学问答对串联重构为链式推理问答对；利用链式推理问答对数据对对现有的医学影像报告生成模型进行微调，利用微调后的医学影像报告生成模型生成医疗影像报告。与现有技术相比，本发明具有显式的加强了多模态特征的利用率和意图理解的识别能力，提高了推理能力的泛化性、可靠性和准确性，生成的医疗影像报告可靠性更高等优点。
复旦大学
张立华 | 蒋越 | 陈嘉伟 | 李明程 | 魏金杰 | 许庆尧 | 韩菁杭