一种多模态信息指导的医学图像分割系统及图像处理方法

专利信息

专利权人:山东大学

第一发明人:李玉军

专利号:ZL202111524363.1

授权日:2024-4-23

专利类型:发明

国别:中国

专利简介

专利权人 山东大学 第一发明人 李玉军
专利号 ZL202111524363.1 授权日 2024-4-23
专利类型 发明 国别 中国
所属领域 开放许可开始日期
开放许可截止日期 单次许可期限
许可费支付方式
本公开提出了一种多模态信息指导的医学图像分割系统及图像处理方法,基于文本信息的指导进而更新视觉图像特征表示,然后通过门控融合模块将多模态特征进行融合,建立了文本和图像这两种模态信息之间的联系,使用文本指导图像分割,两种模态信息相互作用,而不是简单的将文本信息和图像信息融合,较高层的特征为底层特征提供全局和语义指导,底层特征为较高层的特征提供局部和更精细的信息,使用文本指导图像分割,两种模态信息相互作用,提高了图像分割的准确性。