-
题名基于特征解耦与融合的不完全多模态骨肿瘤图像分类
- 1
-
-
作者
曾青海
李传璞
阳维
宋丽文
赵英华
杨谊
-
机构
南方医科大学生物医学工程学院
广东省医学图像处理重点实验室
南方医科大学第三附属医院放射科
-
出处
《南方医科大学学报》
北大核心
2025年第6期1327-1335,共9页
-
基金
国家自然科学基金(82172020)。
-
文摘
目的 提出了一种基于特征解耦与融合的骨肿瘤分类模型,用于合理处理模态缺失并融合多模态信息,以提升分类准确率。方法 设计解耦补全模块,先提取包含已有模态的局部与全局信息的骨肿瘤图像特征,再将该特征分解为共享特征和特定特征。利用共享特征作为缺失模态特征的补全表示,从而减少因模态差异带来的补全偏差。考虑到模态差异可能会使多模态信息难以融合,采用基于交叉注意力机制的融合模块。提升模型学习跨模态信息的能力并对特定特征进行充分融合,从而提高骨肿瘤分类的准确性。结果 实验采用在南方医科大学第三附属医院收集的骨肿瘤数据集进行训练和测试。在7种可用模态组合中,本文方法中骨肿瘤分类的平均AUC、准确率、特异性分别为0.766、0.621、0.793,与现有的模态缺失处理方法相比分别提高了2.6%、3.5%、1.7%。全模态情况下骨肿瘤分类效果最佳,AUC为0.837;仅有MRI模态时AUC仍能达到0.826。结论 本文方法能合理地处理模态缺失并有效融合多模态信息,在多种复杂的缺失情境下表现出良好的骨肿瘤分类性能。
-
关键词
骨肿瘤分类
多模态图像
模态缺失
特征解耦
注意力融合
-
Keywords
bone tumor classification
multimodal imaging
modality missing
feature decoupling
attention fusion
-
分类号
TP391.41
[自动化与计算机技术—计算机应用技术]
-
-
题名骨健康的影像学评价
被引量:3
- 2
-
-
作者
程晓光
于爱红
余卫
李绍林
查云飞
-
机构
北京积水潭医院放射科
中国医学科学院北京协和医学院北京协和医院放射科
南方医科大学第三附属医院放射科
武汉大学人民医院放射科
-
出处
《中国医学影像技术》
CSCD
北大核心
2015年第10期1451-1453,共3页
-
文摘
骨骼是人体的重要器官,是人体运动系统的主要组成部分,具有支持身体、保护内脏、完成运动和参与代谢、造血等功能,因此骨骼的健康是维持身体功能的基本保障[1]。由于骨骼含大量的钙、密度高,皮质骨和松质骨结构不同,骨与周围软组织都具有良好的天然对比,故非常合适影像学检查。目前,各种影像学检查方法包括X线、CT、MR已广泛用于骨骼疾病的诊断和治疗,其对疾病的检查主要集中在确定有无病变及病变的形态、性质,治疗效果和手术前评估和术后随访方面。
-
关键词
骨质疏松
体层摄影术
X线计算机
-
Keywords
Osteoporosis
Tomography,X-ray computed
-
分类号
R576
[医药卫生—消化系统]
R445.1
[医药卫生—影像医学与核医学]
-