-
题名基于特征增强和语义相关性匹配的图像文本检索方法
被引量：4
- 1
-
-
作者
陈佳
张鸿
-
机构
武汉科技大学计算机科学与技术学院
智能信息处理与实时工业系统湖北省重点实验室(武汉科技大学)
-
出处
《计算机应用》
CSCD
北大核心
2024年第1期16-23,共8页
-
基金
国家重点研发计划项目(2020AAA0108503)
-
文摘
为实现图像文本检索中图像与文本的精确语义连接,提出一种基于特征增强和语义相关性匹配(FESCM)的图像文本检索方法。首先,通过特征增强表示模块,引入多头自注意力机制增强图像区域特征和文本单词特征,以减少冗余信息对图像区域和文本单词对齐的干扰;其次,通过语义相关性匹配模块,不仅利用局部匹配捕获局部显著对象之间的对应相关性,还把图像背景信息融入图像全局特征,利用全局匹配实现精确的全局语义相关性;最后,通过局部匹配分数和全局匹配分数获取图像和文本的最终匹配分数。实验结果表明,基于FESCM的图像文本检索方法在Flickr8k和Flickr30k基准数据集上的召回率总值比扩展的视觉语义嵌入方法分别提升了5.7和7.5个百分点,在MS-COCO数据集比双流层次相似度推理方法提升了3.7个百分点。因此该方法可以有效提高图像文本检索的准确度,实现图像与文本的语义连接。
-
关键词
图像文本检索
特征增强表示
多头自注意力机制
语义相关性匹配
-
Keywords
image text retrieval
feature enhancement representation
multi-head self-attention mechanism
semantic correlation matching
-
分类号
TP391.3
[自动化与计算机技术—计算机应用技术]
-
-
题名基于文本与语义相关性分析的图像检索
被引量：3
- 2
-
-
作者
穆亚昆
冯圣威
张静
-
机构
华东理工大学信息科学与工程学院
-
出处
《计算机工程与应用》
CSCD
北大核心
2019年第1期196-202,共7页
-
基金
国家自然科学基金(No.61402174)
-
文摘
为了更加有效地检索到符合用户复杂语义需求的图像,提出一种基于文本描述与语义相关性分析的图像检索算法。该方法将图像检索分为两步:基于文本语义相关性分析的图像检索和基于SIFT特征的相似图像扩展检索。根据自然语言处理技术分析得到用户文本需求中的关键词及其语义关联,在选定图像库中通过语义相关性分析得到"种子"图像;接下来在图像扩展检索中,采用基于SIFT特征的相似图像检索,利用之前得到的"种子"图像作为查询条件,在网络图像库中进行扩展检索,并在结果集上根据两次检索的图像相似度进行排序输出,最终得到更加丰富有效的图像检索结果。为了证明算法的有效性,在标准数据集Corel5K和网络数据集Deriantart8K上完成了多组实验,实验结果证明该方法能够得到较为精确地符合用户语义要求的图像检索结果,并且通过扩展算法可以得到更加丰富的检索结果。
-
关键词
图像检索
基于文本语义相关性的图像检索
语义相关度
SIFT低层视觉特征
图像扩展检索
-
Keywords
image retrieval
image retrieval based on semantic correlation of text
semantic relevance
low-rise visual features of SIFT
image extension retrieval
-
分类号
TP391.42
[自动化与计算机技术—计算机应用技术]
-
-
题名一种基于稀疏典型性相关分析的图像检索方法
被引量：23
- 3
-
-
作者
庄凌
庄越挺
吴江琴
叶振超
吴飞
-
机构
浙江大学计算机科学与技术学院
-
出处
《软件学报》
EI
CSCD
北大核心
2012年第5期1295-1304,共10页
-
基金
国家自然科学基金(90920303
61070068)
中央高校基本科研业务费专项资金(KYJD09015)
-
文摘
图像语义检索的一个关键问题就是要找到图像底层特征与语义之间的关联,由于文本是表达语义的一种有效手段,因此提出通过研究文本与图像两种模态之间关系来构建反映两者间潜在语义关联的有效模型的思路.基于该模型,可使用自然语言形式(文本语句)来表达检索意图,最终检索到相关图像.该模型基于稀疏典型性相关分析(sparse canonical correlation analysis,简称sparse CCA),按照如下步骤训练得到:首先利用隐语义分析方法构造文本语义空间,然后以视觉词袋(bag of visual words)来表达文本所对应的图像,最后通过Sparse CCA算法找到一个语义相关空间,以实现文本语义与图像视觉单词间的映射.使用稀疏的相关性分析方法可以提高模型可解释性和保证检索结果稳定性.实验结果验证了Sparse CCA方法的有效性,同时也证实了所提出的图像语义检索方法的可行性.
-
关键词
图像检索
文本
语义
稀疏典型性相关分析
视觉单词
-
Keywords
image retrieval
text
semantics
sparse canonical correlation analysis
visual word
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
-
题名基于引文相关性排序的科技论文检索方法
被引量：3
- 4
-
-
作者
尹盼盼
崔荣一
-
机构
延边大学计算机科学与技术学科智能信息处理研究室
-
出处
《计算机工程与设计》
CSCD
北大核心
2011年第12期4223-4226,4250,共5页
-
基金
国家自然科学基金项目(69362001)
-
文摘
为了实现学术主题相关的科技论文检索,提出了一种基于引文相关性排序的科技论文检索方法。自动抽取科技论文的结构信息,获得论文的标题、摘要、关键词和引文;根据引文与标题的相关性,评价引文的重要性,用引文的评价得分修正引文向量特征项的权重,构造引文的词项-文档关联矩阵,并利用奇异值分解方法构造引文的潜在语义空间,计算查询论文与文档库中论文的引文语义相关性;采用信息增益方法确定了引文相关性阈值,将引文相关性超过阈值的科技论文作为检索结果返回。实验结果表明,提出的检索方法的准确率、召回率、综合性能均高于基于概括性信息(标题、摘要、关键词)的检索方法。
-
关键词
潜在语义索引
引文相关性
奇异值分解
信息增益
文本检索
-
Keywords
latent semantic indexing
citation relevance
SVD
information gain
text retrieval
-
分类号
TP391.3
[自动化与计算机技术—计算机应用技术]
-
-
题名CBIR中基于最佳路径森林的学习方法
- 5
-
-
作者
魏怀明
-
机构
山西建筑职业技术学院计算机工程系
天津大学计算机科学与技术学院
-
出处
《计算机工程与设计》
北大核心
2017年第9期2482-2488,共7页
-
基金
国家自然科学基金面上基金项目(61373035)
-
文摘
针对高级用户描述的对象与低级图像特征之间的语义差异问题,提出一种基于最佳路径森林的学习方法。使用Gabor小波和鲁棒局部二值模式对查询图像以及待查询数据库图像进行特征提取,获得直方图特征向量;通过最佳路径森林获得图像的相关性反馈,生成标记数据集;通过相似距离度量获知用户的偏好,得到满意结果。实验在Corel数据库和Brodatz数据库上进行,在无噪声的理想情况下,对某些类别的图像,该算法的检索精度高达98%;有噪声情况下,随着噪声的增加,其性能衰减最慢。在Brodatz数据库中,该方法平均检索率只减少了10%左右,在Corel数据库中,较大噪声情况下,其精度比其它方法高出8%左右。
-
关键词
基于内容图像检索
最佳路径森林分类
语义鸿沟
直方图特征向量
相关性反馈
-
Keywords
content based image retrieval
optimum-path forest
semantic gap
histogram feature vector
relevance feedback
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
-
题名计算机科学2010年第37卷总目次
- 6
-
-
-
出处
《计算机科学》
CSCD
北大核心
2010年第12期292-300,F0003,共10页
-
-
关键词
语义分析
算法研究
文本聚类算法
人脸识别
无线传感器网络
红外图像
描述逻辑
服务组合
认证协议
计算机科学
图像分割
蚁群优化算法
支持向量机
相似性检测
入侵检测
图像检索
本体相似度
区分服务
边缘检测算法
目次
2010
-
分类号
TP
[自动化与计算机技术]
-
