期刊文献+
共找到417篇文章
< 1 2 21 >
每页显示 20 50 100
双模态Logistic Regression及其应用 被引量:1
1
作者 吴蕊 孔前进 +2 位作者 王世勋 孙东山 翟怡星 《计算机应用与软件》 北大核心 2020年第12期244-248,333,共6页
传统的Logistic Regression能够解决单一模态数据的二分类问题,但在处理多源异构数据时不能很好地利用不同模态间的语义相关性,从而降低了分类性能。为了对双模态数据进行建模,提出同时包含模态内语义信息和模态间语义相关性的双模态Log... 传统的Logistic Regression能够解决单一模态数据的二分类问题,但在处理多源异构数据时不能很好地利用不同模态间的语义相关性,从而降低了分类性能。为了对双模态数据进行建模,提出同时包含模态内语义信息和模态间语义相关性的双模态Logistic Regression模型。设计一个包含模态内损耗与模态间损耗的目标函数,利用梯度下降法优化目标函数,在每次迭代过程中该模型能够根据一定策略交替地更新不同模态的参数。实验结果表明,双模态Logistic Regression能够获得较好的分类性能和跨模态检索效果。 展开更多
关键词 双模态logistic Regression 梯度下降法 模态内损耗 模态间损耗 模态检索
在线阅读 下载PDF
基于双模态交叉注意力机制的智能合约漏洞检测方法 被引量:1
2
作者 陈锦富 胡心怡 +1 位作者 蔡赛华 闵玺润 《通信学报》 北大核心 2025年第6期218-232,共15页
针对智能合约漏洞检测中现有深度学习方法依赖单一模态进行特征提取、对上下文信息捕获不足导致检测准确率较低的问题,提出了一种基于双模态交叉注意力机制的智能合约漏洞检测方法,设计了特定的注意力机制,同时分析合约的源代码和字节码... 针对智能合约漏洞检测中现有深度学习方法依赖单一模态进行特征提取、对上下文信息捕获不足导致检测准确率较低的问题,提出了一种基于双模态交叉注意力机制的智能合约漏洞检测方法,设计了特定的注意力机制,同时分析合约的源代码和字节码,实现源代码中的高级语义特征与字节码中的底层执行流程双向映射和互补增强,丰富特征表示。引入的残差连接有效地保持和传递原始特征信息,缓解深层网络训练中的梯度消失问题。在公开数据集上进行广泛测试,实验结果表明,所提方法相较基线提高了检测准确率2%以上;消融实验结果显示,跨模态特征融合和注意力机制的设计相互协同,显著提升检测性能。 展开更多
关键词 智能合约 漏洞检测 深度学习 模态 交叉注意力
在线阅读 下载PDF
基于U^(2)-Net和CBAM融合注意力的双模态睡眠分期研究 被引量:1
3
作者 赵倩 李锦 +2 位作者 凤飞龙 强宁 胡静 《陕西师范大学学报(自然科学版)》 北大核心 2025年第1期1-11,共11页
针对当前自动睡眠分期方法存在的难点问题,提出了一种结合U^(2)-Net和CBAM融合注意力对EEG-ECG双模态信号进行自动睡眠分期的方法。首先,采用MIT-BIH公开数据集中的EEG-ECG信号进行预处理;然后,利用添加了多尺度特征提取模块的U^(2)-Ne... 针对当前自动睡眠分期方法存在的难点问题,提出了一种结合U^(2)-Net和CBAM融合注意力对EEG-ECG双模态信号进行自动睡眠分期的方法。首先,采用MIT-BIH公开数据集中的EEG-ECG信号进行预处理;然后,利用添加了多尺度特征提取模块的U^(2)-Net网络并行提取EEG和ECG中的波形特征;其次,利用CBAM融合注意力对全部特征进行权重分配;最后,使用Softmax激活函数对睡眠时期进行六分类。结果表明:基于U^(2)-Net和CBAM融合注意力模型进行睡眠分期时,使用ECG单模态信号的六分类总体准确率为80.2%,F1分数为75.3%;使用EEG单模态信号的六分类总体准确率为85.8%,F1分数为81.7%;使用EEG-ECG双模态信号的六分类总体准确率为90.4%,F1分数为85.6%。提出的双模态睡眠分期模型是可行有效的,并且为自动睡眠分期提供了一种新的思路。 展开更多
关键词 自动睡眠分期 EEG-ECG模态信号 U^(2)-Net网络 CBAM融合注意力
在线阅读 下载PDF
联合双粒度图像信息的多模态方面级情感分析
4
作者 许威 张晓琳 +1 位作者 张换香 张景 《计算机科学与探索》 北大核心 2025年第9期2479-2492,共14页
多模态方面级情感分析(MABSA)作为一种细粒度情感分析技术,旨在通过整合多种模态的特征数据来提高该领域的精度和效果。现有的多模态方面级情感分析的研究大多集中在文本和图像模态间的跨模态对齐上,忽略了图像的粗细粒度特征信息对MABS... 多模态方面级情感分析(MABSA)作为一种细粒度情感分析技术,旨在通过整合多种模态的特征数据来提高该领域的精度和效果。现有的多模态方面级情感分析的研究大多集中在文本和图像模态间的跨模态对齐上,忽略了图像的粗细粒度特征信息对MABSA子任务的潜在贡献。为此,提出一种联合双粒度图像信息的多模态方面级情感分析方法(CDGI)。在多模态方面词提取任务中,为增强图像与文本模态的交互,利用ClipCap获取图像的粗粒度特征描述文本,作为图像提示信息,辅助模型预测文本中的方面词及其属性。在多模态方面词情感分类中,为了捕获丰富的图像细粒度情感特征,通过跨模态注意力机制,将带有原始情感语义的图像底层特征与掩码后的文本经过多层深度交互,强化图像特征到文本特征的融合。在两个公共的Twitter数据集和Restaurant+数据集上的实验结果表明,CDGI的表现优于当前的基线模型,验证了图像粗细粒度特征对MABSA子任务不同贡献度的合理性。 展开更多
关键词 模态方面级情感分析 粒度图像信息 模态交互 模态融合 模态注意力
在线阅读 下载PDF
涡轴-涡扇变循环发动机双模态排气系统红外辐射特性研究
5
作者 董昊翔 单勇 +1 位作者 孙文静 张靖周 《南京航空航天大学学报(自然科学版)》 北大核心 2025年第4期693-701,共9页
涡轴-涡扇变循环发动机是一种新概念动力装置,其排气系统在结构上要适应模态的转换,同时要具备红外隐身能力。本文提出了一种模态可变的二元排气系统,展示了涡轴和涡扇状态下的结构特征,采用引射、中心锥气膜冷却、波瓣遮挡以及强化混... 涡轴-涡扇变循环发动机是一种新概念动力装置,其排气系统在结构上要适应模态的转换,同时要具备红外隐身能力。本文提出了一种模态可变的二元排气系统,展示了涡轴和涡扇状态下的结构特征,采用引射、中心锥气膜冷却、波瓣遮挡以及强化混合等技术手段对双模态排气系统的红外辐射特性开展数值研究。比较分析了涡扇模态下二元喷管出口宽高比和波瓣混合器扩张角、涡轴模态下旁路活门开启角度等参数对排气系统红外辐射特性的影响。涡扇模态下采用的综合抑制措施,可将尾向红外抑制性能提高60%以上;喷管出口宽高比从2增至4,尾向红外抑制效果能够进一步提升8%,但在更大的探测角度红外辐射略有增强;波瓣内扩张角的增大可以提升红外抑制性能,而波瓣外扩张角的增大对隐身不利;涡轴模态下旁路活门开启角度对红外辐射特性的影响复杂,存在最佳开启角度30°,此时的引射系数最高,红外抑制效果也最好。数值仿真证实了本文提出的双模态排气系统既具备功能性,又具备红外抑制的能力。 展开更多
关键词 变循环发动机 模态排气系统 模态转换 气膜冷却 红外辐射特性
在线阅读 下载PDF
基于语音和文本的双模态情感识别综述 被引量:2
6
作者 韩令敏 陈仙红 熊文梦 《计算机应用》 北大核心 2025年第4期1025-1034,共10页
情感识别是一种让计算机识别和理解人类情感的技术,在众多领域都起着重要的作用,也是人工智能领域重要的发展方向。因此,梳理与归纳基于语音和文本的双模态情感识别的研究现状:首先,分类阐述情感表示空间;其次,按照情感数据库的情感表... 情感识别是一种让计算机识别和理解人类情感的技术,在众多领域都起着重要的作用,也是人工智能领域重要的发展方向。因此,梳理与归纳基于语音和文本的双模态情感识别的研究现状:首先,分类阐述情感表示空间;其次,按照情感数据库的情感表示空间对这些数据库进行分类,并总结常见的多模态情感数据库;再次,介绍基于语音和文本的双模态情感识别方法,包括特征提取、模态融合和决策分类,重点介绍模态融合方法并将这些方法分为特征级融合、决策级融合、模型级融合和多层次融合这4类;此外,比较和分析一系列语音和文本双模态情感识别方法的结果;最后,介绍情感识别的应用场景、面临的挑战与未来的发展方向。以上旨在对多模态情感识别,尤其是对基于语音和文本的双模态情感识别的相关工作进行分析与总结,并为情感识别提供有价值的参考。 展开更多
关键词 情感识别 模态 模态融合 语音 文本
在线阅读 下载PDF
基于无定形WO_(3)薄膜的四模态双波段电致变色性质
7
作者 有心 郝绚兮 +3 位作者 刘彬 李盼 吕营 刘星元 《发光学报》 北大核心 2025年第8期1507-1516,共10页
WO_(3)是一种优异的双波段电致变色材料,可在电压作用下实现对可见光和近红外光的选择性调控。但受离子嵌入深度和极化子跃迁机制的影响,通常仅能实现“亮冷暗”三种光学调控模式。本文制备的无定形WO_(3)薄膜通过调控退火温度及驱动电... WO_(3)是一种优异的双波段电致变色材料,可在电压作用下实现对可见光和近红外光的选择性调控。但受离子嵌入深度和极化子跃迁机制的影响,通常仅能实现“亮冷暗”三种光学调控模式。本文制备的无定形WO_(3)薄膜通过调控退火温度及驱动电压,成功实现“亮、暗、冷、暖”四种光学调控模式。在可见和近红外波段的最大光学对比度为77.4%和82.2%,平均响应时间为11.7 s。XPS及原位光谱分析显示,W^(3+)及金属W的局域态形成是“暖”模式产生的关键机制,但深层离子捕获效应和过大电位超出材料的稳定范围,导致该模式性能不佳。本研究突破传统双波段器件的多模态调控瓶颈,揭示极化子-离子协同作用机制,为开发高可逆性四模态器件提供了理论指导,并对建筑节能等应用具有重要参考价值。 展开更多
关键词 无定形 波段 模态
在线阅读 下载PDF
基于高分辨率神经网络的双护盾TBM隧道双模态围岩精准分级
8
作者 龙海涛 张世殊 +3 位作者 马春驰 李天斌 刘庄源 刘洋 《隧道建设(中英文)》 北大核心 2025年第S1期168-181,共14页
为实现更精确、更实时的智能围岩分级以匹配双护盾TBM高效掘进,基于先进的HRNet高分辨率神经网络,通过分析地质与掘进参数2类指标的强关联性,构建基于该2类指标融合的高分辨率TBM隧道双模态围岩精准智能分级模型,开展实时的围岩分级工... 为实现更精确、更实时的智能围岩分级以匹配双护盾TBM高效掘进,基于先进的HRNet高分辨率神经网络,通过分析地质与掘进参数2类指标的强关联性,构建基于该2类指标融合的高分辨率TBM隧道双模态围岩精准智能分级模型,开展实时的围岩分级工作。结果表明:1)推进速度与刀盘转矩2个参数与围岩坚硬度有较强的关联性,通过这2个掘进参数二维组合的线性趋势以及拐点区间可以区分不同的岩石坚硬程度;2)刀盘滚动角和撑靴俯仰角2个参数与岩体完整性有较强的关联性,通过这2个掘进参数的摆动幅度和角度可区分不同的岩体完整性;3)通过将2个模态单一的HRNet高分辨率神经网络进行拼接和全连接,构建的双模态围岩分级模型能够实现离散型数值的地质模态数据与连续型数值的掘进模态数据融合,该模型能够从围岩稳定性与岩机交互等多方面更加精确地反映围岩分级,应用准确率可达95.0%;4)相比仅用掘进指标的单模态模型,双模态模型在测试集上表现效果更好,其Macro F1 Score为0.985。 展开更多
关键词 护盾TBM 高分辨率神经网络 智能围岩分级 模态
在线阅读 下载PDF
SAM-Retina:基于SAM的双模态视网膜图像动静脉分割
9
作者 许恒宇 陈坤 +2 位作者 徐琳 孙明斋 陆洲 《计算机科学》 北大核心 2025年第10期123-133,共11页
动脉与静脉在RGB视网膜成像中形态高度相似,且其本身结构兼具细微性和复杂性,导致现阶段多数视网膜图像处理所使用的动静脉分割模型难以取得理想效果。为提高动静脉分割的准确性,同时降低训练成本,提出了一种基于SAM(Segment Anything M... 动脉与静脉在RGB视网膜成像中形态高度相似,且其本身结构兼具细微性和复杂性,导致现阶段多数视网膜图像处理所使用的动静脉分割模型难以取得理想效果。为提高动静脉分割的准确性,同时降低训练成本,提出了一种基于SAM(Segment Anything Model)的视网膜分割模型——SAM-Retina。SAM-Retina采用特征融合器-适配型图像编码器-掩码解码器架构,使用同时包含RGB图像以及570 nm和610 nm单波长图像的结构-功能双模态视网膜图像代替原有的单模态(RGB)图像作为输入,利用特征融合器融合这3种图像的特征;通过在视觉转换器中插入Adapter模块并对其加以更新,保留图像编码器在大规模自然图像数据集上的预训练参数;使用静态提示嵌入代替提示编码器,去除原有SAM分割流程中的提示输入过程和提示编码过程。实验阶段将模型在DualModal2019和HRF数据集上进行训练和评估,并与U-Net,CRU-Net和TW-GAN进行对比。结果表明,相较于对比模型,SAM-Retina在各项评估指标上效果更好,尤其是双模态图像的引入,使得在无需扩大模型规模的前提下,有效提升了分割性能。 展开更多
关键词 模态视网膜图像 动静脉分割 图像编码器 视觉转换器 静态提示嵌入
在线阅读 下载PDF
基于域对抗神经网络的双模态燃烧室跨构型燃烧模态识别
10
作者 宋婷 刘和东 +2 位作者 黄玥 陈玉乾 尤延铖 《推进技术》 北大核心 2025年第2期129-144,共16页
双模态冲压发动机燃烧室在宽马赫飞行过程中会呈现不同燃烧模态来保持稳定工作,燃烧模态的准确识别对燃烧室乃至发动机的控制和稳定运行具有重要意义。基于域对抗网络的领域适应策略,提出了一种针对不同构型双模态燃烧室的燃烧模态识别... 双模态冲压发动机燃烧室在宽马赫飞行过程中会呈现不同燃烧模态来保持稳定工作,燃烧模态的准确识别对燃烧室乃至发动机的控制和稳定运行具有重要意义。基于域对抗网络的领域适应策略,提出了一种针对不同构型双模态燃烧室的燃烧模态识别方法。首次将域适应的解决思路应用于燃烧及流体的问题中,以提高双模态燃烧室跨域数据集模态识别模型的泛化性能。通过数值模拟得到三种构型燃烧室的数据集,利用原始构型数据集训练模型,对上凹腔扩张构型和下凹腔扩张构型的数据集验证其泛化性能,并将获得的识别准确率与其他识别方法(包括支持向量机、K近邻、决策树)进行对比分析。研究结果表明:对亚燃模态和超燃模态进行识别,在上凹腔扩张构型和下凹腔扩张构型的密度梯度分布图的验证中分别取得了93.5%和96.3%的准确率,在温度分布图的验证准确率为91.8%和97.1%。本文的方法可以获得更易于识别燃烧模态的图像信息,以获得更高的跨领域数据识别准确率和更好的泛化性能,为发展适用于不同构型双模态燃烧室的燃烧模态识别方法提供了有力支撑。 展开更多
关键词 模态燃烧室 燃烧模态识别 域自适应 对抗学习 神经网络
在线阅读 下载PDF
基于共价有机框架的荧光/智能手机双模态检测呋喃西林
11
作者 余兰 胡蓉 《材料导报》 北大核心 2025年第S1期674-678,共5页
抗生素是水体污染的主要来源之一,对人类健康和环境构成严重危害,因此对其进行监测和检测具有极其重要的意义。本工作首次通过单体4,4′,4″-(1,3,5-三嗪-2,4,6-三基)三苯胺(TTA)和苝-3,4,9,10-四羧酸二酐(PTCA)的缩合反应合成了共价有... 抗生素是水体污染的主要来源之一,对人类健康和环境构成严重危害,因此对其进行监测和检测具有极其重要的意义。本工作首次通过单体4,4′,4″-(1,3,5-三嗪-2,4,6-三基)三苯胺(TTA)和苝-3,4,9,10-四羧酸二酐(PTCA)的缩合反应合成了共价有机框架(COF),并成功构建了基于COF的荧光/智能手机双模态即时检测(POCT)平台,其对呋喃西林的检测限为0.4μmol/L。同时,该传感器在实际血清检测中也表现出可靠的性能,回收率较高。本工作提出了一种增强COF发光性能的新方法,为其环境监测应用提供了参考。 展开更多
关键词 共价有机框架 呋喃西林 模态检测 即时检测
在线阅读 下载PDF
用于生理信息感知的双模态柔性传感器的设计与制备
12
作者 秦铭泽 李阳 蔺庆辉 《济南大学学报(自然科学版)》 北大核心 2025年第3期404-410,425,共8页
为了解决传统的柔性传感器难以同时捕获双模态生理信号,无法实现双模态生理信息监测问题,设计并制备一种双模态柔性传感器,通过改变控制变量的方式分别研究传感器的压力和温度响应特性。结果表明:所制备的传感器不仅具有较低的压力响应... 为了解决传统的柔性传感器难以同时捕获双模态生理信号,无法实现双模态生理信息监测问题,设计并制备一种双模态柔性传感器,通过改变控制变量的方式分别研究传感器的压力和温度响应特性。结果表明:所制备的传感器不仅具有较低的压力响应下限,较短的响应、恢复时间以及良好的弯曲与按压耐久特性,而且具有较高的温度灵敏度、较短的响应时间和较宽的温度检测范围;将所制备的双模态柔性传感器贴附于人体手腕处,可实现体温和脉搏的双模态生理信号的感知。 展开更多
关键词 柔性传感器 模态感知 生理信息监测 集成系统
在线阅读 下载PDF
登陆广东热带气旋的年际双模态特征及其与海表温度的非对称关系
13
作者 屈静玄 谷德军 彭冬冬 《热带气象学报》 北大核心 2025年第4期485-494,共10页
基于1968—2022年后汛期登陆广东热带气旋(TC)频数、再分析资料和海温数据,采用小波分析、合成分析等方法,探讨了登陆广东TC频次的年际变化特征,重点揭示了其年际变率中存在的双模态特征及其与海表温度的非对称关系。(1)登陆广东TC频数... 基于1968—2022年后汛期登陆广东热带气旋(TC)频数、再分析资料和海温数据,采用小波分析、合成分析等方法,探讨了登陆广东TC频次的年际变化特征,重点揭示了其年际变率中存在的双模态特征及其与海表温度的非对称关系。(1)登陆广东TC频数存在显著的准3年和准8年双模态周期振荡,两者变化幅度相当。(2)不同模态下,影响TC登陆的大气环流配置存在显著差异。在两个模态的登陆广东TC频数异常偏多年,西太平洋副热带高压(简称“副高”)皆表现为偏西偏强,有利于TC登陆广东。而在TC频数异常偏少年,两种模态对应的副高形势明显不同:准3年模态下的副高偏弱偏东,易导致TC过早北上;准8年尺度上副高偏西偏强,但其南侧的显著异常东风引导TC西行。(3)登陆广东热带气旋频数与海表温度的关系呈非对称性。在准3年时间尺度上,登陆广东TC频数偏多年冬季SST主要显著正距平出现在赤道东太平洋和热带北印度洋至南海。在准8年时间尺度上,登陆广东TC频数偏多年冬季SST主要显著正距平出现在赤道中太平洋;而频数偏少年冬季热带印度洋SST整体异常偏高。从冬季厄尔尼诺事件向夏季拉尼娜事件转换的年份,登陆广东TC频数偏多。本研究有助于加深对登陆广东TC变化特征的认识,其与海表温度关系的非对称性对做好登陆广东热带气旋频数的短期气候预测有一定指导意义。 展开更多
关键词 热带气旋 副热带高压 年际模态特征 非对称关系
在线阅读 下载PDF
基于多模态特征融合的并行双通道轴承故障诊断 被引量:1
14
作者 曹月 王衍学 +1 位作者 姚家驰 王祎颜 《机床与液压》 北大核心 2025年第13期71-76,共6页
针对单一通道解释数据存在不全面性、难以达到较高的诊断准确率且在实际生产中旋转机械轴承故障信号微弱易被噪声淹没的问题,提出一种利用图像和时序信号分别进行特征提取、融合分类的并行双通道电机轴承故障分类方法。采用格拉姆角场... 针对单一通道解释数据存在不全面性、难以达到较高的诊断准确率且在实际生产中旋转机械轴承故障信号微弱易被噪声淹没的问题,提出一种利用图像和时序信号分别进行特征提取、融合分类的并行双通道电机轴承故障分类方法。采用格拉姆角场将时序信号转化为二维图像,随后将一维信号和二维图像同时输入到并行双通道模型中。第一个通道采用卷积神经网络提取空间信息;第二个通道采用门控循环单元挖掘振动信号中的时序特征。最后,将两个通道提取的时空特征融合并引入多头自注意力机制进行训练。基于公开和实测数据集的实验结果表明:该诊断方法在多种工况下对故障类型的诊断平均准确率高达98.13%;与单通道模型相比具有更高的准确率和鲁棒性。 展开更多
关键词 故障诊断 并行通道 模态融合 格拉姆角场 自注意力机制
在线阅读 下载PDF
具有Logistic增长和Crowley-Martin型发生率的随机SIRS双流行病模型的动力学研究 被引量:1
15
作者 赵彦军 苏丽 +1 位作者 孙晓辉 李文轩 《工程数学学报》 CSCD 北大核心 2024年第1期145-163,共19页
基于现实生活中多种疾病共存并且受环境噪声影响,建立了一个具有Logistic增长和Crowley-Martin型发生率的随机SIRS双流行传染病模型,目的在于讨论Logistic增长、Crowley-Martin型发生率和双流行传染病对模型全局动力学的影响。分析展示... 基于现实生活中多种疾病共存并且受环境噪声影响,建立了一个具有Logistic增长和Crowley-Martin型发生率的随机SIRS双流行传染病模型,目的在于讨论Logistic增长、Crowley-Martin型发生率和双流行传染病对模型全局动力学的影响。分析展示了模型的全局动力学由随机基本再生数决定。具体地,首先通过构造Lyapunov函数并利用Ito公式,证明了全局正解的存在唯一性;其次结合引入的随机基本再生数和构造的Lyapunov函数,应用LaSalle不变性原理得到决定疾病灭绝和持久的充分条件。结果表明:环境变化在一定条件下会对疾病起抑制作用。最后,通过数值模拟验证了理论结果的正确性。 展开更多
关键词 logistic增长 Crowley-Martin型发生率 流行病 灭绝 持久
在线阅读 下载PDF
核电用现场金相双模态酸膏腐蚀性能技术及其应用
16
作者 段志伟 刘盛波 +2 位作者 敬仕煜 刘素红 镇乐 《压力容器》 北大核心 2025年第5期79-84,共6页
针对核电装备现场金相检测中传统液态腐蚀剂带来的安全隐患及设备污染问题,开发了双模态酸膏腐蚀技术。该技术包括电解腐蚀酸膏与敷料腐蚀酸膏,分别适用于不锈钢、镍基材质(电解腐蚀酸膏)和碳钢、合金钢材质(敷料腐蚀酸膏)。通过引入膨... 针对核电装备现场金相检测中传统液态腐蚀剂带来的安全隐患及设备污染问题,开发了双模态酸膏腐蚀技术。该技术包括电解腐蚀酸膏与敷料腐蚀酸膏,分别适用于不锈钢、镍基材质(电解腐蚀酸膏)和碳钢、合金钢材质(敷料腐蚀酸膏)。通过引入膨润土载体,实现了腐蚀剂的膏状固化,显著提高了操作安全性和环保性。试验结果表明,使用新型腐蚀酸膏后,工件表面清洁度高,无酸液残留,腐蚀效果理想,例如不锈钢(SA-240 MTP316LN)和碳钢(SA-508M)材质的腐蚀面组织形貌清晰,晶界完整。研究证实,双模态酸膏腐蚀技术兼具高效刻蚀、易清洁和无污染特性,填补了核电在役原位检测领域的技术空白,对提升核电装备检测效率与安全性具有重要意义。 展开更多
关键词 模态酸膏 现场金相 液态腐蚀剂 安全环保
在线阅读 下载PDF
面向可见光谱图像的跨模态双通道伪装目标检测方法
17
作者 程玉虎 吴世佳 +1 位作者 王浩宇 王雪松 《光谱学与光谱分析》 北大核心 2025年第9期2632-2641,共10页
面向可见光谱图像的伪装目标检测任务旨在利用可见光谱信息检测和周围环境具有视觉一致性的伪装目标。这种视觉一致性导致的目标边界区分难和辨识性特征学习难等问题,限制了现有目标检测方法在伪装目标检测任务中的有效性。为此,本文提... 面向可见光谱图像的伪装目标检测任务旨在利用可见光谱信息检测和周围环境具有视觉一致性的伪装目标。这种视觉一致性导致的目标边界区分难和辨识性特征学习难等问题,限制了现有目标检测方法在伪装目标检测任务中的有效性。为此,本文提出一种跨模态动态协同双通道网络(CDCDN),探索了全局-局部多层次视觉感知和视觉-语言模型(VLM)在伪装目标检测中的应用潜力。具体而言,首先,针对目标边界区分难,设计了动态协同双通道模块,通过双通道将检测过程解耦为全局信息定位和局部特征细化,从多层次的视觉角度进行针对性的检测和优化。在此基础上构建了动态信息协同及融合机制,通过全局门控约束与局部感知校正实现了全局与局部信息的相互补充和校正,从而增强了目标检测模型在目标边界模糊场景中的空间捕获能力。其次,针对辨识性特征学习难,设计了跨模态场景对象匹配模块,通过引入VLM来建立视觉和语言模态的跨模态交互,增强了目标与背景在特征空间中的差异性,从而提升了目标检测模型在缺乏辨识性特征场景中的语义区分能力。在MHCD2022和COD10K两个数据集上分别评估了mAP@0.5、mAP@0.5∶0.95和mAP@0.75指标。CDCDN在MHCD2022数据集上分别达到67.6%、42.6%和48.4%,在COD10K数据集上分别达到67.9%、40.6%和41.0%。与五种主流的目标检测方法Faster R-CNN、DETR、Lite-DETR、YOLOv5、YOLOv10相比,CDCDN在三个指标上均取得了最优的检测精度。荒地、草地、树林和雪地四种常见伪装场景的可视化检测结果进一步验证了CDCDN具有良好的场景适应性。在消融实验中,逐步消融CDCDN中的关键组件,以系统地评估其贡献,结果显示各个关键组件都有助于模型检测性能的提升。综合实验结果表明,CDCDN可准确检测和周围环境具有高度视觉一致性的伪装目标,为伪装目标检测提供了一种新的解决方案。 展开更多
关键词 可见光谱 伪装目标检测 通道解耦 信息协同 模态交互
在线阅读 下载PDF
多层次时空特征自适应集成与特有-共享特征融合的双模态情感识别 被引量:5
18
作者 孙强 陈远 《电子与信息学报》 EI CAS CSCD 北大核心 2024年第2期574-587,共14页
在结合脑电(EEG)信号与人脸图像的双模态情感识别领域中,通常存在两个挑战性问题:(1)如何从EEG信号中以端到端方式学习到更具显著性的情感语义特征;(2)如何充分利用双模态信息,捕捉双模态特征中情感语义的一致性与互补性。为此,提出了... 在结合脑电(EEG)信号与人脸图像的双模态情感识别领域中,通常存在两个挑战性问题:(1)如何从EEG信号中以端到端方式学习到更具显著性的情感语义特征;(2)如何充分利用双模态信息,捕捉双模态特征中情感语义的一致性与互补性。为此,提出了多层次时空特征自适应集成与特有-共享特征融合的双模态情感识别模型。一方面,为从EEG信号中获得更具显著性的情感语义特征,设计了多层次时空特征自适应集成模块。该模块首先通过双流结构捕捉EEG信号的时空特征,再通过特征相似度加权并集成各层次的特征,最后利用门控机制自适应地学习各层次相对重要的情感特征。另一方面,为挖掘EEG信号与人脸图像之间的情感语义一致性与互补性,设计了特有-共享特征融合模块,通过特有特征的学习和共享特征的学习来联合学习情感语义特征,并结合损失函数实现各模态特有语义信息和模态间共享语义信息的自动提取。在DEAP和MAHNOB-HCI两种数据集上,采用跨实验验证和5折交叉验证两种实验手段验证了提出模型的性能。实验结果表明,该模型取得了具有竞争力的结果,为基于EEG信号与人脸图像的双模态情感识别提供了一种有效的解决方案。 展开更多
关键词 模态情感识别 脑电 人脸图像 多层次时空特征 特征融合
在线阅读 下载PDF
双模态双向感知下语义信息增强的多模态情感分析 被引量:1
19
作者 曲海成 徐波 《计算机工程与应用》 CSCD 北大核心 2024年第19期139-147,共9页
针对不同模态间存在情感信息分布不均匀,难以获得更深层次的多模态情感语义信息问题,提出了一种双模态双向感知下语义信息增强的多模态情感分析方法。对文本-视觉模态、文本-音频模态分别融合,捕获双模态话语中的相互依赖关系,获得模态... 针对不同模态间存在情感信息分布不均匀,难以获得更深层次的多模态情感语义信息问题,提出了一种双模态双向感知下语义信息增强的多模态情感分析方法。对文本-视觉模态、文本-音频模态分别融合,捕获双模态话语中的相互依赖关系,获得模态间双向的上下文感知信息;考虑到双模态在融合时产生较多冗余信息,采用门控机制选择有效的情感特征,以提升识别关键情感信息的能力;通过跨模态信息交互机制对多种模态间的信息进行建模,得到语义信息增强的模态特征向量。在公开的多模态情感分析数据集CMU-MOSI上对所提出的模型进行评估,实验结果表明,该模型的情感分析结果优于大多数现有先进的多模态情感分析方法,能够有效提升情感分析的性能。 展开更多
关键词 模态情感分析 模态向感知 门控机制 信息增强
在线阅读 下载PDF
基于文本和声学特征的双模态融合抑郁倾向识别算法 被引量:2
20
作者 赵健 崔骞 +1 位作者 石佳 刘岳 《计算机工程》 CAS CSCD 北大核心 2024年第11期49-58,共10页
在抑郁症诊断中,抑郁症患者的面部表情、声音信号和文字等数据可以作为评估抑郁倾向的客观指标。相较于视频,文本和音频模态在处理敏感的个人信息时能更好地保护患者的隐私,并且文本和音频均属于语言模态,相关性较强。针对抑郁倾向识别... 在抑郁症诊断中,抑郁症患者的面部表情、声音信号和文字等数据可以作为评估抑郁倾向的客观指标。相较于视频,文本和音频模态在处理敏感的个人信息时能更好地保护患者的隐私,并且文本和音频均属于语言模态,相关性较强。针对抑郁倾向识别中变长文本数据不易被分析以及手动提取音频特征存在局限性的问题,提出一种基于Transformer的融合网络优化方法。对于文本模态,使用卷积神经网络对文本进行特征提取,得到文本在不同尺度下的局部特征,然后引入Transformer模型来处理全局信息和长距离依赖。对于音频模态,为了降低手动提取音频特征对识别结果的影响,通过使用VGGish网络来自动提取音频特征,并将提取好的音频特征送入Transformer中。最后,为进一步增强文本和音频模态融合网络的识别性能,引入SE通道注意力机制,使模型能够自适应地调整各模态之间的权重分配,更有效地聚焦于关键特征。实验结果表明,双模态融合后的网络准确率达到92.7%,相比仅使用文本或音频模态,准确率分别提升2.9和4.9个百分点。 展开更多
关键词 Transformer模型 VGGish网络 模态融合 抑郁倾向识别 SE通道注意力机制 深度学习
在线阅读 下载PDF
上一页 1 2 21 下一页 到第
使用帮助 返回顶部