期刊文献+
共找到3篇文章
< 1 >
每页显示 20 50 100
基于不确定性校准的云边协同推理框架
1
作者 鲁飞鸿 罗杨一飞 +4 位作者 高士淇 邰振赢 周号益 孙庆赟 李建欣 《计算机学报》 北大核心 2025年第10期2487-2507,共21页
近年来,随着深度学习的发展,预训练模型由于其出色的泛化性和鲁棒性,广泛应用在各种分类、识别决策等下游任务中。但随着预训练模型性能的不断增强,其参数规模也呈指数级增长,由此给计算资源受限的边侧设备带来了巨大挑战,使得直接部署... 近年来,随着深度学习的发展,预训练模型由于其出色的泛化性和鲁棒性,广泛应用在各种分类、识别决策等下游任务中。但随着预训练模型性能的不断增强,其参数规模也呈指数级增长,由此给计算资源受限的边侧设备带来了巨大挑战,使得直接部署大规模预训练模型变得不切实际。为解决这一问题,本文提出了一种基于不确定性校准的云边协同推理框架。该框架在边侧设备上部署轻量化模型,在云侧部署高性能的大参数量模型,同时边侧模型和云侧模型通过证据学习方法可获得推理信心程度评估能力。当遇到低信心程度样本时,边侧模型会自动向云侧模型发起协同推理请求,以获得更准确的预测结果。这种协同机制不仅充分利用了边侧计算的实时性和云计算的高性能优势,还通过智能决策最小化了通信开销。实验结果表明,在不增加大量云侧推理开销的情况下,我们的方法在图像分类任务中的精度平均提升了13.57%,在文本分类任务中的精度平均提升了2.92%,这为移动设备或边缘计算等资源受限环境下的智能应用提供了一种高效且可行的解决方案。 展开更多
关键词 云边协同 不确定性校准 不确定性量化 证据学习 模型轻量化
在线阅读 下载PDF
基于神经网络的多尺度信息融合时间序列长期预测模型
2
作者 李岚皓 严皓钧 +2 位作者 周号益 孙庆赟 李建欣 《计算机应用》 北大核心 2025年第6期1776-1783,共8页
时间序列数据广泛来源于社会各个领域,从气象学到金融学再到医学,准确的长期预测是时间序列数据分析、处理与研究中的一个关键问题。针对时间序列数据中存在的不同尺度相关性的挖掘与利用,提出一种基于神经网络的多尺度信息融合时间序... 时间序列数据广泛来源于社会各个领域,从气象学到金融学再到医学,准确的长期预测是时间序列数据分析、处理与研究中的一个关键问题。针对时间序列数据中存在的不同尺度相关性的挖掘与利用,提出一种基于神经网络的多尺度信息融合时间序列长期预测模型ScaleNN,旨在更好地处理时间序列数据中的多尺度问题,从而实现更准确的长期预测。首先,结合全连接神经网络和卷积神经网络,有效提取全局信息与局部信息,并将2种信息聚合后进行预测;其次,通过在全局信息表征模块中引入压缩机制,以更轻量化的结构接受更长的序列输入,增大模型的感知范围并提高模型效能。大量实验结果表明,ScaleNN在多个真实世界数据集上的性能优于当前该领域的优秀模型PatchTST(Patch Time Series Transformer),在运行时间降低35%的同时仅需19%的参数量。可见,ScaleNN可广泛应用于不同领域的时间序列预测问题,为交通流量预测、天气预报等领域提供预测的基础。 展开更多
关键词 时间序列 大数据 数据挖掘 深度学习 序列预测
在线阅读 下载PDF
共振攻击:揭示跨模态模型CLIP的脆弱性
3
作者 陈天宇 周号益 +4 位作者 何铭睿 仉尚航 闫坤 周萌萌 李建欣 《计算机学报》 EI CAS CSCD 北大核心 2023年第12期2597-2611,共15页
视觉-语言跨模态领域已广泛采用预训练模型进行建模和分析.特别是OpenAI最近提出了一种称为CLIP(Contrastive Language-Image Pre-training)的视觉-语言对比式预训练模型.但是,CLIP使用的跨模态预训练方法可能会使不受信任的模型在不同... 视觉-语言跨模态领域已广泛采用预训练模型进行建模和分析.特别是OpenAI最近提出了一种称为CLIP(Contrastive Language-Image Pre-training)的视觉-语言对比式预训练模型.但是,CLIP使用的跨模态预训练方法可能会使不受信任的模型在不同模态下隐藏后门.这种后门可能在用户下载预训练模型并在下游任务上对其进行微调时构成安全威胁.本研究提出了一种新型跨模态后门攻击方法,即共振攻击.共振攻击能使跨模态嵌入表征空间易受到隐藏在视觉或文本输入中的触发器扰动,导致模型失效.共振攻击不依赖于对下游任务的先验知识,通过在对比学习预训练阶段后增加共振学习预训练阶段,可以将触发器植入预训练的CLIP模型中.被攻击的模型只有在触发器使用时才会失效,否则仍可正常运行.在三个下游任务的实验中,共振攻击均获得了30%以上的攻击性能提升,并取得了低于10%的隐蔽性能指数. 展开更多
关键词 跨模态建模 后门攻击 对比学习 预训练模型 迁移学习
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部