期刊文献+
共找到142篇文章
< 1 2 8 >
每页显示 20 50 100
考虑滞后效应的CNN-BIGRU-Attention预测降水型滑坡位移
1
作者 肖金涛 王自法 +2 位作者 王超 赵登科 李兆焱 《人民黄河》 北大核心 2025年第3期135-140,145,共7页
为研究降水对滑坡的影响,基于大沙窝滑坡日降水量和位移数据,采用移动平均法将位移分解为趋势项位移和周期项位移,采用卷积神经网络(CNN)预测趋势项位移,采用带有注意力机制(Attention)的卷积神经网络-双向门控循环单元(CNN-BIGRU)模型... 为研究降水对滑坡的影响,基于大沙窝滑坡日降水量和位移数据,采用移动平均法将位移分解为趋势项位移和周期项位移,采用卷积神经网络(CNN)预测趋势项位移,采用带有注意力机制(Attention)的卷积神经网络-双向门控循环单元(CNN-BIGRU)模型预测周期项位移,通过叠加趋势项位移和周期项位移得到最终预测位移结果。采用斯皮尔曼相关系数结合滞后性研究分析变量间的滞后关系。以BIGRU-Attention、门控循环单元(GRU)、长短期记忆网络(LSTM)模型为对照,比较CNN-BIGRU-Attention模型预测周期项位移的精确性。结果表明:CNN模型预测以3、6、12 h步长的趋势项位移的R^(2)值分别为0.992、0.977、0.965;CNN-BIGRU-Attention模型预测以3、6、12 h步长的周期项位移的R~2值分别为0.963、0.939、0.896,预测精度均高于BIGRU-Attention、GRU、LSTM模型;基于呷任依村滑坡监测数据,验证了CNN-BIGRU-Attention模型的泛化性。 展开更多
关键词 位移预测 CNN BIGRU attention 大沙窝滑坡 呷任依村滑坡
在线阅读 下载PDF
Attention机制加成的ICEEMDAN-1D-CNNBiGRU月径流预测
2
作者 安佳彤 赵雪花 +2 位作者 朱博文 郭秋岑 王慧方 《水电能源科学》 北大核心 2025年第7期7-10,6,共5页
针对径流序列呈现出复杂性、高波动性,直接预测误差大的问题,将改进的自适应噪声完备集合经验模态分解(ICEEMDAN)、一维卷积神经网络(1D-CNN)、双向门控循环单元(BiGRU)和注意力(Attention)机制相结合,构建ICEEMDAN-1D-CNN-BiGRU-Attent... 针对径流序列呈现出复杂性、高波动性,直接预测误差大的问题,将改进的自适应噪声完备集合经验模态分解(ICEEMDAN)、一维卷积神经网络(1D-CNN)、双向门控循环单元(BiGRU)和注意力(Attention)机制相结合,构建ICEEMDAN-1D-CNN-BiGRU-Attention模型,充分挖掘径流序列的周期性、长程相关性特征,以提高径流序列的预测精度。以汾河上游的上静游站为例开展月径流序列预测研究,与1D-CNN-BiGRU、1DCNN-BiGRU-Attention、ICEEMDAN-1D-CNN-BiGRU模型的预测结果进行对比分析。结果表明,ICEEMDAN分解原始径流序列,可以充分挖掘径流数据的周期性特征。ICEEMDAN-1D-CNN-BiGRU-Attention模型可以很好地识别序列特征,预测效果较好,验证期的纳什效率系数达0.85以上。Attention机制的加入,可提高峰值的预测效果,在突变较强的训练期合格率可达90%。研究结果为中长期径流预测提供了新思路,并验证了其有效性。 展开更多
关键词 月径流预测 ICEEMDAN 1D-CNN BiGRU attention机制
在线阅读 下载PDF
The Impairment Attention Capture by Topological Change in Children With Autism Spectrum Disorder
3
作者 XU Hui-Lin XI Huan-Jun +4 位作者 DUAN Tao LI Jing LI Dan-Dan WANG Kai ZHU Chun-Yan 《生物化学与生物物理进展》 北大核心 2025年第1期223-232,共10页
Objective Autism spectrum disorder(ASD)is a neurodevelopmental condition characterized by difficulties with communication and social interaction,restricted and repetitive behaviors.Previous studies have indicated that... Objective Autism spectrum disorder(ASD)is a neurodevelopmental condition characterized by difficulties with communication and social interaction,restricted and repetitive behaviors.Previous studies have indicated that individuals with ASD exhibit early and lifelong attention deficits,which are closely related to the core symptoms of ASD.Basic visual attention processes may provide a critical foundation for their social communication and interaction abilities.Therefore,this study explores the behavior of children with ASD in capturing attention to changes in topological properties.Methods Our study recruited twenty-seven ASD children diagnosed by professional clinicians according to DSM-5 and twenty-eight typically developing(TD)age-matched controls.In an attention capture task,we recorded the saccadic behaviors of children with ASD and TD in response to topological change(TC)and non-topological change(nTC)stimuli.Saccadic reaction time(SRT),visual search time(VS),and first fixation dwell time(FFDT)were used as indicators of attentional bias.Pearson correlation tests between the clinical assessment scales and attentional bias were conducted.Results This study found that TD children had significantly faster SRT(P<0.05)and VS(P<0.05)for the TC stimuli compared to the nTC stimuli,while the children with ASD did not exhibit significant differences in either measure(P>0.05).Additionally,ASD children demonstrated significantly less attention towards the TC targets(measured by FFDT),in comparison to TD children(P<0.05).Furthermore,ASD children exhibited a significant negative linear correlation between their attentional bias(measured by VS)and their scores on the compulsive subscale(P<0.05).Conclusion The results suggest that children with ASD have difficulty shifting their attention to objects with topological changes during change detection.This atypical attention may affect the child’s cognitive and behavioral development,thereby impacting their social communication and interaction.In sum,our findings indicate that difficulties in attentional capture by TC may be a key feature of ASD. 展开更多
关键词 attention autism spectrum disorder perceptual object topological perception
在线阅读 下载PDF
基于可变形CNN LSTM Attention网络的瓦斯抽采有效半径预测模型及应用
4
作者 杨帅 《中国煤炭》 北大核心 2025年第7期124-133,共10页
瓦斯抽采有效半径是确定井下煤层抽采钻孔间距的基础参数,因受煤层赋存条件和技术条件影响,其确定方法尚未统一、普适性差。提出了基于可变形CNN LSTM MulAttention网络的瓦斯抽采有效半径预测模型,将煤层埋深、煤层初始瓦斯压力和渗透... 瓦斯抽采有效半径是确定井下煤层抽采钻孔间距的基础参数,因受煤层赋存条件和技术条件影响,其确定方法尚未统一、普适性差。提出了基于可变形CNN LSTM MulAttention网络的瓦斯抽采有效半径预测模型,将煤层埋深、煤层初始瓦斯压力和渗透率等作为特征量,有效半径作为目标量,构建有效半径预测数据集,用于模型的训练和测试。训练和测试结果表明,可变形CNN LSTM Attention网络预测模型训练和测试中的平均绝对误差(MAE)、均方误差(RMSE)、决定系数(R^(2))分别为0.3182、0.6226、0.8727和0.4242、0.6426、0.8496,预测精度良好。与LSTM、CNN、CNN LSTM和CNN LSTM Attention预测模型相比,可变形CNN LSTM Attention网络预测模型的总体MAE和RMSE分别降低29.62%、17.30%、15.01%、4.61%和75.26%、63.37%、59.88%、54.23%,决定系数R^(2)分别提高66.12%、16.36%、11.70%、6.73%,采用可变形CNN LSTM Attention网络预测模型具有更高的精度和更好的预测效果。利用训练的机器学习预测模型对顺层钻孔瓦斯抽采有效半径进行了预测,结果与瓦斯含量现场测定法和数值模拟法确定的有效半径相差较小,验证了机器学习预测瓦斯抽采有效半径的可行性。 展开更多
关键词 瓦斯抽采 有效半径 预测模型 可变形CNN LSTM attention网络
在线阅读 下载PDF
Research on multi-view collaborative detection system for UAV swarms based on Pix2Pix framework and BAM attention mechanism
5
作者 Yan Ding Qingxin Cao +2 位作者 Bozhi Zhang Peilin Li Zhongjiao Shi 《Defence Technology(防务技术)》 2025年第4期213-226,共14页
Drone swarm systems,equipped with photoelectric imaging and intelligent target perception,are essential for reconnaissance and strike missions in complex and high-risk environments.They excel in information sharing,an... Drone swarm systems,equipped with photoelectric imaging and intelligent target perception,are essential for reconnaissance and strike missions in complex and high-risk environments.They excel in information sharing,anti-jamming capabilities,and combat performance,making them critical for future warfare.However,varied perspectives in collaborative combat scenarios pose challenges to object detection,hindering traditional detection algorithms and reducing accuracy.Limited angle-prior data and sparse samples further complicate detection.This paper presents the Multi-View Collaborative Detection System,which tackles the challenges of multi-view object detection in collaborative combat scenarios.The system is designed to enhance multi-view image generation and detection algorithms,thereby improving the accuracy and efficiency of object detection across varying perspectives.First,an observation model for three-dimensional targets through line-of-sight angle transformation is constructed,and a multi-view image generation algorithm based on the Pix2Pix network is designed.For object detection,YOLOX is utilized,and a deep feature extraction network,BA-RepCSPDarknet,is developed to address challenges related to small target scale and feature extraction challenges.Additionally,a feature fusion network NS-PAFPN is developed to mitigate the issue of deep feature map information loss in UAV images.A visual attention module(BAM)is employed to manage appearance differences under varying angles,while a feature mapping module(DFM)prevents fine-grained feature loss.These advancements lead to the development of BA-YOLOX,a multi-view object detection network model suitable for drone platforms,enhancing accuracy and effectively targeting small objects. 展开更多
关键词 Drone swarm systems Reconnaissance and strike Image generation Multi-view detection Pix2Pix framework attention mechanism
在线阅读 下载PDF
Hypersonic glide vehicle trajectory prediction based on frequency enhanced channel attention and light sampling-oriented MLP network
6
作者 Yuepeng Cai Xuebin Zhuang 《Defence Technology(防务技术)》 2025年第4期199-212,共14页
Hypersonic Glide Vehicles(HGVs)are advanced aircraft that can achieve extremely high speeds(generally over 5 Mach)and maneuverability within the Earth's atmosphere.HGV trajectory prediction is crucial for effectiv... Hypersonic Glide Vehicles(HGVs)are advanced aircraft that can achieve extremely high speeds(generally over 5 Mach)and maneuverability within the Earth's atmosphere.HGV trajectory prediction is crucial for effective defense planning and interception strategies.In recent years,HGV trajectory prediction methods based on deep learning have the great potential to significantly enhance prediction accuracy and efficiency.However,it's still challenging to strike a balance between improving prediction performance and reducing computation costs of the deep learning trajectory prediction models.To solve this problem,we propose a new deep learning framework(FECA-LSMN)for efficient HGV trajectory prediction.The model first uses a Frequency Enhanced Channel Attention(FECA)module to facilitate the fusion of different HGV trajectory features,and then subsequently employs a Light Sampling-oriented Multi-Layer Perceptron Network(LSMN)based on simple MLP-based structures to extract long/shortterm HGV trajectory features for accurate trajectory prediction.Also,we employ a new data normalization method called reversible instance normalization(RevIN)to enhance the prediction accuracy and training stability of the network.Compared to other popular trajectory prediction models based on LSTM,GRU and Transformer,our FECA-LSMN model achieves leading or comparable performance in terms of RMSE,MAE and MAPE metrics while demonstrating notably faster computation time.The ablation experiments show that the incorporation of the FECA module significantly improves the prediction performance of the network.The RevIN data normalization technique outperforms traditional min-max normalization as well. 展开更多
关键词 Hypersonic glide vehicle Trajectory prediction Frequency enhanced channel attention Light sampling-oriented MLP network
在线阅读 下载PDF
引入上下文信息和Attention Gate的GUS-YOLO遥感目标检测算法 被引量:23
7
作者 张华卫 张文飞 +2 位作者 蒋占军 廉敬 吴佰靖 《计算机科学与探索》 CSCD 北大核心 2024年第2期453-464,共12页
目前基于通用YOLO系列的遥感目标检测算法存在并未充分利用图像的全局上下文信息,在特征融合金字塔部分并未充分考虑缩小融合特征之间的语义鸿沟、抑制冗余信息干扰的缺点。在结合YOLO算法优点的基础上提出GUS-YOLO算法,其拥有一个能够... 目前基于通用YOLO系列的遥感目标检测算法存在并未充分利用图像的全局上下文信息,在特征融合金字塔部分并未充分考虑缩小融合特征之间的语义鸿沟、抑制冗余信息干扰的缺点。在结合YOLO算法优点的基础上提出GUS-YOLO算法,其拥有一个能够充分利用全局上下文信息的骨干网络Global Backbone。除此之外,该算法在融合特征金字塔自顶向下的结构中引入Attention Gate模块,可以突出必要的特征信息,抑制冗余信息。另外,为Attention Gate模块设计了最佳的网络结构,提出了网络的特征融合结构U-Net。最后,为克服ReLU函数可能导致模型梯度不再更新的问题,该算法将Attention Gate模块的激活函数升级为可学习的SMU激活函数,提高模型鲁棒性。在NWPU VHR-10遥感数据集上,该算法相较于YOLOV7算法取得宽松指标mAP^(0.50)1.64个百分点和严格指标mAP^(0.75)9.39个百分点的性能提升。相较于目前主流的七种检测算法,该算法取得较好的检测性能。 展开更多
关键词 遥感图像 Global Backbone attention Gate SMU U-neck
在线阅读 下载PDF
基于SABO-GRU-Attention的锂电池SOC估计 被引量:2
8
作者 薛家祥 王凌云 《电源技术》 CAS 北大核心 2024年第11期2169-2173,共5页
提出一种基于SABO-GRU-Attention(subtraction average based optimizer-gate recurrent unitattention)的锂电池SOC(state of charge)估计方法。采用基于平均减法优化算法自适应更新GRU神经网络的超参数,融合SE(squeeze and excitation... 提出一种基于SABO-GRU-Attention(subtraction average based optimizer-gate recurrent unitattention)的锂电池SOC(state of charge)估计方法。采用基于平均减法优化算法自适应更新GRU神经网络的超参数,融合SE(squeeze and excitation)注意力机制自适应分配各通道权重,提高学习效率。对马里兰大学电池数据集进行预处理,输入电压、电流参数,进行锂电池充放电仿真实验,并搭建锂电池荷电状态实验平台进行储能锂电池充放电实验。结果表明,提出的SOC神经网络估计模型明显优于LSTM、GRU以及PSO-GRU等模型,具有较高的估计精度与应用价值。 展开更多
关键词 SOC估计 SABO算法 GRU神经网络 attention机制
在线阅读 下载PDF
Neurological Insights into Attentional Deficits in High Trait Anxiety: a Commentary on Hu et al.’s Paper in Cerebral Cortex (2023)
9
作者 MA Hao-Yun LIANG Jian-Hui LIU Dong-Qiang 《生物化学与生物物理进展》 SCIE CAS CSCD 北大核心 2024年第12期3321-3326,共6页
In a recent publication,Hu et al.(2023)have reported that individuals with high trait anxiety exhibit attentional deficits characterized by reduced inhibition of distractors and delayed attentional selection of target... In a recent publication,Hu et al.(2023)have reported that individuals with high trait anxiety exhibit attentional deficits characterized by reduced inhibition of distractors and delayed attentional selection of targets,indicating impaired top-down attentional control.This commentary underscores their significant contributions to the cognitive theory of anxiety.Based on their findings,we propose a novel training approach called attentional inhibition training(AIT),aimed at improving top-down attentional control to alleviate symptoms of anxiety.Furthermore,we explore the potential application of non-invasive transcranial magnetic stimulation(TMS)for rapidly enhancing attentional control function. 展开更多
关键词 ANXIETY attentional deficit attentional inhibition cognitive training neural mechanism
在线阅读 下载PDF
基于CNN-LSTM-Attention和自回归的混合水位预测模型 被引量:4
10
作者 吕海峰 涂井先 +1 位作者 林泓全 冀肖榆 《水利水电技术(中英文)》 北大核心 2024年第6期16-31,共16页
【目的】水位预测对交通运输、农业以及防洪措施具有重要影响。精确的水位值可用于提升水道运输的安全及效率、降低洪水风险,同时也是保障区域可持续发展的必要条件。【方法】提出一种CRANet的混合水位预测模型,以卷积神经网络(CNN)、... 【目的】水位预测对交通运输、农业以及防洪措施具有重要影响。精确的水位值可用于提升水道运输的安全及效率、降低洪水风险,同时也是保障区域可持续发展的必要条件。【方法】提出一种CRANet的混合水位预测模型,以卷积神经网络(CNN)、长短期记忆网络(LSTM)、注意力机制以及自回归(AR)组件为基础,旨在应对时间序列数据中存在的线性与非线性问题,缓解自回归及ARIMA模型的缺陷。其应用不仅在于为航运调度提供决策支撑,加强导航安全效率,同样能提升防洪减灾的能力。其中,CNN和LSTM组件有效地针对数据集内的局部和全局关系进行捕捉,AR组件则能充分考虑数据的时间序列特性。同时,通过注意力机制,模型能够优先考虑相关特性,提高预测效果。【结果】研究成果所提出的模型已成功应用于中国西江梧州站的水位预测,在测试集上预测未来3 h级别水位的MAE、RMSE和R^(2)分别为0.086、0.114 5和0.950 8。【结论】结果表明所提出的CRANet模型在水位预测方面的高可用性、准确度与稳健性,相较于AR、SVR、CNN、LSTM等模型具有更优的MAE、RMSE和R^(2)。 展开更多
关键词 时间序列 水位预测 CNN LSTM attention 影响因素 洪水 西江
在线阅读 下载PDF
融合MacBERT和Talking⁃Heads Attention实体关系联合抽取模型 被引量:1
11
作者 王春亮 姚洁仪 李昭 《现代电子技术》 北大核心 2024年第5期127-131,共5页
针对现有的医学文本关系抽取任务模型在训练过程中存在语义理解能力不足,可能导致关系抽取的效果不尽人意的问题,文中提出一种融合MacBERT和Talking⁃Heads Attention的实体关系联合抽取模型。该模型首先利用MacBERT语言模型来获取动态... 针对现有的医学文本关系抽取任务模型在训练过程中存在语义理解能力不足,可能导致关系抽取的效果不尽人意的问题,文中提出一种融合MacBERT和Talking⁃Heads Attention的实体关系联合抽取模型。该模型首先利用MacBERT语言模型来获取动态字向量表达,MacBERT作为改进的BERT模型,能够减少预训练和微调阶段之间的差异,从而提高模型的泛化能力;然后,将这些动态字向量表达输入到双向门控循环单元(BiGRU)中,以便提取文本的上下文特征。BiGRU是一种改进的循环神经网络(RNN),具有更好的长期依赖捕获能力。在获取文本上下文特征之后,使用Talking⁃Heads Attention来获取全局特征。Talking⁃Heads Attention是一种自注意力机制,可以捕获文本中不同位置之间的关系,从而提高关系抽取的准确性。实验结果表明,与实体关系联合抽取模型GRTE相比,该模型F1值提升1%,precision值提升0.4%,recall值提升1.5%。 展开更多
关键词 MacBERT BiGRU 关系抽取 医学文本 Talking⁃Heads attention 深度学习 全局特征 神经网络
在线阅读 下载PDF
基于TimeGAN和CNN-BiLSTM-Attention的大坝变形预测混合模型 被引量:4
12
作者 原佳帆 李丹杨 +2 位作者 李佳霖 秦学 毛鹏 《人民黄河》 CAS 北大核心 2024年第12期127-130,143,共5页
基于历史数据的深度学习模型往往需要跨越数年的大量数据集,为了解决数据不足问题,提出一种将时间序列生成对抗性网络(TimeGAN)与CNN-BiLSTM-Attention相结合的混凝土面板堆石坝变形预测混合模型。首先,利用TimeGAN生成虚拟数据来扩展... 基于历史数据的深度学习模型往往需要跨越数年的大量数据集,为了解决数据不足问题,提出一种将时间序列生成对抗性网络(TimeGAN)与CNN-BiLSTM-Attention相结合的混凝土面板堆石坝变形预测混合模型。首先,利用TimeGAN生成虚拟数据来扩展稀疏的数据集;然后,利用卷积神经网络(CNN)提取大坝传感器数据中的非线性局部特征,运用BiLSTM捕获双向时间序列特征;最后,引入注意力(Attention)机制对BiLSTM层提取的信息特征自动进行权重分配,通过全连接层输出最终预测结果。以贵州省毕节市某混凝土面板堆石坝为例,验证该混合模型的适用性。建立长短期记忆网络(LSTM)、CNN-LSTM、CNN-LSTM-Attention、CNN-BiLSTM-Attention 4种基模型,再分别引入TimeGAN,对比各模型的预测精度。结果表明:基于TimeGAN和CNN-BiLSTM-Attention的混合模型的拟合效果明显优于其他模型,其预测值与监测值最接近。相较于传统单一LSTM模型,混合模型的EMS、ERMS、EMA分别降低了71%、49%、45%,R2提升了20%。 展开更多
关键词 TimeGAN CNN BiLSTM attention 混凝土面板堆石坝 变形预测
在线阅读 下载PDF
Self-potential inversion based on Attention U-Net deep learning network
13
作者 GUO You-jun CUI Yi-an +3 位作者 CHEN Hang XIE Jing ZHANG Chi LIU Jian-xin 《Journal of Central South University》 SCIE EI CAS CSCD 2024年第9期3156-3167,共12页
Landfill leaks pose a serious threat to environmental health,risking the contamination of both groundwater and soil resources.Accurate investigation of these sites is essential for implementing effective prevention an... Landfill leaks pose a serious threat to environmental health,risking the contamination of both groundwater and soil resources.Accurate investigation of these sites is essential for implementing effective prevention and control measures.The self-potential(SP)stands out for its sensitivity to contamination plumes,offering a solution for monitoring and detecting the movement and seepage of subsurface pollutants.However,traditional SP inversion techniques heavily rely on precise subsurface resistivity information.In this study,we propose the Attention U-Net deep learning network for rapid SP inversion.By incorporating an attention mechanism,this algorithm effectively learns the relationship between array-style SP data and the location and extent of subsurface contaminated sources.We designed a synthetic landfill model with a heterogeneous resistivity structure to assess the performance of Attention U-Net deep learning network.Additionally,we conducted further validation using a laboratory model to assess its practical applicability.The results demonstrate that the algorithm is not solely dependent on resistivity information,enabling effective locating of the source distribution,even in models with intricate subsurface structures.Our work provides a promising tool for SP data processing,enhancing the applicability of this method in the field of near-subsurface environmental monitoring. 展开更多
关键词 SELF-POTENTIAL attention mechanism U-Net deep learning network INVERSION landfill
在线阅读 下载PDF
基于Attention-LSTM-XGBoost的电极移动速度影响放电参数预测分析
14
作者 何秀思 阮方鸣 +2 位作者 徐愷 尹兰 王文利 《电波科学学报》 CSCD 北大核心 2024年第2期287-295,共9页
基于具有Attention机制的长短期记忆(attention long short-term memory,Attention-LSTM)神经网络模型,设计了一种由Attention-LSTM神经网络与极端的梯度增强(extreme gradient boosting,XGBoost)法共同组成的变权组合模型,用以分析预... 基于具有Attention机制的长短期记忆(attention long short-term memory,Attention-LSTM)神经网络模型,设计了一种由Attention-LSTM神经网络与极端的梯度增强(extreme gradient boosting,XGBoost)法共同组成的变权组合模型,用以分析预测静电放电过程中电极移动速度对放电参数造成的影响。该组合模型充分利用静电放电参数的时序特性,并采用Attention机制突出对放电参数预测起到关键作用的输入特征。首先基于由新型电极移动速度效应测试仪的实验结果提供的原始实验数据,采用分箱法对其进行预处理得到新的实验数据;然后将得到的新实验数据集作为两种模型的输入数据,分开训练Attention-LSTM模型和XGBoost模型,求解出各自模型的预测结果及误差;最后利用误差倒数法,重新计算出两种模型预测结果的占比权重,并根据计算的权重求解出最终预测结果。预测结果表明:与Attention-LSTM神经网络模型、XGBoost模型、Attention-LSTMXGBoost定权组合模型相比,本文构建的Attention-LSTM-XGBoost变权组合模型,评估指标中的决定系数分别提升了5.22%、9.11%、3.13%。本文提出的变权组合模型在预测精度以及算法鲁棒性上均优于其他模型,有益于对小间隙静电放电参数变化趋势和规律的探寻。 展开更多
关键词 静电放电 电极移动速度 attention机制 长短期记忆(LSTM)神经网络 误差倒数法
在线阅读 下载PDF
电力市场中基于Attention-LSTM的短期负荷预测模型 被引量:145
15
作者 彭文 王金睿 尹山青 《电网技术》 EI CSCD 北大核心 2019年第5期1745-1751,共7页
电力市场环境下,精准的短期负荷预测可以保障电网安全稳定运行,但电价的实时波动增加了负荷变化的复杂性,加大了预测难度。针对这一问题,采用最大信息系数法分析电价及历史负荷与当前时刻负荷的相关性,为预测模型输入特征的确定提供依... 电力市场环境下,精准的短期负荷预测可以保障电网安全稳定运行,但电价的实时波动增加了负荷变化的复杂性,加大了预测难度。针对这一问题,采用最大信息系数法分析电价及历史负荷与当前时刻负荷的相关性,为预测模型输入特征的确定提供依据。在此基础上,提出了基于Attention-LSTM (attention long short-term memory,Attention-LSTM)网络的短期负荷预测模型。该模型充分利用负荷的时序特性,并采用Attention机制突出对负荷预测起到关键作用的输入特征。以澳大利亚某地区真实数据为算例,分别应用Attention-LSTM模型与其他模型进行仿真实验。结果表明,所提方法在预测精度和算法鲁棒性方面均优于其他模型。 展开更多
关键词 负荷预测 电力市场 最大信息系数 LSTM attention机制
在线阅读 下载PDF
基于BLSTM_attention_CRF模型的新能源汽车领域术语抽取 被引量:17
16
作者 马建红 张亚梅 +2 位作者 姚爽 张炳斐 郭昌宏 《计算机应用研究》 CSCD 北大核心 2019年第5期1385-1389,1395,共6页
为提高新能源汽车领域术语抽取准确率,面向新能源汽车专利文本提出一种领域术语抽取模型。传统的领域术语抽取方法过度依赖人工定义特征和领域知识,无法自动挖掘隐含特征,其识别性能过度依赖所选特征的质量。从深度学习的角度出发,提出... 为提高新能源汽车领域术语抽取准确率,面向新能源汽车专利文本提出一种领域术语抽取模型。传统的领域术语抽取方法过度依赖人工定义特征和领域知识,无法自动挖掘隐含特征,其识别性能过度依赖所选特征的质量。从深度学习的角度出发,提出了一种基于attention的双向长短时记忆网络(bidirectional long short-term memory,BLSTM)与条件随机场(conditional random fields,CRF)相结合的领域术语抽取模型(BLSTM_attention_CRF模型),并使用基于词典与规则相结合的方法对结果进行校正,准确率可达到86%以上,方法切实可行。 展开更多
关键词 领域术语抽取 attention机制 双向长短时记忆网络 条件随机场 词典 规则
在线阅读 下载PDF
基于CNN-Attention-BP的降水发生预测研究 被引量:8
17
作者 吴香华 华亚婕 +2 位作者 官元红 王巍巍 刘端阳 《南京信息工程大学学报(自然科学版)》 CAS 北大核心 2022年第2期148-155,共8页
在综合分析降水统计预测模型特点的基础上,提出一种基于Attention机制、卷积神经网络(CNN)和BP神经网络的CNN-Attention-BP组合模型,并对1961—2020年不同气候类型的长春站、白城站、延吉站夏季降水进行实证分析.首先,运用卷积神经网络... 在综合分析降水统计预测模型特点的基础上,提出一种基于Attention机制、卷积神经网络(CNN)和BP神经网络的CNN-Attention-BP组合模型,并对1961—2020年不同气候类型的长春站、白城站、延吉站夏季降水进行实证分析.首先,运用卷积神经网络对6—8月20—次日20时降水量、平均气压、平均风速、平均气温和平均相对湿度进行特征学习,利用Attention机制来确定气象影响因素对降水预测的权重;然后,使用BP神经网络进行降水发生预测,选用准确率、交叉熵损失函数和F1-score来综合评价CNN-Attention-BP组合模型的性能.最后,将单一的支持向量机、多层感知机和卷积神经网络模型与组合模型进行比较分析.结果表明,CNN-Attention-BP组合模型具有自主学习和关注更重要信息的特征,能够有效提高吉林省夏季降水发生模型的预测能力,在样本越均衡、降水频率越接近于0.5的站点,预测精度越高,准确率最高可达88.4%.CNN-Attention-BP组合模型的准确率相较于其他单一模型最高可以提高近17个百分点. 展开更多
关键词 降水预测 卷积神经网络 attention机制 BP神经网络 交叉熵损失函数
在线阅读 下载PDF
融合Attention多粒度句子交互自然语言推理研究 被引量:5
18
作者 程淑玉 郭泽颖 +1 位作者 刘威 印鉴 《小型微型计算机系统》 CSCD 北大核心 2019年第6期1215-1220,共6页
自然语言推理的很多问题都可以抽象为句子匹配问题,传统的匹配方法采用的是对句子向量或句子间的词向量做匹配,这些方法都只关注句子自身的语义信息,忽略句子之间的组合特征,造成语义损失.本文提出多粒度句子交互匹配方法,引入Attentio... 自然语言推理的很多问题都可以抽象为句子匹配问题,传统的匹配方法采用的是对句子向量或句子间的词向量做匹配,这些方法都只关注句子自身的语义信息,忽略句子之间的组合特征,造成语义损失.本文提出多粒度句子交互匹配方法,引入Attention机制,通过不同粒度、不同层次的句子交互,利用深度神经网络模型(BiLSTM)对句子蕴含关系进行分类.本文方法在SNLI语料库上进行了丰富的实验,结果表明该方法在自然语言推理任务上比当前最优的方法获得了更好的表现. 展开更多
关键词 自然语言推理 句子匹配 attention机制 多粒度
在线阅读 下载PDF
融合元数据及attention机制的深度联合学习推荐 被引量:3
19
作者 张全贵 李志强 +1 位作者 张新新 曹志强 《计算机应用研究》 CSCD 北大核心 2019年第11期3290-3293,共4页
融合元数据的协同过滤推荐即混合推荐算法是目前推荐系统领域研究的热点,能一定程度地解决数据稀疏及冷启动等问题。但融合元数据现有的建模方法大多数建立于用户/项目属性权重相同的情景下,以至于用户项目间重点关系表达不显著,难以获... 融合元数据的协同过滤推荐即混合推荐算法是目前推荐系统领域研究的热点,能一定程度地解决数据稀疏及冷启动等问题。但融合元数据现有的建模方法大多数建立于用户/项目属性权重相同的情景下,以至于用户项目间重点关系表达不显著,难以获得较好的推荐性能。针对上述问题,提出一种融合元数据及attention机制的深度联合学习推荐方法。它利用双深度网络联合学习,其中一个网络基于隐反馈数据实现矩阵非线性分解以学习用户/项目个性化关系,另一个利用attention机制自动捕捉用户/项目关键属性对推荐工作的影响,通过赋予不同属性权重凸显的用户偏好关系建模辅以扩展模型。实验结果表明,所提推荐算法在MovieLens 100K和MovieLens 1M两个公开数据集上均表现出较为优越的推荐性能。 展开更多
关键词 元数据 属性权重 attention机制 深度联合学习 非线性分解
在线阅读 下载PDF
基于Borderline-SMOTE和双Attention的入侵检测方法 被引量:6
20
作者 刘全明 李尹楠 +1 位作者 郭婷 李岩纬 《计算机科学》 CSCD 北大核心 2021年第3期327-332,共6页
随着互联网的发展,网络环境愈加复杂,由此导致的网络安全问题不断出现,因此网络安全的防护成为一项重要研究课题。针对真实网络环境中采集到的流量数据非平衡以及传统机器学习方法提取特征表示不准确等问题,文中提出一种基于Borderline-... 随着互联网的发展,网络环境愈加复杂,由此导致的网络安全问题不断出现,因此网络安全的防护成为一项重要研究课题。针对真实网络环境中采集到的流量数据非平衡以及传统机器学习方法提取特征表示不准确等问题,文中提出一种基于Borderline-SMOTE和双Attention的入侵检测方法。首先对入侵数据进行Borderline-SMOTE过采样处理,解决了数据非平衡问题,并且利用卷积网络在图像特征提取方面的优势,将一维流量数据转化为灰度图像;然后通过双注意力网络分别从通道维度和空间维度对低维特征进行维度更新,得到更精准的特征表示;最后利用Softmax分类器对流量数据进行分类预测。所提方法的仿真实验均已在NSL-KDD数据集上得到验证,其准确率达到99.24%,相比其他常用方法准确率更高。 展开更多
关键词 网络安全 Borderline-SMOTE attention 入侵检测 非平衡问题
在线阅读 下载PDF
上一页 1 2 8 下一页 到第
使用帮助 返回顶部