期刊文献+
共找到92篇文章
< 1 2 5 >
每页显示 20 50 100
Pseudo-Random Coding Side-Lobe Suppression Method Based on CLEAN Algorithm
1
作者 Liyu Tian Lianjuan Zhang Jiaying Li 《Journal of Beijing Institute of Technology》 EI CAS 2017年第3期375-380,共6页
A pseudo-random coding side-lobe suppression method based on CLEAN algorithm is introduced.The CLEAN algorithm mainly processes pulse compression results of a pseudo-random coding,and estimates a target's distance by... A pseudo-random coding side-lobe suppression method based on CLEAN algorithm is introduced.The CLEAN algorithm mainly processes pulse compression results of a pseudo-random coding,and estimates a target's distance by a method named interpolation method,so that we can get an ideal pulse compression result of the target,and then use the adjusted ideal pulse compression side-lobe to cut the actual pulse compression result,so as to achieve the remarkable performance of side-lobe suppression for large targets,and let the adjacent small targets appear.The computer simulations by MATLAB with this method analyze the effect of side-lobe suppression in an ideal or noisy environment.It is proved that this method can effectively solve the problem due to the side-lobe of pseudo-random coding being too high,and can enhance the radar's multi-target detection ability. 展开更多
关键词 clean algorithm pseudo-random coding pulse compression interpolation method
在线阅读 下载PDF
CLEAN算法在机载毫米波综合孔径成像中的应用 被引量:8
2
作者 何云涛 江月松 钟宇 《电子与信息学报》 EI CSCD 北大核心 2007年第7期1757-1760,共4页
该文将非即时u-v覆盖的综合孔径射电天文观测中的CLEAN算法应用到即时u-v覆盖的机载二维被动毫米波综合孔径成像中,避免因空间频率覆盖的不完整而产生对图像质量的影响,以达到消除高旁瓣对图像产生的负面影响。该文主要分析了CLEAN算法... 该文将非即时u-v覆盖的综合孔径射电天文观测中的CLEAN算法应用到即时u-v覆盖的机载二维被动毫米波综合孔径成像中,避免因空间频率覆盖的不完整而产生对图像质量的影响,以达到消除高旁瓣对图像产生的负面影响。该文主要分析了CLEAN算法中具体处理时的“清洁”脉冲类型、脉冲半峰值宽度和迭代比例因子γ对处理后的图像的影响。研究结果表明:当清洁脉冲半宽度峰值等于系统脉冲响应图的半峰值宽度时、迭代比例因子γ为1/256时以及清洁脉冲类型为高斯脉冲时有利于改善图像的质量,该结论对实际的机载被动毫米波综合孔径成像的工程研究具有重要的参考价值。 展开更多
关键词 clean算法 综合孔径 毫米波成像 消卷积
在线阅读 下载PDF
基于CLEAN算法的非连续谱线性调频中断波信号处理 被引量:8
3
作者 王勤 万显荣 +1 位作者 杨子杰 熊俊志 《电波科学学报》 EI CSCD 北大核心 2009年第2期243-248,共6页
高频地波雷达工作在电磁频谱密集的短波频段,为了提高雷达抗干扰性能,可利用若干个干净频段合成雷达的有效带宽。研究了一种非连续谱线性调频中断雷达波形,提出了针对这种雷达波形的二维信号处理方案。仿真结果表明:该方案能有效地抑制... 高频地波雷达工作在电磁频谱密集的短波频段,为了提高雷达抗干扰性能,可利用若干个干净频段合成雷达的有效带宽。研究了一种非连续谱线性调频中断雷达波形,提出了针对这种雷达波形的二维信号处理方案。仿真结果表明:该方案能有效地抑制距离旁瓣,提高回波信号检测目标的动态范围。 展开更多
关键词 高频雷达 非连续谱 线性调频中断波 旁瓣抑制 clean算法
在线阅读 下载PDF
基于CLEAN算法的毫米波全息二维像研究 被引量:3
4
作者 刘敏 朱莉 +1 位作者 李小辉 徐枫 《微波学报》 CSCD 北大核心 2018年第4期36-41,共6页
针对近程毫米波全息成像算法过程中的点函数扩散以及旁瓣过宽问题,提出了基于加窗的二维自适应CLEAN算法。该算法提取所得"脏图"的最亮像素点,减去该像素点以及周围小目标的部分能量,之后在清洁图像上重建目标处的精准信息,有效抑制... 针对近程毫米波全息成像算法过程中的点函数扩散以及旁瓣过宽问题,提出了基于加窗的二维自适应CLEAN算法。该算法提取所得"脏图"的最亮像素点,减去该像素点以及周围小目标的部分能量,之后在清洁图像上重建目标处的精准信息,有效抑制点函数扩散与旁瓣展宽。区别于传统CLEAN算法,二维自适应CLEAN算法根据当前图像的能量均值实时更新减去因子,具有很强的自适应性,此外,依据图像最暗目标像素点动态获取全局噪声门限,提高了目标提取速度。通过对多个单目标进行一维与二维方位像的仿真实验,证明了算法的有效性。 展开更多
关键词 毫米波 全息成像 二维方位像 加窗 二维自适应clean算法
在线阅读 下载PDF
基于CLEAN-SC清晰化波束形成的汽车前围板隔声薄弱部位识别 被引量:10
5
作者 杨洋 褚志刚 《声学技术》 CSCD 北大核心 2015年第5期449-456,共8页
为提高波束形成识别汽车前围板隔声薄弱部位的精度,开发了CLEAN-SC清晰化波束形成声源识别软件。对多种已知模拟声源的识别结果表明:该方法能够显著提高分辨率、衰减旁瓣,更准确地识别单声源及不相干声源,且随迭代次数的增加收敛快、受... 为提高波束形成识别汽车前围板隔声薄弱部位的精度,开发了CLEAN-SC清晰化波束形成声源识别软件。对多种已知模拟声源的识别结果表明:该方法能够显著提高分辨率、衰减旁瓣,更准确地识别单声源及不相干声源,且随迭代次数的增加收敛快、受传声器及通道频响失配等因素的干扰小。某汽车前围板的隔声薄弱部位识别试验结果表明:空调进气口左上角位置是主要薄弱部位,空调进气口内外循环转换阀与阀口贴合不紧密是根本原因。为改善其隔声性能指明了方向,验证了CLEAN-SC清晰化波束形成方法在汽车前围板隔声薄弱部位识别中的有效性及所开发软件的正确性。 展开更多
关键词 汽车前围板 隔声薄弱部位识别 波束形成 clean-SC 算法设计 软件开发
在线阅读 下载PDF
基于改进CLEAN算法的毫米波综合孔径成像重建方法研究 被引量:1
6
作者 曲洪东 翟龙军 +1 位作者 姜永华 姜志森 《中国电子科学研究院学报》 2012年第5期510-516,共7页
在毫米波综合孔径成像中,当处理对象是扩展源时,得到的图像存在着条纹现象。提出了一种改进的CLEAN算法,将经过窗函数加权的阵列点散布函数用于CLEAN算法的解卷积过程。仿真结果表明,采用该算法对被点散布函数副瓣和噪声污染的毫米波综... 在毫米波综合孔径成像中,当处理对象是扩展源时,得到的图像存在着条纹现象。提出了一种改进的CLEAN算法,将经过窗函数加权的阵列点散布函数用于CLEAN算法的解卷积过程。仿真结果表明,采用该算法对被点散布函数副瓣和噪声污染的毫米波综合孔径图像进行重建时,图像质量得到了进一步改善。 展开更多
关键词 综合孔径阵列 被动成像 clean算法 解卷积 图像重建
在线阅读 下载PDF
物联网海量不均衡数据组内方差SNM清洗算法
7
作者 伍阳 陈科基 《现代电子技术》 北大核心 2025年第3期124-128,共5页
由于物联网数据通常是不均衡的,导致采集的数据集中各个类别的样本数量差异很大,无法准确反映其内部的方差情况,使得数据文本相似度较高,为此,提出物联网海量不均衡数据组内方差SNM清洗算法。使用网络爬虫技术爬取海量不均衡数据,对不... 由于物联网数据通常是不均衡的,导致采集的数据集中各个类别的样本数量差异很大,无法准确反映其内部的方差情况,使得数据文本相似度较高,为此,提出物联网海量不均衡数据组内方差SNM清洗算法。使用网络爬虫技术爬取海量不均衡数据,对不平衡数据字段过滤处理,设计可伸缩滑动窗口方式改进SNM算法,计算不均衡数据组内方差,将其作为清洗不均衡数据的约束,通过对比物联网海量不均衡数据组内方差阈值,实现物联网海量不均衡数据清洗。实验结果表明:该方法具备较强的物联网海量不均衡数据清洗能力,且清洗后的物联网海量不平衡数据的文本相似度较低,应用性较强。 展开更多
关键词 物联网 不均衡数据 组内方差 SNM清洗算法 滑动窗口 网络爬虫 数据字段 约束条件
在线阅读 下载PDF
基于CLEAN思想的互补码信号脉冲压缩算法 被引量:5
8
作者 潘孟冠 胡金龙 +2 位作者 陈伯孝 刘剑锋 苏泳涛 《雷达科学与技术》 北大核心 2020年第3期254-261,共8页
互补码信号具有理想的零旁瓣非周期自相关函数,特别适用于高频地波雷达。然而高频地波雷达常采用高占空比波形,近距离目标回波遮挡严重,遮挡时原互补码不再互补,脉压旁瓣很高。针对这一问题,提出基于CLEAN算法思想的互补码脉冲压缩方法... 互补码信号具有理想的零旁瓣非周期自相关函数,特别适用于高频地波雷达。然而高频地波雷达常采用高占空比波形,近距离目标回波遮挡严重,遮挡时原互补码不再互补,脉压旁瓣很高。针对这一问题,提出基于CLEAN算法思想的互补码脉冲压缩方法,该算法利用互补码的子码互补特性,在不同遮挡程度使用不同长度的子码作为脉压系数;同时,引入了CLEAN算法的思想,由远距离段至近距离段依次进行脉压和CLEAN操作,在保留互补码零旁瓣特性的同时消除了不同子码段之间的相关性造成的距离栅瓣。多目标环境下的计算机仿真实验表明,这种算法在距离盲区内保持了互补码的零旁瓣特性,且无距离栅瓣。 展开更多
关键词 高频地波雷达 互补码 分段脉压 clean算法
在线阅读 下载PDF
基于CLEAN算法的自适应旁瓣对消技术 被引量:2
9
作者 柴许杨 赵志国 +1 位作者 岳玫君 刘野 《雷达科学与技术》 北大核心 2023年第5期526-530,538,共6页
自适应旁瓣对消技术能够很好地抑制旁瓣干扰,但在应用中发现,自适应旁瓣对消对跟踪的高信噪比目标带来的信噪比损失较大,导致单脉冲和差测角精度下降。本文提出了一种基于CLEAN算法的自适应旁瓣对消方法,首先通过观测目标的先验信息构... 自适应旁瓣对消技术能够很好地抑制旁瓣干扰,但在应用中发现,自适应旁瓣对消对跟踪的高信噪比目标带来的信噪比损失较大,导致单脉冲和差测角精度下降。本文提出了一种基于CLEAN算法的自适应旁瓣对消方法,首先通过观测目标的先验信息构建目标回波模型,再利用该回波模型剔除对消通道中的目标信息,然后基于剔除目标信息后的对消通道数据,重新计算最优加权值进行主通道的干扰对消,最后仿真和实测结果验证了该方法不仅可以减少主通道中目标对消后的信噪比损失,同时也降低了对消后对目标测角精度的影响。 展开更多
关键词 信号处理 旁瓣对消 clean算法 和差测角
在线阅读 下载PDF
基于COA-CNN模型的综采工作面煤与瓦斯突出灾害预测研究
10
作者 许爱国 《陕西煤炭》 2025年第2期62-66,共5页
随着煤矿开采持续向深部延伸,工作面面临的地质压力不断增大,瓦斯释放和积聚的风险显著增加。此外,深部矿井中煤层的物理性质和构造特征也与浅部煤层存在一定差异,进一步增加了煤与瓦斯突出的潜在风险。本研究基于某矿数据,首先应用箱线... 随着煤矿开采持续向深部延伸,工作面面临的地质压力不断增大,瓦斯释放和积聚的风险显著增加。此外,深部矿井中煤层的物理性质和构造特征也与浅部煤层存在一定差异,进一步增加了煤与瓦斯突出的潜在风险。本研究基于某矿数据,首先应用箱线图(Boxplot)与多重插补法(MI)进行数据清洗,结合相关系数(Correlation)筛选影响因素,建立基于Boxplot-MI-C的煤与瓦斯突出预测指标体系。然后运用深度学习中的卷积神经网络(CNN)搭建模型框架,结合鸬鹚搜索算法(COA)优化模型超参数,建立基于COA-CNN的煤与瓦斯突出预测模型。最后,建立支持向量机(SVM)、COA-SVM、人工神经网络(ANN)、COA-ANN、CNN模型进行对比验证,其中,COA-CNN模型预测结果的准确率最高,拥有更优的鲁棒性与泛化能力,可以为煤与瓦斯突出灾害的预测与防控提供更好的决策参考。 展开更多
关键词 煤与瓦斯突出 数据清洗 指标体系 COA优化算法 CNN预测模型
在线阅读 下载PDF
基于CLEAN算法的HFM脉压信号研究 被引量:2
11
作者 周旭广 苏涛 +1 位作者 黄科 张鹏 《舰船电子对抗》 2014年第2期74-78,共5页
双曲调频(HFM)信号对多普勒频移不敏感,但其脉压结果时宽较大,距离分辨力较低,难以实现邻近多目标的检测。利用CLEAN算法对HFM信号的多目标脉压结果进行处理,将估计出的最强目标的理想脉压输出逐步抵消,使得相邻弱目标依次显现,改善了... 双曲调频(HFM)信号对多普勒频移不敏感,但其脉压结果时宽较大,距离分辨力较低,难以实现邻近多目标的检测。利用CLEAN算法对HFM信号的多目标脉压结果进行处理,将估计出的最强目标的理想脉压输出逐步抵消,使得相邻弱目标依次显现,改善了邻近多目标脉压输出,提高了距离分辨力。仿真结果验证了本文所提方法的有效性。 展开更多
关键词 双曲调频信号 脉冲压缩 clean算法 距离分辨力
在线阅读 下载PDF
基于CLEAN算法对一维综合孔径辐射计成像误差的校正 被引量:3
12
作者 张爱丽 吴季 刘浩 《空间科学学报》 CAS CSCD 北大核心 2020年第3期432-437,共6页
对于天线单元数较少的一维综合孔径微波辐射计,系统的采样基线数有限,导致辐射计对目标在空间频率域的采样产生截断,在成像结果中引起明显的吉布斯误差.实际应用中通常选择加窗函数来抑制吉布斯误差,但是加窗函数会降低辐射计系统的空... 对于天线单元数较少的一维综合孔径微波辐射计,系统的采样基线数有限,导致辐射计对目标在空间频率域的采样产生截断,在成像结果中引起明显的吉布斯误差.实际应用中通常选择加窗函数来抑制吉布斯误差,但是加窗函数会降低辐射计系统的空间分辨率.为抑制一维综合孔径辐射计成像的吉布斯误差,提出了基于CLEAN算法的校正算法.针对目前已完成的8单元辐射计地面样机系统,通过仿真实验,验证了CLEAN算法对于抑制辐射计成像结果中吉布斯误差的有效性. 展开更多
关键词 综合孔径辐射计 吉布斯误差 clean算法
在线阅读 下载PDF
ARL中Clean算法的并行化研究 被引量:1
13
作者 刘慧慧 闻萌莎 +3 位作者 钱慎一 吴怀广 张伟伟 李代祎 《轻工学报》 CAS 2019年第2期88-94,共7页
针对SKA算法参考库ARL中的去卷积算法运行效率低、无法满足海量数据实时处理的问题,提出了CPU和GPU协同工作模式下的并行化Clean算法.该方法将Clean算法中可以并行计算的步骤利用多线程在GPU上并行执行,将无法并行计算的步骤在CPU上串... 针对SKA算法参考库ARL中的去卷积算法运行效率低、无法满足海量数据实时处理的问题,提出了CPU和GPU协同工作模式下的并行化Clean算法.该方法将Clean算法中可以并行计算的步骤利用多线程在GPU上并行执行,将无法并行计算的步骤在CPU上串行执行.验证实验结果表明,在数据逐渐增大的过程中,并行化Clean算法比在CPU上的串行处理运行时间显著减少,当图达到4096像素×4096像素时,可以有10倍的提速.这说明并行化Clean算法在处理海量数据时,能够显著提高运算效率. 展开更多
关键词 ARL 去卷积算法 CUDA 并行计算 clean算法
在线阅读 下载PDF
基于AP聚类算法的RBF神经网络风速预测方法的研究
14
作者 李昊 张煜成 《太阳能》 2025年第2期54-61,共8页
近年来,江苏地区在迎峰度夏期间出现了较大的电能供给缺口,电力系统频率失稳的风险增加,因此,在电力保供工作中,稳定的风电输出功率愈发重要。考虑到风能的随机性和间歇性,准确的风速预测可以降低风电入网时的附加成本,协助电力系统调... 近年来,江苏地区在迎峰度夏期间出现了较大的电能供给缺口,电力系统频率失稳的风险增加,因此,在电力保供工作中,稳定的风电输出功率愈发重要。考虑到风能的随机性和间歇性,准确的风速预测可以降低风电入网时的附加成本,协助电力系统调度部门调整调度计划,提升电力系统的风电消纳与稳定运行能力。从提高超短期风速预测精度的角度出发,提出了1种基于近邻传播(AP)聚类算法的径向基函数(RBF)神经网络风速预测方法(即“AP-RBF方法”)。首先建立AP-RBF模型,然后以江苏地区某风电场实地采集的实际风速数据为例进行算例分析,对AP-RBF模型的预测效果进行了验证,并对各类预测方法的预测精度和预测效率进行了对比分析。研究结果表明:1)AP-RBF方法通过采用“先计算聚类结果,再计算权值矩阵”的预测模式,克服了传统聚类方法对初值敏感的缺点。2)与常规预测方法相比,AP-RBF方法在整体预测精度上表现最佳,且在保证训练数据质量的基础上具有较快的预测速度。AP-RBF方法的应用对提高风电消纳能力与电力系统频率稳定性具有重要意义。 展开更多
关键词 清洁能源 风速 风电 近邻传播聚类算法 径向基函数神经网络 风速预测 精度分析
在线阅读 下载PDF
全极化雷达目标散射中心提取方法研究
15
作者 刘昊 姚晨 赵国强 《微波学报》 CSCD 北大核心 2024年第S1期189-193,共5页
本文探讨了全极化毫米波数字雷达技术在末制导雷达中的应用及其面临的挑战。针对小型弹载平台运算资源有限和复杂战场环境下的电磁干扰问题,特别关注了以正负线性调频信号作为正交极化波形的散射中心参数估计方法。通过时域和极化域的... 本文探讨了全极化毫米波数字雷达技术在末制导雷达中的应用及其面临的挑战。针对小型弹载平台运算资源有限和复杂战场环境下的电磁干扰问题,特别关注了以正负线性调频信号作为正交极化波形的散射中心参数估计方法。通过时域和极化域的联合估计,本文建立了匹配滤波形式下的全极化雷达回波信号模型,并分析了接收极化通道内的串扰对测量精度的影响。为解决角反射器干扰下小目标的参数估计问题,本文引入了经典的CLEAN解卷积算法。研究成果对提高末制导雷达的抗干扰能力和目标检测精度具有重要意义,为未来末制导武器的发展提供了新的技术思路。 展开更多
关键词 全极化毫米波雷达 散射中心参数估计 时域极化联合估计 接收极化串扰 clean算法
在线阅读 下载PDF
基于ISAR成像和散射中心提取的目标RCS近场测量方法
16
作者 毕志超 张依轩 +2 位作者 王楠 杨玉禾 林中朝 《微波学报》 CSCD 北大核心 2024年第6期48-53,共6页
本研究通过结合逆合成孔径雷达(ISAR)成像和散射中心提取技术,实现了近场测试距离下目标雷达散射截面积(RCS)的有效测量。利用近场球面波修正技术和探头补偿技术减少了近场球面波效应和收发探头对成像质量的影响。对ISAR目标图像采用散... 本研究通过结合逆合成孔径雷达(ISAR)成像和散射中心提取技术,实现了近场测试距离下目标雷达散射截面积(RCS)的有效测量。利用近场球面波修正技术和探头补偿技术减少了近场球面波效应和收发探头对成像质量的影响。对ISAR目标图像采用散射中心提取技术,消除了ISAR目标图像中由于带宽有限所导致的旁瓣效应。文中针对散射中心提取中截断阈值的选取准则进行了深入研究,给出了截断阈值判定的经验公式并结合仿真实验进行了验证。最终利用标准球锥散射体的暗室近场测量数据对文中所提出的方法进行了实测验证,并与多层快速多极子(MLFMA)方法仿真结果吻合良好,验证了文中方法的有效性。 展开更多
关键词 雷达散射截面积 二维ISAR成像 近场测量 探头补偿 clean算法
在线阅读 下载PDF
基于融合模型的联合站能耗优化技术研究 被引量:1
17
作者 高岩 《石油石化节能与计量》 CAS 2024年第4期36-40,共5页
联合站是油田集输系统中的耗能大户,为降低生产运行能耗,在收集和整理现场SCADA(数据采集与监视控制系统)数据的基础上,对数据进行完整性、重复值和异常值校验,利用箱线图识别超过工况范畴的异常值,对缺失值采用三次样条曲线进行重构,... 联合站是油田集输系统中的耗能大户,为降低生产运行能耗,在收集和整理现场SCADA(数据采集与监视控制系统)数据的基础上,对数据进行完整性、重复值和异常值校验,利用箱线图识别超过工况范畴的异常值,对缺失值采用三次样条曲线进行重构,再对能耗影响因素进行相关性分析,并代入支持向量机模型建立吨液综合能耗和影响因素之间的非线性关系,最后采用粒子群算法实现联合站能耗的持续优化。结果表明:利用中位数替代异常值和三次样条曲线重构缺失值,对于数据清洗的效果较好,清洗后数据完整性大幅提升;加热炉耗气量和处理液量对吨液综合能耗的影响较大,说明热力消耗在能耗中的占比较大;优化后,联合站的单位液量气耗、单位液量电耗、单位液量综合能耗均有所下降,预计全年节约运行费用26.6万元。研究结果可为联合站运行方案的制定提供实际参考。 展开更多
关键词 清洗数据 数据校验 支持向量机 粒子群算法 单位液量综合能耗
在线阅读 下载PDF
南水北调中线总干渠水情数据智能清洗 被引量:3
18
作者 陈晓楠 顾起豪 +2 位作者 张召 靳燕国 顾沁扬 《南水北调与水利科技(中英文)》 CAS CSCD 北大核心 2024年第3期436-444,共9页
南水北调中线总干渠水位、流量等实时水情数据受外界扰动、测量系统误差等因素影响而产生的病态水情数据将造成调度模型计算失真,甚至导致计算失败。为此,针对上下游流量数据空间上的逻辑错误和水位数据时间序列的跳变,分别建立基于粒... 南水北调中线总干渠水位、流量等实时水情数据受外界扰动、测量系统误差等因素影响而产生的病态水情数据将造成调度模型计算失真,甚至导致计算失败。为此,针对上下游流量数据空间上的逻辑错误和水位数据时间序列的跳变,分别建立基于粒子群优化的水量平衡模型和指数加权滑动平均模型,对病态水情数据在空间、时间上实施横向、纵向清洗处理。以穿黄节制闸至漳河节制闸间的渠段为典型研究区间,利用模型自动识别流量倒挂点,并对该渠段涉及的12座节制闸、26处分水点的流量数据进行统一修正,实现了上下游逻辑上的合理性。同时,选取研究渠段内的闫河节制闸为代表,在48 h内运行基本稳定状态下,对每2 h的闸前水位数据序列进行分析,自动识别出跳变数据并进行合理修正。结果表明:建立的模型可自动识别病态水情数据并进行智能清洗,处理后的数据能够较好地满足输水调度分析决策的需要,因此该模型具有推广应用的价值。 展开更多
关键词 南水北调中线 数据清洗 输水调度 粒子群优化算法 指数加权滑动平均模型
在线阅读 下载PDF
基于改进ID3算法的非结构化大数据分类优化方法
19
作者 唐锴令 郑皓 《吉林大学学报(信息科学版)》 CAS 2024年第5期894-900,共7页
针对非结构化大数据在分类过程中,由于其数据中存在大量的冗余数据,若不能及时清洗大数据中的冗余数据,会降低数据分类精度的问题,提出一种基于改进ID3(Iterative Dichotomiser 3)算法的非结构化大数据分类优化方法。该方法针对非结构... 针对非结构化大数据在分类过程中,由于其数据中存在大量的冗余数据,若不能及时清洗大数据中的冗余数据,会降低数据分类精度的问题,提出一种基于改进ID3(Iterative Dichotomiser 3)算法的非结构化大数据分类优化方法。该方法针对非结构化大数据集合中冗余数据多以及维度繁杂的问题,对数据进行清洗处理,并结合有监督辨识矩阵完成数据降维;根据数据降维结果,采用改进ID3算法建立用于数据分类的决策树分类模型,通过该模型对非结构化大数据进行分类处理,从而实现数据的精准分类。实验结果表明,使用该方法对非结构化大数据分类时,分类效果好,精度高。 展开更多
关键词 改进ID3算法 数据清洗 数据降维 非结构化大数据 数据分类方法
在线阅读 下载PDF
老旧装置静设备设计文件合规性排查数据分析模型研究
20
作者 苑丹丹 陈嘉怡 +2 位作者 苑旭阳 刘洋 张芷筠 《石油化工设备技术》 CAS 2024年第6期48-53,I0003,共7页
开展老旧装置设计文件合规性排查有利于精准管控炼化行业发展进程中积累的风险,是统筹好发展和安全的必然要求。文章对获取的老旧装置静设备设计文件排查数据中的文本数据进行机器学习算法研究,构建数据分析模型,旨在获取不符合设计文... 开展老旧装置设计文件合规性排查有利于精准管控炼化行业发展进程中积累的风险,是统筹好发展和安全的必然要求。文章对获取的老旧装置静设备设计文件排查数据中的文本数据进行机器学习算法研究,构建数据分析模型,旨在获取不符合设计文件合规性的老旧装置的关键信息,并进行分析研究。研究主要包括3方面:一是利用数据预处理方法对文本进行数据清洗;二是利用TextRank算法实现大量文本中关键词和关键短语的自动获取;三是利用LDA算法训练主题模型,实现文本中关键主题的自动生成。利用该方法得到的结果可辅助专家对老旧装置设备的安全风险信息进行快速、精准的排查和评估。 展开更多
关键词 合规性排查 机器学习 数据清洗 TextRank算法 LDA主题模型
在线阅读 下载PDF
上一页 1 2 5 下一页 到第
使用帮助 返回顶部