中国XCO_(2)无缝隙逐日数据集构建及时空分布

1

作者 刘昭华 谢鹏 +2 位作者 曾昭亮 桂柯 王亚强 《应用气象学报》 北大核心 2025年第4期414-426,共13页

二氧化碳(CO_(2))是关键温室气体,准确掌握其空间分布有助于实现碳达峰与碳中和目标。大气CO_(2)柱平均干空气体积混合比(XCO_(2))是表征大气中CO_(2)体积分数的重要指标。由于卫星观测的XCO_(2)数据受限于狭窄的条带和云层等因素,常出... 二氧化碳(CO_(2))是关键温室气体,准确掌握其空间分布有助于实现碳达峰与碳中和目标。大气CO_(2)柱平均干空气体积混合比(XCO_(2))是表征大气中CO_(2)体积分数的重要指标。由于卫星观测的XCO_(2)数据受限于狭窄的条带和云层等因素,常出现空间数据缺失,因此构建高精度时空无缝XCO_(2)数据集尤为关键。基于轨道碳观测卫星2号(OCO-2)的XCO_(2)观测值,结合多源环境因素,采用XGBoost模型构建了2015年1月-2024年3月中国地区0.05°×0.05°高精度无缝隙逐日XCO_(2)数据集。模型的交叉验证和地面站点验证结果均显示优异的精度,且与瓦里关大气本底站的观测数据变化趋势一致,验证了数据集的高精度和可靠性。基于该数据集,发现中国XCO_(2)的空间分布呈现东高西低特征,高值区主要集中在京津冀、长江三角洲、粤港澳等地区。全国年平均XCO_(2)呈增长趋势,由2015年的401.00×10^(-6)上升至2023年的419.91×10^(-6),年平均增长为2.36×10^(-6),但增长速率逐渐放缓。XCO_(2)季节性波动呈冬春高、夏秋低趋势,可能与植被固碳活动相关。 展开更多

关键词 XCO_(2) 机器学习 数据集构建 时空分布

在线阅读 下载PDF 职称材料

中国城市CO_2排放数据集研究——基于中国高空间分辨率网格数据 被引量：36

2

作者 蔡博峰 王金南 +2 位作者 杨姝影 毛显强 曹丽斌 《中国人口·资源与环境》 CSSCI CSCD 北大核心 2017年第2期1-4,共4页

城市CO_2排放数据的可获取性和质量直接影响了城市碳排放的科学研究、低碳战略制定及公众对于城市低碳发展的监督和参与。数据缺乏和多源数据的不确定性大是中国城市CO_2排放核算和低碳城市规划面临的重要问题和挑战,而这些问题同时也... 城市CO_2排放数据的可获取性和质量直接影响了城市碳排放的科学研究、低碳战略制定及公众对于城市低碳发展的监督和参与。数据缺乏和多源数据的不确定性大是中国城市CO_2排放核算和低碳城市规划面临的重要问题和挑战,而这些问题同时也导致中国低碳城市研究水平参差不齐。本研究使用自下而上建立的中国高空间分辨率网格数据(空间分辨率为1km),采用统一数据源和规范化、标准化数据处理方法,建立中国城市CO_2排放数据集,供研究者和决策者参考。城市CO_2排放计算借鉴国际上较为成熟和应用广泛的核算方法,包括范围1和范围2排放。以北京、上海、天津、重庆和广州5个典型城市的能源统计数据自上而下计算其CO_2排放作为参考水平,检验数据集的数值质量,结果显示5个城市的数据差异均不超过10%。中国城市CO_2排放整体呈现北方大于南方,东部高于中部和西部的空间格局。CO_2排放量较高的城市大多处于华北、东北以及华东沿海地区,西部地区城市CO_2排放量则较低。城市CO_2排放8个部门(工业能源、工业过程、农业、服务业、城镇生活、农村生活、交通、范围2排放)之间的相关性中,城镇生活和交通排放的相关性最高,并且呈现显著性(p<0.001),工业过程排放和服务业排放的相关性最弱且没有显著性。基于中国高空间分辨率网格数据的中国城市CO_2排放数据集的不断完善和发展,为中国城市CO_2排放研究奠定了重要的数据基础,为城市CO_2排放横向比较和对标工作提供了重要依据。 展开更多

关键词 城市 CO2排放数据集 中国高空间分辨率网格

在线阅读 下载PDF 职称材料

2005年中国城市CO2排放数据集 被引量：6

3

作者 蔡博峰 刘晓曼 +86 位作者 陆军 王金南 刘红光 陈洋 陈占明 丛建辉 崔志鹏 代春艳 董会娟 方恺 冯彤 郭杰 李芬 孟凡鑫 唐伟 王庚哲 谢运生 张建军 阿依吐尔逊·沙木西 布买日也木·买买提 蔡伟光 曾胜 常盼 陈前利 陈振国 单钰理 丁冠乔 独威 范敏 冯相昭 干晓宇 高壮飞 谷雨 何凌昊 何姚 胡鸣明 黄丽珍 黄桥 贾小平 菊春燕 蓝菁 李爽 李松 李耀光 李照令 刘合林 刘婧文 刘庆燕 刘竹 逯飞 马贤磊 欧金沛 潘栋 沈杨 税月 孙露 谭效时 唐敏 唐袆祺 王柯 王思亓 王香爱 王晓培 吴家杰 吴雪萍 肖连香 邢文婷 徐丽笑 叶瑞克 袁子坤 张飞云 张袆 张明 张琦峰 张曦文 张宇 赵晶 赵胜男 郑思伟 周来友 朱天琦 曹丽斌 冯乐 李栋 李一静 龙瀛 孙瑞红 《中国人口·资源与环境》 CSSCI CSCD 北大核心 2018年第4期1-7,共7页

2005年是中国承诺碳减排目标的基准年份,因而也是中国城市碳减排战略制定和近中期低碳转型的基准年份和对照年份。中国城市2005年CO_2排放数据的一致性、全面性和精准性对于中国所有城市和每个具体城市的目标考核和评估都有重要意义。... 2005年是中国承诺碳减排目标的基准年份,因而也是中国城市碳减排战略制定和近中期低碳转型的基准年份和对照年份。中国城市2005年CO_2排放数据的一致性、全面性和精准性对于中国所有城市和每个具体城市的目标考核和评估都有重要意义。基于中国高空间分辨率网格数据(CHRED 2.0)、城市层面统计数据以及大量现场调研和走访,建立2005年中国城市CO_2排放数据集,包括工业能源排放、工业过程排放、农业排放、服务业排放、城镇生活排放、农村生活排放、交通排放7个部门的直接排放数据和间接排放数据。该数据集的建立汇总了86名研究人员的工作成果,在企业、城市不同行业与部门、城市工业和城市总化石能源等不同层面进行了大量的交叉验证和数据分析,有效保障了数据的精确性和准确性。结果显示,2005年中国城市碳排放呈现出较大的体量差异和空间格局差异。排放前10的城市几乎比排放后10的城市的排放量高出两个数量级。高排放城市基本都是城市群的核心城市。东部城市直接排放占全国直接排放比例最高,达到44.59%,其次是西部城市21.76%,中部城市22.70%,东北城市10.95%。 展开更多

关键词 城市 CO 2排放数据集 中国高空间分辨率网格

在线阅读 下载PDF 职称材料

融入辅助数据集的面向对象土地利用分类研究 被引量：1

4

作者 李坤玉 王雪梅 +1 位作者 李锐 李顿 《中山大学学报（自然科学版）（中英文）》 CAS CSCD 北大核心 2024年第1期34-44,共11页

土地利用分类结果对国土空间的管理至关重要。为提高土地利用分类结果的准确性,本文以博湖县为研究区,使用Sentinel-2A影像提取光谱特征,并结合雷达、光谱指数、土壤和地形特征构建6个面向对象的土地利用分类模型,使用简单非迭代聚类(SN... 土地利用分类结果对国土空间的管理至关重要。为提高土地利用分类结果的准确性,本文以博湖县为研究区,使用Sentinel-2A影像提取光谱特征,并结合雷达、光谱指数、土壤和地形特征构建6个面向对象的土地利用分类模型,使用简单非迭代聚类(SNIC)算法和随机森林(RF)算法对影像进行分割和分类,得出模型的分类精度以及特征重要性排序,最后使用分类回归树(CART)算法验证辅助数据集对提高分类精度的影响。结果表明:使用SNIC算法分割影像时,分别设置种子大小为17、紧凑度为0时,该研究区影像分割效果最好。基于RF分类算法,在只使用光谱信息进行分类时分类精度最低,加入雷达、光谱指数、土壤和地形特征中任何一个辅助数据集均可提高土地利用的分类精度,其中地形特征对提高分类精度的效果更显著,加入所有辅助数据集时分类精度达到最高,OA=92.34%,Kappa系数=0.91。使用CART算法进行分类有效性验证得出,基于RF算法的分类效果优于CART算法。基于遥感云平台的SNIC分割算法,融入辅助数据集进行面向对象分类,为提高土地利用分类精度提供参考。 展开更多

关键词 土地利用分类 辅助数据集 SNIC分割 面向对象 随机森林 Sentinel-2A影像

在线阅读 下载PDF 职称材料

面向HTTP/2流量多路复用特征的加密视频识别方法

5

作者 吴桦 罗浩 +3 位作者 赵士顺 刘嵩涛 程光 胡晓艳 《软件学报》 北大核心 2025年第7期3375-3404,共30页

视频应用平台的兴起使得视频得以快速传播并渗透社会生活的各个方面.网络中传播的视频也混杂了一些公害视频,因此网络空间安全监管迫切需要准确地识别网络中加密传播的公害视频.已有方法在网络主要接入点采集流量数据,提取加密视频流量... 视频应用平台的兴起使得视频得以快速传播并渗透社会生活的各个方面.网络中传播的视频也混杂了一些公害视频,因此网络空间安全监管迫切需要准确地识别网络中加密传播的公害视频.已有方法在网络主要接入点采集流量数据,提取加密视频流量的特征,基于公害视频库,通过流量特征的匹配识别出被传输的公害视频.然而随着视频加密传输协议的更新,使用新型多路复用技术的HTTP/2协议已经大规模部署应用,这导致传统的基于HTTP/1.1传输特征的流量分析方法无法识别使用HTTP/2传输的加密视频.此外,当前的研究大多针对的是播放时分辨率固定的视频,很少考虑到流媒体自适应播放时分辨率切换给识别带来的影响.针对以上问题,详细分析了视频平台使用HTTP/2协议传输视频时音视频数据长度发生偏移的原理,并提出了将多路复用的加密数据精准修正还原为组合音视频数据单元长度的方法,从而构建出精准还原的加密视频修正指纹.然后,利用加密视频修正指纹和大型视频明文指纹库,提出了视频修正指纹滑动匹配机制和以隐马尔可夫模型与维特比算法为基础的加密视频识别模型.该模型使用动态规划方法解决了视频分辨率自适应切换带来的问题,其在40万级的Facebook和Instagram真实指纹库场景中,对固定分辨率和自适应分辨率的加密视频的识别准确率分别达到了98.41%和97.91%.使用Triller、Twitter和芒果TV这3个视频平台进行了方法通用性和泛化性验证.与类似工作在识别效果、泛化性和时间开销方面的比较进一步验证了所提出的方法具有较高的应用价值. 展开更多

关键词 HTTP/2 DASH 大型数据集 修正指纹 HMM 加密视频识别

在线阅读 下载PDF 职称材料

产业集群成员间异构信息系统的数据集成研究 被引量：1

6

作者 杨水利 何辉 +1 位作者 董鹏刚 和征 《情报杂志》 CSSCI 北大核心 2005年第9期7-10,共4页

产业集群成员机构中异构信息系统之间出现的信息孤岛,成为集群成员之间信息共享的瓶颈,进而影响到产业集群内的分工协作、创新活动以及整个集群的竞争力。在研究产业集群中的成员企业相互协作和优势互补的基础上,提出了一种基于XML和SOA... 产业集群成员机构中异构信息系统之间出现的信息孤岛,成为集群成员之间信息共享的瓶颈,进而影响到产业集群内的分工协作、创新活动以及整个集群的竞争力。在研究产业集群中的成员企业相互协作和优势互补的基础上,提出了一种基于XML和SOAP技术的数据集成方法,通过数据集成软件实现了成员企业间的信息共享,解决了成员企业间异构信息系统出现的信息孤岛问题。 展开更多

关键词 产业集群 异构信息系统 数据集成 XML SOAP J2EE 信息孤岛 信息共享 分工协作 优势互补

在线阅读 下载PDF 职称材料

基于FE-P2Pnet的无人机小麦图像麦穗计数方法 被引量：4

7

作者 鲍文霞 苏彪彪 +2 位作者 胡根生 黄承沛 梁栋 《农业机械学报》 EI CAS CSCD 北大核心 2024年第4期155-164,289,共11页

针对无人机图像背景复杂、小麦密集、麦穗目标较小以及麦穗尺寸不一等问题,提出了一种基于FE-P2Pnet(Feature enhance-point to point)的无人机小麦图像麦穗自动计数方法。对无人机图像进行亮度和对比度增强,增大麦穗目标与背景之间的... 针对无人机图像背景复杂、小麦密集、麦穗目标较小以及麦穗尺寸不一等问题,提出了一种基于FE-P2Pnet(Feature enhance-point to point)的无人机小麦图像麦穗自动计数方法。对无人机图像进行亮度和对比度增强,增大麦穗目标与背景之间的差异度,减少叶、秆等复杂背景因素的影响。引入了基于点标注的网络P2Pnet作为基线网络,以解决麦穗密集的问题。同时,针对麦穗目标小引起的特征信息较少的问题,在P2Pnet的主干网络VGG16中添加了Triplet模块,将C(通道)、H(高度)和W(宽度)3个维度的信息交互,使得主干网络可以提取更多与目标相关的特征信息;针对麦穗尺寸不一的问题,在FPN(Feature pyramid networks)上增加了FEM(Feature enhancement module)和SE(Squeeze excitation)模块,使得该模块能够更好地处理特征信息和融合多尺度信息;为了更好地对目标进行分类,使用Focal Loss损失函数代替交叉熵损失函数,该损失函数可以对背景和目标的特征信息进行不同的权重加权,进一步突出特征。实验结果表明,在本文所构建的无人机小麦图像数据集(Wheat-ZWF)上,麦穗计数的平均绝对误差(MAE)、均方误差(MSE)和平均精确度(ACC)分别达到3.77、5.13和90.87%,相较于其他目标计数回归方法如MCNN(Multi-column convolutional neural network)、CSRnet(Congested scene recognition network)和WHCNETs (Wheat head counting networks)等,表现最佳。与基线网络P2Pnet相比,MAE和MSE分别降低23.2%和16.6%,ACC提高2.67个百分点。为了进一步验证本文算法的有效性,对采集的其它4种不同品种的小麦(AK1009、AK1401、AK1706和YKM222)进行了实验,实验结果显示,麦穗计数MAE和MSE平均为5.10和6.17,ACC也达到89.69%,表明本文提出的模型具有较好的泛化性能。 展开更多

关键词 麦穗计数 无人机图像 FE-P2Pnet FEM Wheat-ZWF数据集

在线阅读 下载PDF 职称材料

基于云计算的P2P流媒体服务器集群部署算法 被引量：8

8

作者 莫志超 张未展 +1 位作者 王军 郑炎 《计算机应用》 CSCD 北大核心 2014年第2期365-368,共4页

针对云计算数据中心网络(DCN)环境下,P2P流媒体服务器集群部署引起的较高带宽占用问题,提出了一种基于云计算的P2P流媒体服务器集群部署方法。该方法将P2P流媒体服务器集群部署建模为一个二次分配问题,并基于蚁群算法,寻找每个虚拟流媒... 针对云计算数据中心网络(DCN)环境下,P2P流媒体服务器集群部署引起的较高带宽占用问题,提出了一种基于云计算的P2P流媒体服务器集群部署方法。该方法将P2P流媒体服务器集群部署建模为一个二次分配问题,并基于蚁群算法,寻找每个虚拟流媒体服务器与每个部署点之间的映射关系,实现基于云计算的P2P流媒体服务器集群部署。通过仿真实验证明,基于云计算的P2P流媒体服务器集群部署算法可以有效地减少云计算平台DCN网络带宽占用。 展开更多

关键词 云计算 P2P 流媒体服务器 集群部署 数据中心网络

在线阅读 下载PDF 职称材料

MMShip:中分辨率多光谱卫星图像船舶数据集 被引量：3

9

作者 陈丽 李临寒 +2 位作者 王世勇 高思莉 叶祥舟 《光学精密工程》 EI CAS CSCD 北大核心 2023年第13期1962-1972,共11页

针对现有遥感船舶数据集均为裁剪后的图像,用数据集训练的检测算法直接运用于卫星图像原始尺度时检测效果较差的问题,建立了可见光和近红外4个波段的多光谱卫星船舶数据集MMShip,数据集同时包含卫星图像的原始尺度数据和切割后的小尺度... 针对现有遥感船舶数据集均为裁剪后的图像,用数据集训练的检测算法直接运用于卫星图像原始尺度时检测效果较差的问题,建立了可见光和近红外4个波段的多光谱卫星船舶数据集MMShip,数据集同时包含卫星图像的原始尺度数据和切割后的小尺度船舶数据。本数据集引入多波段信息,弥补现有数据集多为可见光图像,而可见光容易受到光照条件等影响的缺点。在全球海域内下载云量低于3的Sentinel-2卫星图像,进行大气校正后只选取10 m分辨率的红绿蓝和近红外4个波段,以景为单位筛选出包含有船舶的图像。把筛选后的图像按无重叠的方式切分为512×512,剔除其中不包含船舶目标的图像。然后,使用LabelImage软件对小尺度数据进行了水平框标注,再将标注数据反推至原始尺度得到原始尺度下的标注信息。最后,利用几种典型的检测算法在切割后的MMShip小尺度数据集上进行了可见光、近红外、多光谱对比实验。构建了一个涵盖不同场景的多光谱卫星船舶目标数据集,包含497景原始尺度标注数据和裁剪后的5 016组船舶目标图像。对比实验验证了近红外波段信息的补充有助于提高船舶目标检测算法的精度。多光谱船舶数据集MMShip可用于卫星图像尺度和普通图像尺度的多光谱船舶目标检测算法研究。 展开更多

关键词 多光谱遥感 数据集 船舶目标 Sentinel-2

在线阅读 下载PDF 职称材料

不同风场数据集对台风期间海浪模拟的影响 被引量：6

10

作者 李新文 丁骏 +2 位作者 黄君宝 员鹏 谢东风 《水利水运工程学报》 CSCD 北大核心 2021年第6期34-42,共9页

风场资料的精度和适用性对海浪的准确模拟至关重要。选取ERA5、CCMP和CFSv2等3个常用的风场数据集,以2106号“烟花”台风为例对比不同数据集在台风浪模拟方面的表现。结果表明,采用3个风场的模拟结果均很好地再现了台风期间海浪的增长... 风场资料的精度和适用性对海浪的准确模拟至关重要。选取ERA5、CCMP和CFSv2等3个常用的风场数据集,以2106号“烟花”台风为例对比不同数据集在台风浪模拟方面的表现。结果表明,采用3个风场的模拟结果均很好地再现了台风期间海浪的增长和衰减过程,其中ERA5和CCMP风场计算的波高较为一致,而采用CFSv2风场的模拟结果明显大于另2个风场。选取4个外海浮标站,对比3个风场的模拟结果与实测波高的差异。统计发现,ERA5风场的模拟结果最优,CCMP风场的模拟结果次之,而CFSv2风场的模拟结果较实测值偏大。在过程最大波高的模拟精度方面,CCMP风场的模拟结果最优,ERA5风场的模拟结果在台州外站明显偏小,而CFSv2风场计算的4个浮标站的过程最大波高均高于实测值。 展开更多

关键词 风场数据集 ERA5 CCMP CFSv2 SWAN海浪模型

在线阅读 下载PDF 职称材料

基于NL2SQL的兵棋数据智能统计分析方法研究 被引量：1

11

作者 殷来祥 李志强 付琼莹 《系统仿真学报》 CAS CSCD 北大核心 2023年第9期2000-2010,共11页

面对海量的兵棋数据,传统界面查询的方式已经无法满足指挥员快速、全面、精准查询数据的要求。通过深入分析兵棋数据特点与主流NL2SQL(natural language to struct query language)模型的缺陷,提出了一套适合兵棋数据智能统计查询的解... 面对海量的兵棋数据,传统界面查询的方式已经无法满足指挥员快速、全面、精准查询数据的要求。通过深入分析兵棋数据特点与主流NL2SQL(natural language to struct query language)模型的缺陷,提出了一套适合兵棋数据智能统计查询的解决方案。针对领域数据集缺乏,提出了一套基于人机协助、动态迭代的兵棋数据集构建方案;针对兵棋查询问句时间敏感的问题,提出了一套“规则+深度学习”的时间表达式识别与规范方法;针对兵棋数据量大提取查询值困难的问题,修改完善了Bridge模型的值提取与SQL生成架构。综合运用以上方案,使兵棋数据查询的精准匹配准确率达到75%以上。 展开更多

关键词 兵棋 NL2SQL 数据集 时间处理 统计查询

在线阅读 下载PDF 职称材料

基于BiLSTM的NL2SQL模型 被引量：2

12

作者 邰伟鹏 刘杨 +2 位作者 王小林 郑啸 钟亮 《计算机应用与软件》 北大核心 2024年第3期34-40,共7页

随着互联网技术的发展,很多应用为大众提供金融量化服务,而大部分用户不具备金融或计算机专业知识,他们期望使用自然语言查询数据,因此自然语言转SQL(NL2SQL)被迫切需要。针对此问题,提出一种基于双向长短期记忆模型(BiLSTM)的中文金融N... 随着互联网技术的发展,很多应用为大众提供金融量化服务,而大部分用户不具备金融或计算机专业知识,他们期望使用自然语言查询数据,因此自然语言转SQL(NL2SQL)被迫切需要。针对此问题,提出一种基于双向长短期记忆模型(BiLSTM)的中文金融NL2SQL算法,分为编码和解码阶段。在编码阶段,利用BiLSTM和注意力机制生成特征向量。在解码阶段,根据SQL的语法规则,将SQL生成解耦为九个分类任务,各个任务间相互依赖联合学习,之后生成复杂的SQL语句。除模型外,还训练出包含金融词汇的向量库,构建金融领域的数据集。通过在此数据集上实验验证,结果表明,该方法准确率更高,能有效解决金融领域SQL生成问题,并在某金融量化分析系统中实现。 展开更多

关键词 NL2SQL BiLSTM 注意力机制 向量库 数据集

在线阅读 下载PDF 职称材料

基于多重卷积神经网络跨数据集图像分类 被引量：5

13

作者 刘鑫童 刘立波 张鹏 《计算机工程与设计》 北大核心 2018年第11期3549-3554,共6页

为解决不同数据集共同类图像特征学习能力弱的问题,采用深度学习算法模型,提出一种基于多重卷积神经网络的跨数据集图像分类方法。以中值滤波预处理后的图像作为网络输入,在两个池化层之间采用两组连续卷积层,卷积特征提取和池化后,采... 为解决不同数据集共同类图像特征学习能力弱的问题,采用深度学习算法模型,提出一种基于多重卷积神经网络的跨数据集图像分类方法。以中值滤波预处理后的图像作为网络输入,在两个池化层之间采用两组连续卷积层,卷积特征提取和池化后,采用L2范数正则化的Softmax损失函数作为模型分类器,完成多重卷积神经网络分类的训练和测试。实验结果表明,相比于传统JDA方法、TCA方法和KPCA方法,该方法在经典数据集Caltech256、Amazon、Webcam和Dslr上具有更好的特征提取能力和更高的平均准确率。 展开更多

关键词 跨数据集分类 卷积神经网络 多重卷积 特征学习 L2正则化

在线阅读 下载PDF 职称材料

一种基于多核集群的海量数据加密存储策略研究

14

作者 武艳娜 赵泽茂 +1 位作者 胡晶芳 梁斌 《信息网络安全》 2015年第8期35-40,共6页

随着互联网和云计算技术的快速发展,云计算中海量用户隐私和数据的安全问题已经越来越引起人们的关注,而加密是保护数据安全的首选方法。为了快速而有效地实现海量数据的安全存储,文章在研究多核处理器集群在海量数据加密存储中的应用... 随着互联网和云计算技术的快速发展,云计算中海量用户隐私和数据的安全问题已经越来越引起人们的关注,而加密是保护数据安全的首选方法。为了快速而有效地实现海量数据的安全存储,文章在研究多核处理器集群在海量数据加密存储中的应用的基础上,提出在多核Linux集群上使用混合Open MP&MPI技术来处理海量数据的解决方案,为多核集群提供在集群节点内部以及节点之间的并行策略,实现海量数据并行处理的层次结构化。同时采用并行虚拟文件系统PVFS2作为多核集群的文件系统,利用其并行I/O的特点实际解决集群系统中海量数据并行存储的问题。文章在多核集群上开发了一个海量数据加密与存储系统摸型。实验结果表明,该系统模型不仅能够有效实现海量数据的存储,还能为海量数据的安全起到一定的保护作用。 展开更多

关键词 多核集群 海量数据 加密存储 OPEN MP MPI PVFS2

在线阅读 下载PDF 职称材料

基于Curvelet变换的缺失地震数据插值方法 被引量：38

15

作者 刘国昌 陈小宏 +2 位作者 郭志峰 刘华锋 高建军 《石油地球物理勘探》 EI CSCD 北大核心 2011年第2期237-246,159,共10页

Curvelet变换具有局部性、多尺度性和多方向性,在处理非稳态地震信号中具有较大的优势,可以利用Curvelet变换的压缩特性重建缺失的地震数据。本文首先分析了基于稀疏变换的缺失地震数据插值的基本原理,在反问题正则化理论框架下,针对L2... Curvelet变换具有局部性、多尺度性和多方向性,在处理非稳态地震信号中具有较大的优势,可以利用Curvelet变换的压缩特性重建缺失的地震数据。本文首先分析了基于稀疏变换的缺失地震数据插值的基本原理,在反问题正则化理论框架下,针对L2范数约束和L1范数约束条件,分析了两种约束的差异,着重阐述了基于Curvelet变换的L1范数约束的插值方法,其优点在于对非线性同相轴不需要分窗口处理,并将凸集投影算法(POCS)引入到Curvelet变换的插值方法中,通过采用按指数规律衰减的阈值参数加快了迭代收敛的速度。理论和实际算例验证了Curvelet变换插值方法的有效性。 展开更多

关键词 地震数据 重建 CURVELET变换 凸集投影 L2范数 L1范数

在线阅读 下载PDF 职称材料

钢板表面缺陷图像增强与自动标注方法研究

16

作者 杨璐雅 黄新波 +1 位作者 任玉成 韩琪 《机械科学与技术》 北大核心 2025年第3期445-452,共8页

数据标注为机器学习提供了大量带标签的数据,在数据集制作时需要借助各种标注工具手动对图像进行画框标注,受主观因素影响较大,且工业现场环境复杂,采集到的图像质量不稳定,也会影响标注效果。因此提出一种改进MSR(Multi-scale retinex... 数据标注为机器学习提供了大量带标签的数据,在数据集制作时需要借助各种标注工具手动对图像进行画框标注,受主观因素影响较大,且工业现场环境复杂,采集到的图像质量不稳定,也会影响标注效果。因此提出一种改进MSR(Multi-scale retinex)钢板缺陷图像数据集增强算法和基于图像分块和像素差分的自适应目标框标注算法,首先在MSR基础上提出一种自适应权值计算方法对采集到的缺陷图像进行增强,通过计算信息熵占比自动确定权值Wk,克服了传统MSR算法需要人工调整权值的缺点;然后为了解决直接对整幅图像提取目标边界计算量太大的问题,提出一种分块计算像素差分的方法,分别计算每个子块图像的均值矩阵和2阶差分矩阵,通过判别目标在各个子块的分布情况,选取合适的子块分别计算矩形框的4个边界,代替人工画框辅助数据集的标注,并采用Faster R-CNN和YOLOv5进行缺陷检测验证。结果表明:提出算法的平均IoU为0.87,平均检测时间为457 ms,在公开数据集上的平均IoU和检测时间分别为0.84和473 ms,性能均优于其他方法,基于提出算法Faster R-CNN和YOLOv5的检测准确率分别提升了4.8%和5.9%,可以为深度学习模型提供质量稳定的数据集。 展开更多

关键词 数据标注 深度学习 数据集增强 像素2阶差分 自适应目标框标注

在线阅读 下载PDF 职称材料

偏序集理论在DEA相关理论中的应用研究 被引量：5

17

作者 马占新 《系统工程学报》 CSCD 2002年第3期193-198,235,共7页

在文 [1]的基础上 ,刻画了 DEA有效 (C2 WH)的本质特征 ,给出了决策单元为 DEA有效 (C2 WH)的一个充要条件 ,论述了偏序集理论在分析有效生产前沿面构成、研究数据变换性质、讨论模型关系、分析决策单元变更以及指标增减对 DEA有效性影... 在文 [1]的基础上 ,刻画了 DEA有效 (C2 WH)的本质特征 ,给出了决策单元为 DEA有效 (C2 WH)的一个充要条件 ,论述了偏序集理论在分析有效生产前沿面构成、研究数据变换性质、讨论模型关系、分析决策单元变更以及指标增减对 DEA有效性影响等方面的应用 .针对 4个典型 DEA模型 。 展开更多

关键词 偏序集理论 DEA 数据包络分析 有效性 RGS^2模型

在线阅读 下载PDF 职称材料

H.264编码器的SSE2指令级优化 被引量：1

18

作者 王琰 向校萱 祁燕 《计算机工程与应用》 CSCD 2012年第10期217-221,共5页

H.264视频编码标准采用了很多新技术,具有更优越的编码效率,同时也增加了计算复杂度,无法满足实时应用。由于单指令多数据扩展指令集2(SSE2)的并行运算能力可以提高计算机对多媒体数据的实时处理。文中主要采用了SSE2对H.264中的一些耗... H.264视频编码标准采用了很多新技术,具有更优越的编码效率,同时也增加了计算复杂度,无法满足实时应用。由于单指令多数据扩展指令集2(SSE2)的并行运算能力可以提高计算机对多媒体数据的实时处理。文中主要采用了SSE2对H.264中的一些耗时较多的关键模块,例如整数像素运动估计中计算SAD、整数DCT变换、量化、Hadamard变换以及亚像素运动估计中计算SATD进行了指令级优化。实验结果表明,经过优化后,在保持视频图像质量的前提下,相应模块运行速度得到了提高,使H.264编码器整体的编码速度较好地满足实时要求。 展开更多

关键词 H.264编码 绝对误差和 整数DCT变换 变换绝对差值总和 单指令多数据扩展指令集2(SSE2)

在线阅读 下载PDF 职称材料

一种基于节点带宽的自适应数据调度策略在PPVoD系统中的应用研究

19

作者 黄志艳 《山东农业大学学报（自然科学版）》 CSCD 北大核心 2013年第1期127-132,共6页

本文提出了基于节点带宽的自适应数据调度策略。该策略在实施过程中,能够考虑流媒体系统中节点服务能力、多层反馈队列管理数据段的缓冲区、数据调度策略等相关制约流媒体系统服务质量的要素,因此,该策略尽力的降低数据传输时延,杜绝由... 本文提出了基于节点带宽的自适应数据调度策略。该策略在实施过程中,能够考虑流媒体系统中节点服务能力、多层反馈队列管理数据段的缓冲区、数据调度策略等相关制约流媒体系统服务质量的要素,因此,该策略尽力的降低数据传输时延,杜绝由于某一单个的节点突然在覆盖网中丢失联络而造成的视频播放不流畅等结果,保证数据的接受率。实验结果表明:基于节点带宽的自适应数据调度策略随着节点个数的增多,能够降低数据传输时延,其效果优于经典的Coolstreaming和Tree算法。 展开更多

关键词 P2P 流媒体 数据调度 节点集

在线阅读 下载PDF 职称材料

基于代价敏感决策树的P2P网络借贷风险评估 被引量：7

20

作者 马鹏举 王胤 +2 位作者 余龙 李传斌 邝砾 《计算机集成制造系统》 EI CSCD 北大核心 2018年第7期1880-1886,共7页

为了提高P2P网络借贷平台的风险控制能力,提出一种基于多特征融合的、代价敏感决策树的网络借贷项目风险评估方法。该方法首先从互联网借贷平台上提供的借款人信息中构建借款人信用特征,然后综合借款人的历史借款信息、个人信用特征及... 为了提高P2P网络借贷平台的风险控制能力,提出一种基于多特征融合的、代价敏感决策树的网络借贷项目风险评估方法。该方法首先从互联网借贷平台上提供的借款人信息中构建借款人信用特征,然后综合借款人的历史借款信息、个人信用特征及项目特征,通过构建ROC曲线下面积最大化、互信息最小化为目标的特征选择算法,选择出与项目风险评估最相关且冗余性最少的特征集合,再通过改进的基于代价敏感的决策树算法对借款项目进行风险评估。实验表明,该方法与相关文献中提到的方法以及一些传统分类器相比,在P2P网络借贷风险评估上有更优的表现。 展开更多

关键词 P2P网络借贷 决策树算法 代价敏感 非均衡数据集

在线阅读 下载PDF 职称材料