期刊文献+
共找到10篇文章
< 1 >
每页显示 20 50 100
基于LabVIEW的扫描探针电子能谱仪离线数据处理系统 被引量:1
1
作者 徐春凯 刘文杰 +4 位作者 周霞 魏征 张盼科 陈向军 徐克尊 《核电子学与探测技术》 CAS CSCD 北大核心 2010年第5期680-685,共6页
报道了自行搭建的扫描探针电子能谱仪(SPEES)的离线数据处理系统。该系统是由国家仪器公司(National Instrument,NI)开发的图形化语言LabVIEW(Laboratory Virtual Instrument Engineering Workbench)来实现的,能够根据我们SPEES实验中... 报道了自行搭建的扫描探针电子能谱仪(SPEES)的离线数据处理系统。该系统是由国家仪器公司(National Instrument,NI)开发的图形化语言LabVIEW(Laboratory Virtual Instrument Engineering Workbench)来实现的,能够根据我们SPEES实验中能谱测量的不同模式(扫描模式和非扫描模式)来选择相应的处理模式。功能包括"文件批处理"、"方位角选择"、"原点校正"、"能量刻度"和"能谱处理及效率修正",同时还能对电子密度分布、角分布、道数分布和能量分布成像。该系统的研制成功为SPEES实验的顺利进行打下了基础。 展开更多
关键词 扫描探针电子能谱仪 LABVIEW 离线数据处理
在线阅读 下载PDF
基于DIANE的BESⅢ分布式离线数据处理
2
作者 毛虎 李卫东 +10 位作者 邹佳恒 毛泽普 伍灵慧 黄彬 田浩来 邓子艳 张瑶 袁野 马秋梅 韩艳良 安芬芬 《核电子学与探测技术》 CAS CSCD 北大核心 2012年第2期136-140,共5页
北京谱仪Ⅲ(BESⅢ)是北京正负电子对撞机Ⅱ(BEPCⅡ)上用于τ-粲物理研究的大型通用磁谱仪。BESⅢ实验数据经过离线处理系统重建后才能用于物理分析。论文主要研究了BESⅢ分布式离线数据处理。基于DIANE软件,建立了一个分布式系统用于数... 北京谱仪Ⅲ(BESⅢ)是北京正负电子对撞机Ⅱ(BEPCⅡ)上用于τ-粲物理研究的大型通用磁谱仪。BESⅢ实验数据经过离线处理系统重建后才能用于物理分析。论文主要研究了BESⅢ分布式离线数据处理。基于DIANE软件,建立了一个分布式系统用于数据的事例级分布式处理。该系统在漂移室刻度的应用表明,性能能够满足BESⅢ实验的需求。 展开更多
关键词 北京谱仪Ⅲ 离线数据处理 分布式系统 刻度
在线阅读 下载PDF
多核平台上的BESⅢ离线数据并行处理
3
作者 王聪 程耀东 +3 位作者 阚文枭 杜然 徐琪 陈刚 《计算机应用》 CSCD 北大核心 2015年第A02期41-43,48,共4页
基于已完成重大升级改造的北京正负电子对撞机(BEPCII)和北京谱仪(BESIII)的数据分析工作正在全面展开。作为数据分析的基础和关键的BESIII离线物理软件,它的性能决定着数据分析的进度和结果。针对BESIII实验物理数据的并行计算处理,在... 基于已完成重大升级改造的北京正负电子对撞机(BEPCII)和北京谱仪(BESIII)的数据分析工作正在全面展开。作为数据分析的基础和关键的BESIII离线物理软件,它的性能决定着数据分析的进度和结果。针对BESIII实验物理数据的并行计算处理,在多核CPU硬件结构基础上,采用多进程编程技术进而实现文件级别的多进程BESIII离线数据并行处理。性能测试表明多进程并行处理可以减少资源消耗而且能够有效地提高数据分析的运算速度,从而为BESIII实验早出快出高质量的物理成果奠定坚实的基础。 展开更多
关键词 北京谱仪III 离线数据处理 多进程 并行计算 节点调度
在线阅读 下载PDF
北京谱仪数据处理集群计算系统介绍
4
作者 孙永昭 许冬 +1 位作者 张少强 杨挺 《核电子学与探测技术》 CAS CSCD 北大核心 2004年第6期753-757,共5页
介绍了北京谱仪离线数据处理集群计算系统的结构,硬件和软件系统的配置和性能情况,对作业管理软件的使用和集群计算系统的运行性能作了详细描述。
关键词 集群计算 软件系统 离线数据处理 硬件 配置 描述 性能 北京谱仪
在线阅读 下载PDF
BESⅢ实验数据并行处理的研究
5
作者 田浩来 李卫东 +8 位作者 邹佳恒 何苗 毛泽普 刘春秀 袁野 黄彬 毛虎 邓子艳 马秋梅 《核电子学与探测技术》 CAS CSCD 北大核心 2012年第2期132-135,140,共5页
北京谱仪Ⅲ(BESⅢ)是北京正负电子对撞机Ⅱ(BEPCⅡ)上的一台大型通用磁谱仪,用于τ-粲物理实验研究。BESⅢ离线数据处理系统将实验获取的探测器原始数据转换为适合于物理分析的数据。主要研究了BESⅢ实验数据的并行计算处理。针对目前... 北京谱仪Ⅲ(BESⅢ)是北京正负电子对撞机Ⅱ(BEPCⅡ)上的一台大型通用磁谱仪,用于τ-粲物理实验研究。BESⅢ离线数据处理系统将实验获取的探测器原始数据转换为适合于物理分析的数据。主要研究了BESⅢ实验数据的并行计算处理。针对目前计算机的多核CPU硬件结构,采用多线程编程技术,实现了BESⅢ离线数据处理事例级别的多线程并行计算。性能测试表明多线程并行处理能够有效地提高运算速度,同时减少内存消耗。 展开更多
关键词 北京谱仪III 离线数据处理 多线程 事例级并行计算
在线阅读 下载PDF
基于MPI的分布式数据处理系统 被引量:2
6
作者 赵宝琦 李卫东 +2 位作者 邹佳恒 林韬 颜田 《计算机工程》 CAS CSCD 北大核心 2019年第7期20-25,共6页
为简化江门中微子实验的离线数据处理流程,减少资源消耗,提出一种在分布式计算环境中进行数据处理的通用软件系统。基于信息传递接口实现节点间的通信与数据交换,使用Master/Worker架构对计算作业生命周期进行管理,包括计算作业拆分、... 为简化江门中微子实验的离线数据处理流程,减少资源消耗,提出一种在分布式计算环境中进行数据处理的通用软件系统。基于信息传递接口实现节点间的通信与数据交换,使用Master/Worker架构对计算作业生命周期进行管理,包括计算作业拆分、计算资源分配以及计算任务执行与监控。测试结果表明,该系统具有良好的可扩展性,其产生的数据与人工逐步执行作业脚本运行模拟软件产生的数据一致。 展开更多
关键词 高能物理 江门中微子实验 离线数据处理 分布式计算 信息传递接口
在线阅读 下载PDF
BESIII MDC数据处理系统
7
作者 刘春燕 贾卢魁 +10 位作者 毛泽普 马想 邓子艳 王纪科 刘怀民 伍灵慧 李卫东 吴智 罗涛 曹学香 毛虎 《核电子学与探测技术》 CAS CSCD 北大核心 2012年第1期25-31,共7页
北京谱仪III(BESIII)是北京正负电子对撞机II(BEPCII)上的一台大型通用磁谱仪,用于τ-粲物理实验研究。主漂移室(MDC)是BESIII上的主要探测器之一,用于测量带电粒子的位置,动量和粒子类型的鉴别。论文主要介绍了BESIII MDC事例重建系统... 北京谱仪III(BESIII)是北京正负电子对撞机II(BEPCII)上的一台大型通用磁谱仪,用于τ-粲物理实验研究。主漂移室(MDC)是BESIII上的主要探测器之一,用于测量带电粒子的位置,动量和粒子类型的鉴别。论文主要介绍了BESIII MDC事例重建系统,其中包括T0的计算,径迹重建和径迹拟合,数据离线刻度,dE/dx的重建和刻度等软件的原理、结构以及各软件包的主要性能。 展开更多
关键词 离线数据处理 BESIII漂移室 事例重建 离线刻度
在线阅读 下载PDF
BESIII离线系统和性能测试 被引量:1
8
作者 孙永昭 李卫东 +35 位作者 毛泽普 马秋梅 马想 王亮亮 王纪科 邓子艳 尤郑昀 文硕频 边渐鸣 孙胜森 朱永生 刘怀民 刘春秀 伍灵慧 李海波 李刚 张长春 张令 张建勇 邹佳恒 邱进发 张瑶 张学尧 何苗 何康林 季晓斌 杨明 苑长征 冒亚军 俞国威 莫晓虎 袁野 曹国富 黄彬 谢宇广 臧石磊 《核电子学与探测技术》 CAS CSCD 北大核心 2007年第5期842-846,共5页
本文介绍了BESIII离线数据处理软件系统的构成以及数据处理的主要流程;给出了利用工具软件TAU(Tuning and Analysis Utilities)对系统性能进行的测试结果,据此结果估算了BESIII实验所需的计算资源,并且与BESIII设计报告的相关部分进行比... 本文介绍了BESIII离线数据处理软件系统的构成以及数据处理的主要流程;给出了利用工具软件TAU(Tuning and Analysis Utilities)对系统性能进行的测试结果,据此结果估算了BESIII实验所需的计算资源,并且与BESIII设计报告的相关部分进行比较,说明了BESIII计算机环境的设计基本满足BESIII离线数据处理的要求。 展开更多
关键词 北京谱仪BESIII 离线数据处理 性能测试
在线阅读 下载PDF
BESⅢ实验原始数据访问
9
作者 邹佳恒 张学尧 +7 位作者 李卫东 张瑶 曹国富 邓子艳 黄性涛 刘怀民 毛泽普 马秋梅 《核电子学与探测技术》 CAS CSCD 北大核心 2009年第5期1101-1104,1195,共5页
北京谱仪Ⅲ(BESⅢ)是北京正负电子对撞机Ⅱ(BEPCⅡ)上的一台大型通用磁谱仪,用于τ-粲物理实验研究。主要研究了BESⅢ原始数据的离线处理;利用原始数据转换服务实现了BESⅢ原始数据的访问;同时,对原始数据转换服务进行了优化和扩展以满... 北京谱仪Ⅲ(BESⅢ)是北京正负电子对撞机Ⅱ(BEPCⅡ)上的一台大型通用磁谱仪,用于τ-粲物理实验研究。主要研究了BESⅢ原始数据的离线处理;利用原始数据转换服务实现了BESⅢ原始数据的访问;同时,对原始数据转换服务进行了优化和扩展以满足高性能输入/输出和Monte Carlo模拟的需求。还完成了原始数据转换服务在BESⅢ在线系统中的重用,以及过滤原始数据的功能。 展开更多
关键词 离线数据处理 原始数据 数据转换服务 数据过滤
在线阅读 下载PDF
基于统计方法的Hive数据仓库查询优化实现 被引量:16
10
作者 王有为 王伟平 孟丹 《计算机研究与发展》 EI CSCD 北大核心 2015年第6期1452-1462,共11页
Map/Reduce是海量离线数据分析中广泛应用的并行编程模型。Hive数据仓库基于Map/Reduce实现了查询处理引擎,然而Map/Reduce框架在处理偏斜数据时会出现工作负载分布不均的问题。均衡计算模型(computation balanced model,CBM),其核心... Map/Reduce是海量离线数据分析中广泛应用的并行编程模型。Hive数据仓库基于Map/Reduce实现了查询处理引擎,然而Map/Reduce框架在处理偏斜数据时会出现工作负载分布不均的问题。均衡计算模型(computation balanced model,CBM),其核心思想是通过数据分布特征指导查询计划优化。相应研究贡献包括2部分,首先针对应用极广的GroupBy查询和Join查询建立了运行估价模型,确定了不同场景下查询计划的优化选择分支;其次基于Hive ETL机制设计了一种统计信息收集方法,解决了统计海量数据分布特征的问题。实验数据表明,通过CBM优化的GroupBy查询耗时节省了8%~45%,Join查询耗时节省了12%~46%;集群CPU负载均衡指标优化了60%~80%,I/O负载均衡指标优化了60%~90%。实验结果证实了基于CBM模型优化的查询计划生成器能显著均衡化Hive查询运行时的集群负载,并优化了查询处理效率。 展开更多
关键词 海量数据离线处理 分布式数据仓库 负载均衡 统计信息收集 查询优化
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部