-
题名气象数据归档元数据索引重组织的并行算法设计与验证
被引量：3
- 1
-
-
作者
许婧
任开军
-
机构
国防科学技术大学计算机学院
国防科学技术大学海洋科学与工程研究院
-
出处
《计算机工程与科学》
CSCD
北大核心
2016年第6期1078-1085,共8页
-
基金
公益性行业(气象)科研专项(GYHY201306003)
-
文摘
气象资料归档和检索系统(MARS)实现了气象科学数据包括数值预报产品的归档和检索管理。但是,随着精细化数值预报技术的提高,MARS系统管理的气象科学数据呈海量增长趋势,对归档和检索处理技术提出了新的挑战。针对MARS系统归档操作时物理视图元数据索引结构串行更新效率低的问题,提出一种并行处理更新方法。该方法能够有效降低数据归档时物理索引结构再组织的系统开销。实验表明,相比原始的串行更新算法,采用索引结构并行更新的处理方法,使系统物理视图元数据索引结构的最大更新效率平均提高3倍左右,从而提高了气象科学数据快速归档效率。
-
关键词
气象资料归档和检索系统
物理索引结构
并行更新
快速归档
-
Keywords
meterological archival and retrieval system （mars） ~ physical index structure
parallel updating
rapid archiving
-
分类号
TP393
[自动化与计算机技术—计算机应用技术]
-
-
题名气象数据归档与查询系统超立方体结构并行算法设计
被引量：4
- 2
-
-
作者
宋石磊
宋君强
任开军
-
机构
国防科学技术大学计算机学院
-
出处
《计算机工程与科学》
CSCD
北大核心
2014年第12期2410-2417,共8页
-
文摘
气象归档与查询系统(MARS)是欧洲中期天气预报中心(ECMWF)开发的用于多种类海量气象数据管理的框架,其核心是利用多维数据模型和数据立方体来组织和管理气象数据。重点研究了MARS系统的主要架构及其超立方体结构的数据索引方法,在此基础上提出了一种大数据背景下数据立方体的元数据查询优化和并行计算方法。实验表明,该方法能够有效缩短大数据量查询及归档情况下的系统响应时间。
-
关键词
气象归档与查询系统(mars)
元数据
多维数据模型
数据立方体
并行计算
-
Keywords
meteorological archival and retrieval system （mars）
metadata
multidimensional data model
data cube
parallel computing
-
分类号
TP392
[自动化与计算机技术—计算机应用技术]
-
