基于网格的分布式虚拟环境仿真海量数据管理 被引量：4

1

作者 刘小虎 蒋从锋 王乘 《计算机工程与设计》 CSCD 北大核心 2008年第4期931-933,共3页

分析了分布式虚拟环境仿真的特点,提出了基于网格的分布式虚拟环境仿真的海量数据管理框架。该框架结构采用分层结构,自底向上依次为网格节点、高性能通信系统、数据存储与处理系统和计算系统。给出了一个基于上述体系结构的原型系统。... 分析了分布式虚拟环境仿真的特点,提出了基于网格的分布式虚拟环境仿真的海量数据管理框架。该框架结构采用分层结构,自底向上依次为网格节点、高性能通信系统、数据存储与处理系统和计算系统。给出了一个基于上述体系结构的原型系统。对该原型系统的仿真结果表明,该海量数据管理体系结构设计符合虚拟环境仿真实时性、稳定性和高可靠性的要求。 展开更多

关键词 网格计算 海量数据管理 虚拟环境 分布式仿真 调度

在线阅读 下载PDF 职称材料

海量数据管理平台MDMP中并行加载与查询技术研究 被引量：1

2

作者 张丽 杨树强 +2 位作者 李爱平 贾焰 邹鹏 《计算机研究与发展》 EI CSCD 北大核心 2007年第z3期475-480,共6页

海量数据的产生对传统的数据库技术在数据存储、实时数据加载、实时数据查询等方面都提出了新的挑战.海量数据管理平台MDMP就是针对海量数据的存储及管理需求而研制的. MDMP中基于流水的多路并行加载技术提供了高性能的加载,并实现了在... 海量数据的产生对传统的数据库技术在数据存储、实时数据加载、实时数据查询等方面都提出了新的挑战.海量数据管理平台MDMP就是针对海量数据的存储及管理需求而研制的. MDMP中基于流水的多路并行加载技术提供了高性能的加载,并实现了在加载的同时进行实时查询;基于语义缓存的并行查询技术对于MDMP中频繁的聚集查询进行了优化,提高了查询速度.主要研究了这两个关键技术. 展开更多

关键词 海量数据管理平台 并行加载 并行查询

在线阅读 下载PDF 职称材料

分布式多媒体海量数据管理系统的设计与应用 被引量：2

3

作者 林观銮 曹元大 +1 位作者 梁万强 战莹 《山东科技大学学报（自然科学版）》 CAS 2002年第4期76-78,83,共4页

针对海量多媒体数据管理的特点 ,设计实现了基于分布式通信网络的海量多媒体数据管理系统。在对多媒体数据管理的关键技术进行分析的基础上 ,阐述了该管理系统的设计模型 ,各模块的功能以及系统所具有的分布性、实时性、同步性和良好服... 针对海量多媒体数据管理的特点 ,设计实现了基于分布式通信网络的海量多媒体数据管理系统。在对多媒体数据管理的关键技术进行分析的基础上 ,阐述了该管理系统的设计模型 ,各模块的功能以及系统所具有的分布性、实时性、同步性和良好服务质量的特点。并通过具体的应用实例 。 展开更多

关键词 海量多媒体数据管理系统 分布式通信网络 系统设计 多媒体数据库 系统结构

在线阅读 下载PDF 职称材料

面向物联网海量传感器采样数据管理的数据库集群系统框架 被引量：96

4

作者 丁治明 高需 《计算机学报》 EI CSCD 北大核心 2012年第6期1175-1191,共17页

物联网是目前国际和国内新兴的一项热门技术,正在给人们的生产和生活方式带来深刻的变革.物联网在带来诸多好处的同时,也给软件乃至整个信息技术领域带来了前所未有的挑战.该文针对物联网传感器采样数据管理中所面临的数据海量性、异构... 物联网是目前国际和国内新兴的一项热门技术,正在给人们的生产和生活方式带来深刻的变革.物联网在带来诸多好处的同时,也给软件乃至整个信息技术领域带来了前所未有的挑战.该文针对物联网传感器采样数据管理中所面临的数据海量性、异构性、时空敏感性、动态流式特性等问题,提出一种面向物联网海量传感器采样数据管理的数据库集群系统框架IoT-ClusterDB.实验结果表明,IoT-ClusterDB具有良好的传感器数据接入与查询处理性能,为物联网海量异构传感器采样数据的存储与查询处理提供了一种可行的解决方案. 展开更多

关键词 物联网 传感器 时空数据 海量数据管理 数据库集群系统

在线阅读 下载PDF 职称材料

基于分离存储技术的海量图像数据库管理系统的构建及实现

5

作者 黄斌 杨世洪 吴钦章 《计算机应用研究》 CSCD 北大核心 2005年第6期152-153,156,共3页

如何构建海量图像数据库管理系统才能实现图像的快速存储与显示是航测图像应用中的关键问题之一。主要从实现原理、算法流程、快速存储与显示技术三方面讨论了此问题,给出以缩略图替代原始图预览、内存流和特大图像动态显示为主要技术... 如何构建海量图像数据库管理系统才能实现图像的快速存储与显示是航测图像应用中的关键问题之一。主要从实现原理、算法流程、快速存储与显示技术三方面讨论了此问题,给出以缩略图替代原始图预览、内存流和特大图像动态显示为主要技术的整体解决方案,并介绍了一个基于上述技术的实例系统IMAGESee。 展开更多

关键词 海量图像数据库管理系统 缩略图 分离存储 动态显示

在线阅读 下载PDF 职称材料

经济、安全的海量数据生命周期管理方案 被引量：7

6

作者 刘难贵 周俭 贾宏 《计算机工程与设计》 CSCD 北大核心 2009年第19期4544-4548,共5页

介绍了一种海量数据生命周期管理的解决方案。该方案采用三级存储架构,以数据库与文件相结合的方式存储数据。该方案自主管理数据备份、数据恢复、数据迁移、介质检查、介质修复等任务,并将生命周期管理的压力从服务器分解到工作站,使... 介绍了一种海量数据生命周期管理的解决方案。该方案采用三级存储架构,以数据库与文件相结合的方式存储数据。该方案自主管理数据备份、数据恢复、数据迁移、介质检查、介质修复等任务,并将生命周期管理的压力从服务器分解到工作站,使硬件配置更灵活。该方案节省了开发成本,提高了数据的安全性。该方案正应用于某军工项目,性能稳定运行良好。详细介绍了自主管理过程的设计与实现。 展开更多

关键词 生命周期管理 海量数据 海量数据生命周期管理 三级存储 数据库与文件结合

在线阅读 下载PDF 职称材料

海量多波束水深数据快速处理及质量检查方法 被引量：8

7

作者 眭海刚 张光华 +2 位作者 卢之杰 肖志峰 肖静环 《人民长江》 北大核心 2008年第6期18-20,28,共4页

针对目前多波束水深数据的管理与应用存在的问题,提出了一种基于水深数据块管理的多时相水深数据组织与管理方法,利用水深数据快速压缩方法来构建水深金字塔模型,采用了实时投影、动态压缩和实时等深线生成技术来提高海量水深数据快速... 针对目前多波束水深数据的管理与应用存在的问题,提出了一种基于水深数据块管理的多时相水深数据组织与管理方法,利用水深数据快速压缩方法来构建水深金字塔模型,采用了实时投影、动态压缩和实时等深线生成技术来提高海量水深数据快速可视化效果。同时还对水深浅点的查找方法进行了探讨,并介绍了基于单源和多源数据的水深数据质量检查方法。最后设计并开发了"水深信息管理系统",该系统在渤海航路扫测中得到了实际应用,取得了良好效果。 展开更多

关键词 多波束水深 海量数据管理 动态压缩 实时投影 实时等深线生成 质量检查

在线阅读 下载PDF 职称材料

面向海量数据的在线流数据服务框架 被引量：3

8

作者 杨臻 杨志宏 肖汉 《计算机应用与软件》 CSCD 2016年第3期56-61,79,共7页

针对多应用共享海量流数据的问题,提出一个在线流数据服务框架。通过对多应用共享流数据场景进行分析和抽象,设计具有数据层、管理层和接口层的在线流数据服务框架。框架将流数据管理划分为索引建立、注册器、匹配器和内存清理四个组成... 针对多应用共享海量流数据的问题,提出一个在线流数据服务框架。通过对多应用共享流数据场景进行分析和抽象,设计具有数据层、管理层和接口层的在线流数据服务框架。框架将流数据管理划分为索引建立、注册器、匹配器和内存清理四个组成部分,并且通过一个专用的数据管理引擎对流数据进行管理。框架的提出为多应用流数据共享场景提供了一种统一管理流数据的方案。实验结果表明,相对与传统数据库,在线流数据服务框架在流数据写入速度能提高近5倍,在流数据的读取速度上提高4倍左右。 展开更多

关键词 流数据 在线服务 海量数据管理 数据服务框架 数据管理引擎

在线阅读 下载PDF 职称材料

卫星遥感接收数据的管理与软件开发 被引量：1

9

作者 李军 宋海英 +1 位作者 李海滨 郭思海 《海洋测绘》 2009年第4期70-73,共4页

卫星遥感接收数据是遥感影像应用的重要数据来源,因此对特殊格式的海量接收数据的存储和管理成为卫星遥感应用的重要环节。采用多层存储模式对数据分类、分级存储,建立空间数据库管理空间数据和属性数据。基于ArcEngine开发技术建立卫... 卫星遥感接收数据是遥感影像应用的重要数据来源,因此对特殊格式的海量接收数据的存储和管理成为卫星遥感应用的重要环节。采用多层存储模式对数据分类、分级存储,建立空间数据库管理空间数据和属性数据。基于ArcEngine开发技术建立卫星接收数据管理平台,实现空间数据的快速查询和属性数据的自动入库等高效管理功能。 展开更多

关键词 卫星遥感 海量数据管理 多层存储 ArcEngine开发 数据查询

在线阅读 下载PDF 职称材料

基于谓词索引的海量数据压缩存储及数据操作算法 被引量：3

10

作者 赵锴 李建中 骆吉洲 《计算机科学》 CSCD 北大核心 2005年第9期86-90,159,共6页

压缩数据库技术是海量数据管理的重要技术之一。利用海量数据自身及其数据操作的特点,提出了一种海量数据压缩存储结构。该存储结构将第二级和第三级存储器结合起来,以数据操作条件中的谓词为索引,在减少存储空间的同时有效地支持查询... 压缩数据库技术是海量数据管理的重要技术之一。利用海量数据自身及其数据操作的特点,提出了一种海量数据压缩存储结构。该存储结构将第二级和第三级存储器结合起来,以数据操作条件中的谓词为索引,在减少存储空间的同时有效地支持查询、删除和更新等数据操作。理论分析和实验结果表明,这种存储结构可以提高海量数据的存储效率和数据操作的性能。 展开更多

关键词 谓词索引 压缩数据库 海量数据管理 存储结构 存储效率

在线阅读 下载PDF 职称材料

陕西省可移动文物普查数据成果的信息化管理方法研究 被引量：1

11

作者 周磊 李海泉 +3 位作者 刘越 南竣祥 党军勇 张杰奎 《文博》 北大核心 2019年第2期107-112,共6页

为了对陕西省第一次可移动文物普查数据成果进行管理,从而加强对可移动文物保护、管理和研究,利用信息化技术对普查数据进行管理,建立可移动文物数据库,同时通过对数据检索方法的研究从而提高海量数据的检索效率。建立基于C/S和B/S端的... 为了对陕西省第一次可移动文物普查数据成果进行管理,从而加强对可移动文物保护、管理和研究,利用信息化技术对普查数据进行管理,建立可移动文物数据库,同时通过对数据检索方法的研究从而提高海量数据的检索效率。建立基于C/S和B/S端的管理信息系统平台,从而实现对可移动文物数据进行科学化的管理。 展开更多

关键词 可移动文物普查 海量数据管理 管理信息平台

在线阅读 下载PDF 职称材料

行星数据编目模型的设计与实现 被引量：1

12

作者 李莎莎 陈荦 +1 位作者 陈宏盛 钟志农 《计算机工程》 CAS CSCD 北大核心 2011年第17期227-229,232,共4页

根据行星数据系统(PDS)标准规范、行星数据特点及PDS元数据模型,设计一个行星数据编目模型。通过扩展传统数据编目模型支持数据展示和空间查询,采用对象-关系数据库的方式存储编目信息以实现数据的管理、归档和分发。通过建立行星数据... 根据行星数据系统(PDS)标准规范、行星数据特点及PDS元数据模型,设计一个行星数据编目模型。通过扩展传统数据编目模型支持数据展示和空间查询,采用对象-关系数据库的方式存储编目信息以实现数据的管理、归档和分发。通过建立行星数据编目检索系统验证该模型的正确性和有效性,并表明该模型能提供一致的目录访问接口,使用户方便快速地检索到感兴趣的行星数据。 展开更多

关键词 行星数据系统 海量数据管理 元数据模型 数据编目模型 空间数据库

在线阅读 下载PDF 职称材料

基于云计算的多源遥感数据服务系统研究 被引量：7

13

作者 张树凡 吴新桥 +2 位作者 曹宇 王英洁 张贵峰 《现代电子技术》 北大核心 2015年第3期90-94,共5页

在分析了遥感影像数据及数据使用现状的基础上,综合考虑了云计算技术在遥感应用领域使用的必要性和可行性,设计了基于云计算的多源遥感数据服务系统。阐述了基于云计算的多源遥感数据服务系统体系结构及关键业务流程,包括遥感数据云存... 在分析了遥感影像数据及数据使用现状的基础上,综合考虑了云计算技术在遥感应用领域使用的必要性和可行性,设计了基于云计算的多源遥感数据服务系统。阐述了基于云计算的多源遥感数据服务系统体系结构及关键业务流程,包括遥感数据云存储、遥感数据云处理、遥感数据应用服务及遥感业务注册组装等。最后,通过原型系统的实现验证了系统设计既能保护原始数据的安全,又能降低数据使用的成本,同时还能够提高数据的共享率和用户使用率。 展开更多

关键词 遥感数据处理 云计算 遥感数据服务 海量数据管理

在线阅读 下载PDF 职称材料

中海达iScan-P便携式移动三维激光测量系统概述 被引量：15

14

作者 余建伟 张攀攀 +1 位作者 翁国康 杨晶 《测绘通报》 CSCD 北大核心 2015年第3期140-141,共2页

一、引言i Scan-P是中海达自主研制的便携式移动三维激光测量系统。该系统可单兵背负、自行车搭载和三轮车安装,在载体移动过程中可快速获取高精度定位定姿数据、高密度三维点云和高清连续全景影像数据,并通过系统配备的数据加工处理、... 一、引言i Scan-P是中海达自主研制的便携式移动三维激光测量系统。该系统可单兵背负、自行车搭载和三轮车安装,在载体移动过程中可快速获取高精度定位定姿数据、高密度三维点云和高清连续全景影像数据,并通过系统配备的数据加工处理、海量数据管理和应用服务软件,为用户提供快速、机动、灵活的单兵背包式三维激光全景移动测量完整解决方案。同时,i Scan-P设备体积小、重量轻。 展开更多

关键词 三维激光 iScan-P 三维点云 数据加工 海量数据管理 高精度定位 移动过程 测量系统 应用服务

在线阅读 下载PDF 职称材料

国家实验动物行政许可审批平台设计与实现 被引量：1

15

作者 陈小锋 毛羽 +1 位作者 谢夏 张婷姣 《计算机工程与科学》 CSCD 北大核心 2012年第10期172-176,共5页

网上行政许可审批是二十一世纪的新生事物,是随着互联网的日益发达而催生的,是电子政务最重要、最核心的内容。本文介绍了国家实验动物行政许可审批平台设计与实现方法,实例探讨了如何利用计算机技术为跨学科的管理应用科学服务。

关键词 实验动物 行政许可 信息服务平台 海量数据管理

在线阅读 下载PDF 职称材料

一种面向工业互联网的云存储方法 被引量：11

16

作者 孟祥曦 张凌 +4 位作者 郭皓明 郭黎敏 夏乾臣 吕江花 马世龙 《北京航空航天大学学报》 EI CAS CSCD 北大核心 2019年第1期130-140,共11页

工业互联网是工业信息化进程中最受关注的热点,海量异构数据管理是其中的重点之一。传统的关系数据库(RDB)对海量多源异构数据的读写和检索都存在性能瓶颈,而近年来兴起的云数据管理方法主要是针对"键-值"(K-V)模式,无法依靠... 工业互联网是工业信息化进程中最受关注的热点,海量异构数据管理是其中的重点之一。传统的关系数据库(RDB)对海量多源异构数据的读写和检索都存在性能瓶颈,而近年来兴起的云数据管理方法主要是针对"键-值"(K-V)模式,无法依靠主键以外的数据属性对数据进行快速查找。提出了一种面向工业互联网的云存储方法——StoreCDB,在异构采样数据统一表达数据模型基础上,实现非结构化存储管理,同时,利用两级索引实现海量数据的快速检索。通过实验,在分布式集群实验平台上,采用海量高铁列车运行模拟数据,验证了StoreCDB具有良好的异构数据存储和检索性能,为工业互联网提供了一种新的数据管理方法。 展开更多

关键词 工业互联网 异构数据 海量数据管理 分布式文件系统 分级索引

在线阅读 下载PDF 职称材料