基于开源Hadoop的矢量空间数据分布式处理研究 被引量：16

1

作者 尹芳 冯敏 +1 位作者 诸云强 刘睿 《计算机工程与应用》 CSCD 2013年第16期25-29,共5页

为实现大规模矢量数据的高性能处理,在开源项目Hadoop基础上,设计与开发了一个基于MapReduce的矢量数据分布式计算系统。根据矢量空间数据的特点,通过分析Key/Value数据模型及GeoJSON地理数据编码格式,构建了可存储于Hadoop hdfs的矢量... 为实现大规模矢量数据的高性能处理,在开源项目Hadoop基础上,设计与开发了一个基于MapReduce的矢量数据分布式计算系统。根据矢量空间数据的特点,通过分析Key/Value数据模型及GeoJSON地理数据编码格式,构建了可存储于Hadoop hdfs的矢量数据Key/Value文本文件格式;探讨矢量数据的MapReduce计算过程,对Map数据分片、并行处理过程及Reduce结果合并等关键步骤进行了详细阐述;基于上述技术,建立了矢量数据分布式计算原型系统,详细介绍系统组成,并将其应用于处理关中地区1∶10万土地利用矢量空间数据,取得较好效果。 展开更多

关键词 矢量空间数据 KEY Value GeoJSON APACHE HADOOP MAPREDUCE 分布式处理

在线阅读 下载PDF 职称材料

万维网地理信息系统中矢量空间数据的多线程传输实现技术 被引量：1

2

作者 王继周 李成名 《测绘通报》 CSCD 北大核心 2003年第2期50-52,共3页

在万维网地理信息系统 (WebGIS)应用日益拓展的同时 ,空间数据的传输效率低下成为限制其发展的主要瓶颈之一。目前普遍采用的传输策略主要有两种 :栅格数据传输和矢量数据传输。在分析比较这两种方式的优缺点的基础上 ,提出一种基于Jav... 在万维网地理信息系统 (WebGIS)应用日益拓展的同时 ,空间数据的传输效率低下成为限制其发展的主要瓶颈之一。目前普遍采用的传输策略主要有两种 :栅格数据传输和矢量数据传输。在分析比较这两种方式的优缺点的基础上 ,提出一种基于Java的面向矢量空间数据的多线程传输技术 ,并叙述其原理和具体实现过程。经在实验中验证 ,该方式在同等网络环境下 。 展开更多

关键词 万维网地理信息系统 矢量空间数据 WEBGIS JAVA 空间数据传输 多线程传输技术

在线阅读 下载PDF 职称材料

一种多源矢量空间数据的联动增量更新模型 被引量：8

3

作者 何榕健 戴韫卓 +2 位作者 杜震洪 张丰 刘仁义 《浙江大学学报（理学版）》 CAS CSCD 2013年第5期580-587,共8页

提出了一种可扩展的多源矢量空间数据的联动增量更新模型.该模型以不同来源的矢量空间数据库作为局域网中的数据节点,通过动态建立和维护不同节点的数据之间的依赖关系,并根据依赖关系信息提取和派发增量更新数据,实现了矢量空间数据节... 提出了一种可扩展的多源矢量空间数据的联动增量更新模型.该模型以不同来源的矢量空间数据库作为局域网中的数据节点,通过动态建立和维护不同节点的数据之间的依赖关系,并根据依赖关系信息提取和派发增量更新数据,实现了矢量空间数据节点与节点之间传递联动更新,有效地解决了依靠大量的人工更新操作去维护不同来源的国土资源矢量空间数据库之间现势性和一致性的问题. 展开更多

关键词 多源矢量空间数据 依赖关系 增量更新 传递联动更新

在线阅读 下载PDF 职称材料

基于HBase的矢量空间数据存储与查询方法及其应用 被引量：11

4

作者 李朝奎 王露瑶 +3 位作者 周新邵 唐炉亮 张新长 李扬 《地理科学》 CSSCI CSCD 北大核心 2022年第7期1146-1154,共9页

研究了HBase存储机制,针对现有存储查询方法效率低等缺陷,设计了HBase矢量空间数据存储表模式,如行键、过滤列族、几何列族及非几何列族等,以MapReduce算法为基础改进了原有的区域查询方法,上述改进有效提高了HBase中矢量空间数据查询... 研究了HBase存储机制,针对现有存储查询方法效率低等缺陷,设计了HBase矢量空间数据存储表模式,如行键、过滤列族、几何列族及非几何列族等,以MapReduce算法为基础改进了原有的区域查询方法,上述改进有效提高了HBase中矢量空间数据查询效率。以某地近100 a地质灾害数据进行实验,结果表明:设计的存储模型可行,查询算法与传统查询算法相比效率更高;由于MapReduce运行过程中的通信等原因,当数据量小于5万级时,算法优势并不明显;当数据量大于10万级时,算法查询时间低于原来的1/2,而数据量达到100万级时,算法查询时间仅为算法改进前查询时间的1/20。数据量越大,并行化处理优势越明显。 展开更多

关键词 HBASE 矢量空间数据 存储与查询 MAPREDUCE 算法设计

在线阅读 下载PDF 职称材料

一种抗投影攻击的矢量空间数据盲水印算法 被引量：4

5

作者 张黎明 闫浩文 吕文清 《遥感信息》 CSCD 北大核心 2017年第1期175-180,共6页

鉴于含水印矢量空间数据在使用过程中可能会经过多次投影变换或坐标系变换,水印嵌入时的坐标系未知情况下,现有的矢量空间数据水印算法普遍存在不能提取水印信息的问题,提出了一种对坐标系变换和投影变换攻击鲁棒性高的矢量空间数据水... 鉴于含水印矢量空间数据在使用过程中可能会经过多次投影变换或坐标系变换,水印嵌入时的坐标系未知情况下,现有的矢量空间数据水印算法普遍存在不能提取水印信息的问题,提出了一种对坐标系变换和投影变换攻击鲁棒性高的矢量空间数据水印算法。针对矢量空间数据坐标系变换和投影变换的特点,在水印嵌入过程中,首先把原始矢量空间数据变换到WGS84地理坐标系下,然后运用离散傅里叶变换域水印算法,将水印嵌入到WGS84坐标系,最后把含水印的WGS84坐标系空间数据转换到原始数据坐标系。在水印提取时,把矢量空间数据从原坐标系转换到WGS84坐标系后提取水印。试验表明,该算法可有效抵抗坐标系变换和投影变换的攻击,并且对数据的裁剪、旋转、平移等攻击具有较强的鲁棒性。 展开更多

关键词 投影攻击 投影变换 坐标系变换 矢量空间数据 盲水印 DFT

在线阅读 下载PDF 职称材料

多源矢量空间数据可用性在数据生产中的应用 被引量：1

6

作者 陈换新 孙群 +4 位作者 徐立 杨佳 程绵绵 马京振 王俊超 《测绘通报》 CSCD 北大核心 2021年第S01期316-320,共5页

空间数据生产中现有资料的分析主要依赖专家决策,主观性较强且执行效率低。本文将空间数据可用性用于数据生产中,通过对空间数据生产密切相关的可用性指标进行评估,准确掌握多源矢量数据的具体差异,辅助制定科学合理的生产方案。试验结... 空间数据生产中现有资料的分析主要依赖专家决策,主观性较强且执行效率低。本文将空间数据可用性用于数据生产中,通过对空间数据生产密切相关的可用性指标进行评估,准确掌握多源矢量数据的具体差异,辅助制定科学合理的生产方案。试验结果证明,该方法科学有效,在提高数据生产效率、保证数据质量方面,具有一定的实用性。 展开更多

关键词 多源矢量空间数据 可用性 数据生产

在线阅读 下载PDF 职称材料

运用GD-PBIBD编码的矢量空间数据数字指纹算法 被引量：4

7

作者 陈金萍 张黎明 +1 位作者 蒋美容 王昊 《测绘通报》 CSCD 北大核心 2020年第8期81-86,100,共7页

针对矢量空间数据叛逆者追踪难及编码效率低的问题,本文提出了一种运用GD-PBIBD码的指纹算法。首先运用GDPBIBD构造指纹编码,将待嵌入指纹序列运用Logistic映射置乱,通过D-P算法提取矢量空间数据的特征点,对特征点实施DFT变换得到相位... 针对矢量空间数据叛逆者追踪难及编码效率低的问题,本文提出了一种运用GD-PBIBD码的指纹算法。首先运用GDPBIBD构造指纹编码,将待嵌入指纹序列运用Logistic映射置乱,通过D-P算法提取矢量空间数据的特征点,对特征点实施DFT变换得到相位系数和幅度系数;然后运用QIM方法将指纹嵌入DFT变换域的幅度系数上;最后应用DFT逆变换得到含指纹的矢量空间数据。试验选取部分中国路网数据和某区域绿地数据,运用该算法嵌入指纹后,对其进行线性和非线性模拟攻击,成功提取指纹序列,利用汉明距离追踪出合谋者。该算法编码构造简单,在码长一定的情况下,较BIBD码可容纳更多的用户,效率高;算法抗单用户指纹攻击及多重攻击的稳健性较好,也能够抵抗多用户最小值和最大最小值攻击,追踪到所有叛逆者,可用于矢量空间数据版权保护,为矢量空间数据叛逆者追踪提供依据。 展开更多

关键词 矢量空间数据 指纹编码 GD-PBIBD 抗合谋攻击 傅里叶变换

在线阅读 下载PDF 职称材料

多源矢量空间数据中面状水域几何准确性及现势性评估方法

8

作者 陈换新 温伯威 +4 位作者 朱蕊 常正阳 程绵绵 王俊超 常丽君 《测绘通报》 CSCD 北大核心 2022年第3期161-165,共5页

多源矢量空间数据的评估方法一直以来比较欠缺。目前常用的专家决策方法,主要依赖专家的人工参与,不仅主观性强、执行效率低,而且使用门槛高。本文提出了多源矢量空间数据中面状水域的几何准确性与现势性评估方法,可以“量化”描述不同... 多源矢量空间数据的评估方法一直以来比较欠缺。目前常用的专家决策方法,主要依赖专家的人工参与,不仅主观性强、执行效率低,而且使用门槛高。本文提出了多源矢量空间数据中面状水域的几何准确性与现势性评估方法,可以“量化”描述不同数据几何准确性与现势性的差异,并将评估结果可视化表达。试验结果表明,该方法科学客观、可靠有效。 展开更多

关键词 多源矢量空间数据 不变矩 几何准确性评估 现势性评估 面状水域

在线阅读 下载PDF 职称材料

多源矢量空间数据可用性评估的可视分析 被引量：1

9

作者 陈换新 马超 +4 位作者 张吉才 陈长林 秦志强 马京振 汪亚群 《测绘通报》 CSCD 北大核心 2021年第9期74-76,77,78,共5页

本文将可视分析引入到多源矢量空间数据可用性评估中,为用户提供探索发现数据可用性的环境。在论证可行性的基础上,制定了多源矢量空间数据可用性评估可视分析应遵循的基本原则。在反映多源空间数据的同时,根据用户需求确定评估内容,触... 本文将可视分析引入到多源矢量空间数据可用性评估中,为用户提供探索发现数据可用性的环境。在论证可行性的基础上,制定了多源矢量空间数据可用性评估可视分析应遵循的基本原则。在反映多源空间数据的同时,根据用户需求确定评估内容,触发相应模型计算并可视化表达,将用户需求、人脑认知通过交互界面和计算机算法模型相结合,允许用户按照自身需求了解不同数据的各种信息,帮助用户发现隐藏在数据中的知识,进而制定科学合理的数据使用方案。 展开更多

关键词 多源矢量空间数据 可用性 可视分析 人机交互 可视化

在线阅读 下载PDF 职称材料

一种矢量地理空间数据文件细粒度访问控制模型 被引量：9

10

作者 毛健 朱长青 +1 位作者 张兴国 苏笛 《地理与地理信息科学》 CSCD 北大核心 2017年第1期13-18,共6页

访问控制的任务是在为用户提供最大资源共享的基础上,防止用户对信息的越权篡改和滥用,以保证信息的安全,它是解决当前日益突出的地理空间数据共享与安全矛盾的关键。针对现有地理空间数据文件访问控制存在控制形式单一、缺少合适地理... 访问控制的任务是在为用户提供最大资源共享的基础上,防止用户对信息的越权篡改和滥用,以保证信息的安全,它是解决当前日益突出的地理空间数据共享与安全矛盾的关键。针对现有地理空间数据文件访问控制存在控制形式单一、缺少合适地理空间数据文件特征的访问控制理论模型支撑的问题,结合地理空间数据的多尺度特征与属性特征,通过扩展元属性、引入加解密机制,提出了一种基于属性的访问控制模型——GDF-ABAC模型。该模型支持多种粒度的访问控制,具有良好的灵活性与可扩展性。最后,研究基于GDF-ABAC模型,实现了Shapefile格式数据的要素级细粒度访问控制,验证了模型的有效性与实用性。 展开更多

关键词 矢量地理空间数据文件 访问控制模型 细粒度

在线阅读 下载PDF 职称材料

基于面向对象数据库的空间数据管理 被引量：11

11

作者 沈敬伟 周廷刚 +2 位作者 温永宁 罗洁琼 孙晨阳 《西南大学学报（自然科学版）》 CAS CSCD 北大核心 2013年第4期132-137,共6页

当前,关系型数据库与面向对象程序设计语言之间不匹配,造成了数据存取效率低下.为此,提出一种基于面向对象空间数据库的空间数据管理方案.分析现有的空间数据类型,设计矢量空间数据结构、栅格空间数据结构和影像数据结构分别表达矢量、... 当前,关系型数据库与面向对象程序设计语言之间不匹配,造成了数据存取效率低下.为此,提出一种基于面向对象空间数据库的空间数据管理方案.分析现有的空间数据类型,设计矢量空间数据结构、栅格空间数据结构和影像数据结构分别表达矢量、栅格和影像数据,并阐述了矢量、栅格和影像数据的面向对象数据库管理方案.基于开源的面向对象数据库db4o,开发了空间数据管理原型系统,实现了矢量、栅格和影像空间数据的一体化管理,并对空间数据进行可视化.因此,基于面向对象数据库能够实现多源、异构的空间数据管理. 展开更多

关键词 面向对象数据库 矢量空间数据 栅格空间数据 影像空间数据

在线阅读 下载PDF 职称材料

多尺度矢量简单几何实体数据几何匹配方法研究 被引量：12

12

作者 黄蔚 蒋捷 《遥感信息》 CSCD 2011年第1期27-31,共5页

数据匹配是空间数据整合及跨尺度数据更新的关键问题之一,其实质是识别出多尺度矢量空间数据中的同名地物,并建立彼此间的关联。数据匹配的技术手段包括语义与几何匹配两种,本文系统地阐述了几何匹配方法,提出了适用于多尺度矢量空间数... 数据匹配是空间数据整合及跨尺度数据更新的关键问题之一,其实质是识别出多尺度矢量空间数据中的同名地物,并建立彼此间的关联。数据匹配的技术手段包括语义与几何匹配两种,本文系统地阐述了几何匹配方法,提出了适用于多尺度矢量空间数据的三种匹配模式,可有效解决多尺度数据间点-点,线-线、线-面、点-面、面-面的几何匹配问题。 展开更多

关键词 几何匹配 多尺度 矢量空间数据 数据整合

在线阅读 下载PDF 职称材料