-
题名云储存海量数据的采集方法研究
- 1
-
-
作者
邓文雯
孙成明
秦培亮
-
机构
弗吉尼亚理工大学会计和信息系统学院
苏州农业职业技术学院智慧农业学院
扬州大学农学院
-
出处
《现代电子技术》
北大核心
2018年第14期10-13,共4页
-
基金
2016年江苏省农业三新工程项目(SXGC[2016]300)
资助留学基金:2014年江苏省政府留学奖学金资助访问学者(200)~~
-
文摘
针对传统数据采集方法主要通过数据特征采集,忽略采集过程对数据特征造成的影响,导致数据采集耗时长、误差大的问题,提出基于REID技术与F统计计量结合的云储存海量数据采集方法。在分析数据采集原理的基础上,对云储存的原始数据进行非线性补偿,设置参数对数据进行预处理,建立一种能够对内存进行直接访问的硬件机制,给出部分传输程序;采用聚类算法对云储存数据进行聚类,结合F统计计量进行检验所建立的判别函数的有效性,实现对云储存海量数据的采集。实验结果表明,采用改进方法进行云储存数据采集时,其采集结果相比传统方法精度及完整度均有提高,具有一定的优势。
-
关键词
云储存
海量数据采集
REID技术
F统计计量
非线性补偿
聚类算法
-
Keywords
cloud storage
mass data acqulsltlon
REID technology
F statistical metrology
nonlinear compensatlon
clustering algorithm
-
分类号
TN911-34
[电子电信—通信与信息系统]
TP391
[自动化与计算机技术—计算机应用技术]
-
