期刊文献+
共找到8篇文章
< 1 >
每页显示 20 50 100
基于HBase的气象地面分钟数据分布式存储系统 被引量:25
1
作者 陈东辉 曾乐 +1 位作者 梁中军 肖卫青 《计算机应用》 CSCD 北大核心 2014年第9期2617-2621,共5页
针对气象地面分钟数据要素多样、信息量大、产生频次高等特点,传统的关系型数据库系统在存储和管理数据上出现负载饱满、读写性能不理想等问题。结合对分布式数据库HBase的存储模型的研究,行主键(row key)采用时间加站号的方式设计了气... 针对气象地面分钟数据要素多样、信息量大、产生频次高等特点,传统的关系型数据库系统在存储和管理数据上出现负载饱满、读写性能不理想等问题。结合对分布式数据库HBase的存储模型的研究,行主键(row key)采用时间加站号的方式设计了气象分钟数据存储结构模型,实现对海量气象数据的分布式存储和元信息管理。对HBase的唯一索引在面对气象业务的复杂查询用例时响应时间过长的问题,使用搜索引擎solr提供的API接口并参考气象业务中的查询用例对相关字段建立辅助索引,来满足业务检索时效。实验结果表明,该系统具有很好的存储能力和检索效率,入库效率最高可达每秒34000条,并且在常规查询用例的结果返回时效达到毫秒级,能够满足大规模气象数据在业务应用中对存储和查询时效的性能要求。 展开更多
关键词 分钟数据 分布式存储 HADOOP SOLR HBASE 辅助索引
在线阅读 下载PDF
巧利用AWS文件找回自动气象站分钟数据
2
作者 吴玉影 王驰 吴琼 《林业勘查设计》 2010年第3期77-78,共2页
自动站的J文件(分钟数据文件)时常有缺测现象,这样导致与A文件(正点数据文件)不符,通过查找原因,可以找回分钟数据文件,使自动站正点数据文件(A文件)与J文件(分钟数据文件)相符,从而提高资料完整性。
关键词 分钟数据文件 采集器 数据导入
在线阅读 下载PDF
基于聚类和LSTM的电力分钟冻结数据缺失值填充方法 被引量:21
3
作者 卢继哲 刘宣 +3 位作者 唐悦 阿辽沙·叶 侯帅 叶方彬 《控制工程》 CSCD 北大核心 2022年第4期611-616,共6页
在用电信息采集系统中,由于采集和配电设备的海量接入,终端获取的分钟冻结数据普遍存在缺失。针对该问题,提出一种基于聚类的时间序列预测方法填充缺失值。该方法利用终端获取的分钟冻结数据具有时序自相似和关联性特征,首先对终端聚类... 在用电信息采集系统中,由于采集和配电设备的海量接入,终端获取的分钟冻结数据普遍存在缺失。针对该问题,提出一种基于聚类的时间序列预测方法填充缺失值。该方法利用终端获取的分钟冻结数据具有时序自相似和关联性特征,首先对终端聚类,使具有相似时序特征的终端在同一分组,针对长时间序列具有的高维特征造成聚类困难的问题,使用自编码器降维,提高聚类性能;然后,对各分组建立基于长短期记忆(LSTM)单元的神经网络模型预测缺失值。实验结果表明该方法能有效利用终端时间序列的特性,验证了基于自编码器的聚类可提升预测性能。 展开更多
关键词 用电信息采集系统 分钟冻结数据 缺失值填充 聚类 LSTM
在线阅读 下载PDF
分钟观测数据文件(J文件)的预审
4
作者 张志萍 《现代农业科技》 2010年第15期339-339,343,共2页
对台站报表制作中分钟观测数据文件(即J文件)的预审常用方法、预审中常见问题及其处理方法作一探析,供测报人员参考。
关键词 分钟观测数据文件 预审方法 常见问题 处理方法
在线阅读 下载PDF
地面数据传输及质量控制实例分析
5
作者 马繁东 李文福 +2 位作者 吕红玉 杨艳龙 陆忠涛 《安徽农业科学》 CAS 2014年第22期7521-7525,共5页
详细阐述地面测报软件主辅通道上传数据时间设置以及数据上传不成功的处理方法。自动站采集气温、本站气压、相对湿度、风向、风速以及雨量正点数据如果判断是错误数据,应按先分钟数据替代,然后人工数据替代,最后内插的原则修改,保存形... 详细阐述地面测报软件主辅通道上传数据时间设置以及数据上传不成功的处理方法。自动站采集气温、本站气压、相对湿度、风向、风速以及雨量正点数据如果判断是错误数据,应按先分钟数据替代,然后人工数据替代,最后内插的原则修改,保存形成正确上传文件;台站预审人员应正确进行月报表A文件一般性备注和历史沿革备注。 展开更多
关键词 数据传输 正点数据 分钟数据 质量控制
在线阅读 下载PDF
自动气象站数据跳变分析与探讨 被引量:1
6
作者 张雪颖 郑亚兵 李小凯 《安徽农学通报》 2009年第17期157-157,177,共2页
通过对自动气象站各要素跳变数据的要素类别、出现时段、影响干扰、伴随天气现象等条件进行综合分析,找到了一些造成数据跳变的原因,并针对这些原因摸索出了具体的解决方法和处理措施。
关键词 自动气象站 分钟数据跳变 处理措施
在线阅读 下载PDF
自动站采集器“死机”期间记录的处理 被引量:6
7
作者 章敬国 叶明义 胡在洪 《气象》 CSCD 北大核心 2006年第12期117-119,共3页
自动气象站在使用中因各种原因造成分钟数据丢失的情况时有发生,从而影响了记录的连续性、完整性。针对此问题,着重探讨利用人工自记记录进行自动站缺测部分分钟数据的替换、对分钟数据进行恢复,使记录连续完整且具有真实性。有效地解... 自动气象站在使用中因各种原因造成分钟数据丢失的情况时有发生,从而影响了记录的连续性、完整性。针对此问题,着重探讨利用人工自记记录进行自动站缺测部分分钟数据的替换、对分钟数据进行恢复,使记录连续完整且具有真实性。有效地解决了自动站分钟数据丢失时记录处理的实际问题。 展开更多
关键词 分钟数据 自记记录 替换 自动站采集器
在线阅读 下载PDF
县级灾害性天气监测报警系统设计与实现
8
作者 干兆江 《现代农业科技》 2018年第14期207-208,共2页
基于全国气象部门统一布设的新型自动气象站,使用C#语言编写程序,读取并分析分钟级观测数据文件,根据设定的参数进行灾害性天气的报警,并利用图文、声音和记录日志的方式,提醒业务人员及时发布气象灾害预警信号,提高气象灾害预警信号发... 基于全国气象部门统一布设的新型自动气象站,使用C#语言编写程序,读取并分析分钟级观测数据文件,根据设定的参数进行灾害性天气的报警,并利用图文、声音和记录日志的方式,提醒业务人员及时发布气象灾害预警信号,提高气象灾害预警信号发布的准确率和及时性。 展开更多
关键词 灾害性天气 监测报警 新型自动气象站 分钟级观测数据 系统设计
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部