期刊文献+
共找到1篇文章
< 1 >
每页显示 20 50 100
基于分布式集群架构的遥感数据传输机制 被引量:9
1
作者 刘美佳 张箐 《计算机工程》 CAS CSCD 北大核心 2021年第10期180-185,共6页
对地观测遥感卫星数据传输系统采用Linux虚拟服务器集群架构传输遥感卫星数据,而该集群中承载传输任务的新旧服务器在实现断点续传的过程中由于控制信息不同步会造成数据片重复。设计一种基于分布式系统架构的遥感卫星数据处理机制DPM,... 对地观测遥感卫星数据传输系统采用Linux虚拟服务器集群架构传输遥感卫星数据,而该集群中承载传输任务的新旧服务器在实现断点续传的过程中由于控制信息不同步会造成数据片重复。设计一种基于分布式系统架构的遥感卫星数据处理机制DPM,采用Kafka消息队列快速存储数据包,利用代码模块使Spark Streaming精准提交消息偏移量,并通过数据传输速率与进度统计实时记录DPM运行状态信息。测试结果表明,DPM机制可精准记录与提交消息偏移量并实现数据续传功能,从而确保遥感卫星数据的准确稳定传输。 展开更多
关键词 数据传输系统 遥感卫星数据 分布式系统架构 数据处理机制 Kafka消息队列
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部