面向有效载荷高速数据流的数据处理方法

作者： 王静 ^1,2 王春梅 ¹ 智佳 ¹ 杨甲森 ¹ 陈托 ¹
作者单位：

1. 中国科学院国家空间科学中心北京 100190

2. 中国科学院大学北京 100049
提交时间：2017-03-10 11:31:19

摘要: 针对卫星有效载荷数传数据传输速度快、实时处理难等特点，提出一种面向有效载荷高速数据流的实时数据处理方法。该方法借鉴MapReduce的多线程并行模式，采用hash算法与归并排序算法相结合的方式，提高数据处理吞吐率，实现实时处理；采用基于XTCE(XML Telemetry & Command Exchange)数据模型的参数解析算法，实现通用性。实验表明该方法能够满足有效载荷对数据处理的实时性和正确性的要求。

有效载荷高速数据流数据处理 MapReduce 吞吐率 XTCE

分类： 地球科学 >> 空间物理学
引用： ChinaXiv:201703.00277 (或此版本 ChinaXiv:201703.00277V1)
DOI:10.12074/201703.00277V1
CSTR:32003.36.ChinaXiv.201703.00277.V1
推荐引用方式： 王静,王春梅,智佳,杨甲森,陈托.(2017).面向有效载荷高速数据流的数据处理方法.中国科学院科技论文预发布平台.[ChinaXiv:201703.00277] (点此复制)

版本历史

[V1]

2017-03-10 11:31:19

ChinaXiv:201703.00277V1

下载全文

相关论文推荐

1. 柴达木盆地可鲁克湖-托素湖自然保护区鸟类多样性	2024-04-29
2. 气候变化下新疆乌伦古河上游蒙新河狸的潜在分布变化	2024-04-29
3. 基于PLUS和InVEST模型的乌鲁木齐市碳储量时空演变与预测	2024-04-29
4. 新疆能源消费碳排放时空特征及能源结构调整路径探讨	2024-04-29
5. 系统发育和植物功能性状对新疆木本植物开花物候变化的影响	2024-04-29
6. 生态系统服务权衡及其影响因素——以黄河流域山西段为例	2024-04-29
7. 土壤含水量对探地雷达探测植物根系构型精度的影响	2024-04-29
8. 祁连山典型植被土壤碳、氮、磷含量及生态化学计量特征的垂直变化	2024-04-29
9. 河西走廊中段荒漠植被组成及土壤养分空间分布特征	2024-04-29
10. 干旱砾漠区不同微地貌单元土壤性状及真菌群落变化特征	2024-04-29


公开评论匿名评论仅发给作者