基于Spark的试飞遥测数据准实时分析技术研究

针对传统试飞遥测数据准实时分析系统,单机环境下运行难以实时处理多路并发遥测数据,针对特定机型、特定试飞专业科目开发造成平台通用性差、可扩展性低等问题,提出基于Spark的试飞遥测数据准实时分析技术。该技术充分发挥Spark内存计算的核心机制,流批一体的计算功能,历史数据和实时数据联合分析的优势,提高了实时采集数据的吞吐量以及准实时分析的计算速度。通用算法库的设计,实现了多机型多试飞科目的开发功能,提高了系统的灵活性。因此,该项技术可以提高试飞效率,缩短测试周期,降低试飞风险。