Spark Streaming中参数与资源协同调整策略

Spark Streaming是一种典型的批量流式计算平台,可用于处理持续到达的数据流。流式数据最重要的两个特征是波动性和时效性。利用动态调整系统参数和动态调整资源满足不同数据到达速率的响应延迟,但调整参数的方式具有局限性,其用户成本较大。因此提出一种参数和资源协同调整策略,采用动态邻域粒子群算法找到一种满足SLO目标且使用资源最少的系统方案。实验表明,AdaStreaming与DyBBS相比,延迟性降低了70.1%,在资源使用量上比DRA降低了42.1%。     

动态力学

任何力均是两物体间的相互作用力,施力物体与受力物体并生并存,单独物体不能形成力,力必须依附于物体,不能凭空存在。光速不可超越是因为受力物体的速度不可能超过施力物体的速度,而施力物体受制于自身条件存在速度极限,就如一个人推车的速度不可能超过其跑步的最快速度。牛顿经典力学认为质量与速度无关是正确的,实验数据证明,当受力物体的速度接近施力物体的极限速度时,实际作用力变的非常小,使得速度很难进一步增加。动态力学的这一原理适用于任何力学现象,包括粒子加速器中的带电粒子,由于粒子加速器中的带电粒子不能超越光速并非因其质量增大,而是其实际受力随速度增加呈指数式衰减,故爱因斯坦狭义相对论的质能公式是错误的,牛顿经典力学认为能量与质量相互独立的理论是正确的。     

基于图像处理的工件检测

研究了基于图像处理的工件轮廓检测技术的流程及算法,通过图像滤波、图像增强、阈值分割、边缘检测、边缘定位和参数测量及拟合等一系列算法,可以测出被检测工件是否符合要求及其误差范围。     

粒子群算法的改进研究

粒子群算法具有在优化过程中需要调整的参数不多,结构简单,收敛速度快等特点。在分析其他改进粒子群算法的基础上,提出了一种新的粒子群协同优化算法。通过测试函数测试表明,新的粒子群协同优化算法明显提高了算法的收敛性能。     

直流电源电路接地耦合干扰成因分析及处理

直流电源电路中的滤波电路作用是为了获得较为平滑的直流电压,把脉动直流电中的脉动成分滤除,电容滤波电路是最为常用的电路之一。在实际应用中,滤波电路不仅要对整流电路输出的单向脉动性直流电压中交流电脉动成分进行滤除,还要去掉直流电源中的各种干扰。     

O-200kPa气动控制信号检测系统的设计

为检测气动执行器常用控制信号0-200kPa气压,设计了基于MSP430单片机和压阻式压力传感器MPX2200的气压检测系统．阐述了检测系统的软硬件设计,给出了MPX2200恒流源电路和放大倍数可调的两级放大电路,介绍了软件设计中的标度变换、分段插值和中值滤波方法．该系统在电路设计上选用仪用放大器、单片机自带AD转换器,所用元器件少、功耗低、精度高,可广泛应用于智能化、低功耗化的气动执行机构及其元器件的设计中．     

非减性Dither与过采样技术在低频模拟采集系统中的应用

Dither技术是提高多通道模拟采集系统动态性能的有效方法。通过分析Dither技术改善采集系统无杂散动态范围(SFDR)的原理,搭建了多通道模拟采集系统测试平台,通过FPGA控制A/DC对输入的满量程正弦信号采样,利用过采样和均值滤波技术来提高采集精度。实验结果表明:采集系统的动态性能明显改善,SFDR从71 dB提高到78 dB,SNR下降了1.2 dB。     

SPH-DEM流固耦合方法模拟金沙江白格滑坡应用研究

从力学本质来讲,滑坡属于滑坡动力学和水动力学复杂流固耦合问题。采用离散元方法(DEM)模拟滑坡体大变形、不连续问题,以光滑粒子流方法(SPH)模拟水体的流体动力学特性,充分利用不同数值计算方法的特点,构建SPH-DEM流固耦合算法,并应用于2018年10月10日西藏白格滑坡堵江的灾害模拟中。结果显示计算模型能较为准确地捕捉滑坡碎屑体入江激起水砂射流的规模以及范围,再现主堆积区向次堆积区产生二次滑移的动力过程,完整刻画堆积体的厚度、几何形态和断面特征。仿真结果有助于进一步深化对高速高位滑坡产生堵江过程和机理的认识,为后续进行抢险施工组织设计,制定防灾减灾策略提供参考。     

粒子群优化的加权核范数低秩矩阵补全算法

针对加权核范数最小化矩阵补全方法存在阈值决策函数单一、收敛精度不高等问题,提出一种粒子群优化的加权核范数最小化低秩矩阵补全算法。改进算法利用粒子群的启发式智能搜索能力,为待恢复矩阵的奇异值自适应地匹配恰当的阈值,以提升算法的收敛性能。改进工作主要包括：（1）设计多种奇异值阈值决策函数,为矩阵提供多种阈值分配策略;（2）改进粒子群的速度迭代公式,提出基于余弦函数的速度惯性调节公式以增强粒子群的全局搜索性能;（3）利用改进的粒子群优化算法为阈值决策函数搜索最优的参数组合,然后再通过阈值决策函数生成奇异值的阈值,重构恢复结果并提升算法的收敛精度。在人工数据和图像数据上的实验结果表明,与加权核范数最小化方法、奇异值阈值化方法以及低秩矩阵拟合方法相比,改进方法具有收敛精度更高、恢复结果更清晰等优势。     

主客观信息融合的港口综合能源系统评价指标体系

为建立绿色港口,实现港口的节能环保,对港口综合能源系统(port integrated energy system,PIES)的评价方法进行研究,提出一种主客观信息融合的PIES评价指标体系,将主观评价与数理统计模型进行结合,兼顾评价过程中的主客观因素,并采用基于马氏距离的统计检验方法对评分矩阵进行修正,实现对PIES的全面评价。通过青岛港董家口港区的调研数据,验证该方法的有效性。